Ürün sayfası optimizasyonu: App Store'da A/B testi
Ürün sayfası optimizasyonu (PPO), App Store'un yerleşik A/B testidir: ikonunun, ekran görüntülerinin ve uygulama önizlemelerinin en fazla üç alternatif sürümünü, iOS ve iPadOS 15 ve sonrasındaki App Store ziyaretçilerinin bir kısmına 90 güne kadar, aynı anda tek test olarak gösterirsin ve dönüşüm oranlarını App Analytics'te orijinal sayfanla karşılaştırırsın.
Ürün sayfası optimizasyonunun kuralları neler?
| Kural | Sınır |
|---|---|
| Test başına varyant | En fazla 3, artı orijinal sayfan |
| Bir varyant neyi değiştirebilir | Uygulama ikonu, ekran görüntüleri, uygulama önizlemeleri (ve başlık ile arama yaratıcı öğeleri) |
| Aynı anda çalışan test | 1 |
| En uzun süre | 90 gün ya da sen durdurana kadar |
| Başladıktan sonra düzenleme | Mümkün değil; durdur ve yeni test oluştur |
| Varyantları kim görür | iOS 15 / iPadOS 15 ve sonrasındaki App Store ziyaretçilerinin rastgele bir kısmı |
| İkon varyantları | İkonlar yayındaki sürümün binary'sinde alternatif ikon olarak bulunmalı; 1024×1024 px, Xcode 13 ya da sonrasıyla derlenmiş |
| Uygulama durumu | Ready for Distribution (ya da Pre-Order Ready for Distribution) ve App Store'da yayında |
| Kullanılamadığı yerler | Özel ürün sayfaları, Apple Watch ve iMessage ürün sayfaları |
| Sonuçlar ne zaman görünür | Teste bağlı beş ilk indirmeden sonra App Analytics'te |
| Referans adı | En fazla 64 karakter |
Ad, alt başlık, açıklama ve tanıtım metni gibi metinler PPO ile test edilemez. Varyantlar, uygulamanın desteklediği dillerin tümüne ya da bir kısmına yerelleştirilebilir.
Trafik nasıl bölünür?
Bir trafik oranı (traffic proportion) seçersin: orijinal sayfa yerine herhangi bir varyantı gören ziyaretçilerin payı. Bu pay varyantlar arasında eşit bölünür. %30 trafik ve üç varyantla her varyant %10, orijinal %70 alır. %40 ve iki varyantla her varyant %20, orijinal %60 alır. Her kişi test boyunca aynı varyantı görür. Bir varyantta alternatif ikon varsa, o kişi indirdikten sonra ana ekranında da o ikonu görür.
Varyantlar da orijinalin gibi arama sonuçlarında ve Today, Games ve Apps sekmelerinde görünebilir.
Adım adım nasıl test oluşturulur?
- App Store Connect'te Apps'e git, uygulamanı seç ve kenar çubuğunda Product Page Optimization'a tıkla.
- Create Test'e tıkla (daha önce test çalıştırdıysan Product Page Optimization'ın yanındaki ekle düğmesine).
- Bir reference name gir, örneğin "İkon rengi testi, 3 ikon".
- Varyant sayısını seç (en fazla üç). Daha çok varyant, sonuca ulaşmak için daha çok zaman ister.
- Trafik oranını seç.
- Dahil edilecek dilleri (localizations) seç. Hariç tutulan dillerdeki ziyaretçiler testin parçası olmaz.
- İsteğe bağlı ama faydalı: Estimate Your Test Duration'ı aç ve yakalamayı umduğun dönüşüm artışını seç. App Store Connect, gereken gün ve gösterim sayısını tahmin etmek için günlük gösterimlerini ve indirmelerini kullanır.
- Create Test'e tıkla.
Sonra varyantları yapılandır:
- Sonuçlar sonradan okunur olsun diye Treatment A, B, C'yi Edit Name ile yeniden adlandır.
- İkonlar için App Icon sekmesini aç (yalnızca binary'nde birden fazla ikon varsa görünür) ve bir varyantın altındaki Change'e tıkla.
- Ekran görüntüleri ve önizlemeler için App Previews and Screenshots'ı (yaratıcı öğeler için Header and Search Results'ı) aç, yeni dosya yükle ya da Browse Assets'i kullan. Dokunmadığın cihaz boyutları orijinal sayfanın öğelerini kullanır.
Son olarak başlat: testi aç ve Start Test'e tıkla. Yeni meta verinin incelenmesi gerekiyorsa Add for Review'a tıkla, bir gönderime ekle ve Submit for Review. Yeni ikon içermeyen testler, yeni uygulama sürümü olmadan incelenebilir. Mevcut ekran görüntülerinin sırasını değiştirmek ya da zaten yayımlanmış bir ikona geçmek yeni inceleme gerektirmez.
Bir test ne kadar sürmeli?
Güvenilir bir sonuca ulaşana kadar, ama 90 günden fazla değil. Apple, bir varyantı uygulamadan ya da testi durdurmadan önce en az bir varyantın başlangıç sayfasından daha iyi ya da daha kötü olduğunun en az %90 güvenle gösterilmesini beklemeyi önerir. 7. adımdaki tahmin, trafiğinin önemsediğin değişikliği 90 gün içinde yakalayıp yakalayamayacağını önceden söyler. Tahmin yakalayamayacağını söylüyorsa daha büyük bir değişikliği test et (renk ayarı yerine yeni bir ilk ekran görüntüsü) ya da daha az varyant kullan.
Test sürerken test edilen öğeleri değiştiren yeni bir uygulama sürümü çıkarmaktan kaçın. Apple bunun sonuçları etkileyebileceğini belirtir.
Sonuçlar nasıl okunur ve uygulanır?
App Analytics'i aç, testi seç ve her varyant için gösterimleri, dönüşüm oranını, başlangıca göre iyileşmeyi ve güven düzeyini oku. Varyantları birbiriyle karşılaştırmak için başlangıç noktasını (baseline) değiştirebilirsin.
Kazananı uygulamak için varyantı orijinal ürün sayfasına uygula. Bunu test sürerken yapmak testi bitirir. Kazanan varyant alternatif bir ikon kullanıyorsa, bir sonraki uygulama sürümünde onu birincil ikon da yap. Durdurulan bir test yeniden başlatılamaz; aynı varyantlarla yeni bir test oluştur.
Önce neyi test etmeliyim?
Ziyaretçilerin çoğunun gördüğünü ve en çok farkı yaratanı test et:
- İlk ekran görüntüsü. Arama sonuçlarında ve sayfanın en üstünde görünür.
- İlk üç ekran görüntüsünün sırası. Ucuzdur: onaylı ekran görüntülerinin sırasını değiştirmek inceleme gerektirmez.
- Uygulama önizlemesi var ya da yok. Önizlemeler ekran görüntülerinden önce oynar; seninkinin işe yarayıp yaramadığını test et.
- İkon. Her yerde görünür, ama ikon testleri ikonların yayındaki binary'de olmasını ister.
Her varyantta tek bir fikri değiştir. Bir varyant ikonu ve tüm ekran görüntülerini aynı anda değiştirirse hangi değişikliğin işe yaradığını bilemezsin. Karelere ne koyacağına dair daha fazla fikir dönüşüm getiren mağaza ekran görüntüsü tasarımı rehberinde.
Google Play mağaza girişi deneyleriyle nasıl karşılaştırılır?
| App Store PPO | Google Play mağaza girişi deneyleri | |
|---|---|---|
| Test başına varyant | En fazla 3 varyant | En fazla 2 varyant |
| Aynı anda test | 1 | 1 varsayılan grafik deneyi ya da en fazla 5 yerelleştirilmiş deney |
| Neyi test edebilirsin | İkon, ekran görüntüleri, önizlemeler, başlık ve arama öğeleri | İkon, öne çıkan grafik, ekran görüntüleri; yerelleştirilmiş deneylerde kısa ve uzun açıklama |
| Süre | 90 güne kadar | 6 ay sonra kendiliğinden durur; Play gereken süreyi tahmin eder |
| Metin testi | Hayır | Evet, yerelleştirilmiş deneylerde |
| Hedef metrik | Dönüşüm oranı | Tekil kullanıcı yükleme tıklamaları, açma tıklamaları ya da ön kayıt tıklamaları |
| Ad uzunluğu | 64 karakter | 50 karakter |
Google Play, gelişmiş ayarlarda tespit edilebilir en küçük etkiyi (minimum detectable effect) ve güven düzeyini belirlemene izin verir. Deney sayfaları Grow users > Store presence > Store listings altında; ayrıntılar Google Play store listing experiments rehberinde (İngilizce).
Sık yapılan hatalar
- Az trafikli bir sayfada test çalıştırıp bir hafta sonra durdurmak.
- Yayındaki binary'de olmayan bir ikonu test etmeye çalışmak; App Icon sekmesi onu sunmaz.
- Test ortasında aynı öğeleri değiştiren yeni bir sürüm çıkarmak.
- %90 güven eşiğine ulaşmadan kazanan ilan etmek.
- PPO'nun metin test etmesini beklemek. Bunun için özel ürün sayfalarını ya da sürümden sürüme değişiklikleri kullan ve önce ve sonra ölç.
Kazananı uyguladıktan sonra etkiyi nasıl izlerim?
Dönüşüm değişiklikleri App Analytics'te görünür. Uptika arama tarafını ekler: Kelime radarı takip ettiğin her kelimedeki sıranı her gün kaydeder, ASO puanı da giriş dönüşümüne ayrılmış bir bölüm içerir; böylece yeni sayfanın dönüşümden fazlasını değiştirip değiştirmediğini görürsün. Rakip günlüğü, rakiplerin ekran görüntülerini ya da ikonunu değiştirdiği zamanı gösterir; bu da test sürerken sonuçlarını kaydırabilir. Ücretsiz plan bir ülke mağazasında bir uygulamayı izler: ücretsiz başla.
İlgili: App Store ekran görüntüsü boyutları, uygulama önizleme videosu ve uygulama ikonu boyutları.
Sorular
Ürün sayfası optimizasyonu nedir?
Ürün sayfanın en fazla üç alternatif sürümünü (treatment, yani varyant) orijinale karşı test eden bir App Store Connect özelliği. Her varyant uygulama ikonunu, ekran görüntülerini ve uygulama önizlemelerini değiştirebilir. Ziyaretçiler rastgele atanır, test boyunca hep aynı varyantı görür ve sonuçlar App Analytics'te çıkar.
App Store ikonunu nasıl A/B test ederim?
Test etmek istediğin her ikonu, App Store'da yayındaki sürümün binary'sine alternatif ikon olarak koy (Xcode 13 ya da sonrasıyla derlenmiş, 1024×1024 px). Sonra bir test oluştur, bir varyantın App Icon sekmesini aç ve alternatif ikonu seç. Yalnızca ikon içeren testler zaten onaylı ikonları kullandığı için yeni meta veri incelemesi gerektirmez.
Bir PPO testi ne kadar sürmeli?
Bir test 90 güne kadar ya da sen durdurana kadar sürer. Apple, bir varyantı uygulamadan ya da testi durdurmadan önce en az bir varyantın en az %90 güvenle başlangıç sayfasından daha iyi ya da daha kötü olduğunun belirlenmesini beklemeyi önerir. Trafiğinin ne kadar süreye ihtiyaç duyduğunu görmek için testi oluştururken Estimate Your Test Duration seçeneğini kullan.
Ürün sayfası optimizasyonu ile özel ürün sayfaları arasındaki fark ne?
PPO, en iyisini bulmak için varsayılan sayfanın sürümlerini aynı trafik üzerinde test eder. Özel ürün sayfaları ise belirli kitleler ya da reklamlar için kendi URL'leri (ve istersen kendi anahtar kelimeleri) olan ayrı, kalıcı sayfalardır. Özel ürün sayfalarında PPO testi yapılamaz.
Kaynaklar
- Ürün sayfası optimizasyonu (Apple Developer)
- Ürün sayfası optimizasyonuna genel bakış (App Store Connect Help)
- Test oluşturma (App Store Connect Help)
- Test varyantlarını yapılandırma (App Store Connect Help)
- Test çalıştırma (App Store Connect Help)
- Mağaza girişinde A/B testi çalıştırma (Play Console Yardım)