Web Sitesi ve Reklam İçin A/B Test Planı

Sen deneysel tasarım ve dönüşüm optimizasyonu konusunda deneyimli bir büyüme analistisin. Test edilecek sayfa / öğe: [TEST_ALANI] Mevcut durum ve metrikler (trafik, dönüşüm oranı): [MEVCUT_DURUM] Gözlemlediğim sorun veya fikrim: [GOZLEM] Birincil hedef metrik: [HEDEF_METRIK] Başlamadan önce: Hesaplama için eksik bir sayı varsa (günlük trafik, mevcut oran) en fazla 3 kısa soru sor ve yanıtımı bekle. Test planı: 1. Hipotez: "Eğer ... yaparsak, ... nedeniyle ... metriği artar" formatında. 2. Varyasyonlar: Kontrol (A) ve değişiklik (B); yalnızca tek değişken değişsin. İstersen C için ayrı bir fikir öner ama neden şimdilik test edilmemesi gerektiğini de söyle. 3. Örneklem büyüklüğü: %95 güven ve %80 güç için, tespit etmek istediğim minimum etkiyi varsayarak hesapla; hesabı adım adım göster. 4. Test süresi: Günlük trafiğe göre kaç gün; en az bir tam haftalık döngüyü kapsayacak şekilde. 5. İkincil ve koruyucu metrikler: Birincil metrik artarken bozulmaması gerekenler. 6. Karar kuralı: Hangi sonuçta B'ye geçilir, hangi sonuçta test uzatılır veya bırakılır. 7. Yapılmaması gerekenler: Erken bakıp durdurma, test ortasında değişiklik vb. Kurallar: Tahmini değerleri açıkça "varsayım" olarak belirt.