A/B testi, aynı dönemde gelen trafiği rastgele iki sürüme bölüp tek bir değişikliğin etkisini önceden seçilmiş bir metrikle ölçme yöntemidir. Affiliate kampanyalarında doğru akış şudur: hipotezi yazın, birincil metriği ve koruma metriğini seçin, varyantları sub ID ile ayırın, testi önceden belirlenen süre boyunca dokunmadan çalıştırın ve kararı tıklamaya değil onaylanmış gelire göre verin.
- Teste değil hipoteze başlayın: neyi, neden değiştirdiğinizi ve hangi metriğin ne yönde oynamasını beklediğinizi yazın.
- Affiliate testlerinde birincil metrik çoğu zaman ziyaretçi başına onaylanmış gelirdir; tıklama oranı tek başına yanıltır.
- Her varyanta ayrı bir sub ID değeri verin; böylece dönüşüm ve onay verisi ağ raporunda varyant bazında ayrışır.
- Süreyi ve örneklemi test başlamadan belirleyin, en az bir tam haftayı kapsayın ve ara sonuçlara bakıp erken durdurmayın.
- Her testi, sonucu ne olursa olsun, hipotez–sonuç–karar formatında kayda geçirin.
Bir landing page'in başlığını değiştirdiniz, ertesi hafta satışlar arttı. Başlık mı işe yaradı, yoksa o hafta maaş günü müydü? A/B testi nasıl yapılır sorusunun özü bu belirsizliği ortadan kaldırmaktır: aynı dönemde gelen ziyaretçileri rastgele iki gruba ayırır, birine mevcut sayfayı, diğerine değiştirilmiş sayfayı gösterir ve farkı önceden seçtiğiniz bir metrikle ölçersiniz.
Bu rehberde istatistik dersine girmeden, tek bir affiliate landing page testini hipotezden karara kadar uçtan uca yürütüyoruz. Örneğimizde varyantları ağ raporunda ayırmak için sub ID kullanacağız; çünkü affiliate dünyasında asıl sonuç, yani onaylanmış dönüşüm, sizin sayfanızda değil ağın kayıtlarında oluşur. Örneklem hesabı ve anlamlılık yorumu gibi derin konular için ilgili kardeş yazılara yönlendireceğiz.
A/B testi nedir ve affiliate kampanyalarında neden farklıdır?
A/B testi, trafiği eşzamanlı ve rastgele iki sürüme bölerek tek bir değişikliğin sonuca etkisini ölçen kontrollü bir deney yöntemidir. Mevcut sürüme "kontrol" ya da A, değiştirilmiş sürüme "varyant" ya da B denir. Eşzamanlılık ve rastgelelik, mevsim, kampanya dönemi veya trafik kaynağındaki değişimlerin iki grubu eşit etkilemesini sağlar.
Affiliate kampanyalarında testin üç farkı vardır. Birincisi, dönüşüm çoğu zaman sizin sayfanızda değil, reklamverenin sitesinde gerçekleşir. İkincisi, dönüşüm anında kesinleşmez; iptal, iade veya geçersiz lead gerekçesiyle sonradan reddedilebilir. Üçüncüsü, dönüşüm tıklamadan saatler hatta günler sonra gelebilir. Bu üç fark, testin hem nasıl işaretleneceğini hem de ne zaman değerlendirileceğini belirler.
| Klasik site testi | Affiliate landing page testi |
|---|---|
| Dönüşüm aynı sitede, analitik araçta görünür | Dönüşüm reklamveren sitesinde, ağ raporunda görünür |
| Satış anında kesinleşir | Dönüşüm sonradan onaylanır veya reddedilir |
| Varyant bilgisi analitik etiketiyle taşınır | Varyant bilgisi sub ID ile ağa taşınır |
| Test bitince hemen değerlendirilir | Dönüşüm gecikmesi ve onay süresi kadar beklenir |
Adım 1: Sorunu tespit edin ve hipotezi yazın
İyi bir A/B testi, "şunu deneyelim" fikriyle değil, veride görülen somut bir sorunla başlar. Örneğimizdeki yayıncı, bir ev aletleri kampanyası için ücretli sosyal medya trafiğini kendi hazırladığı bir ara sayfaya gönderiyor. Isı haritası ve oturum kayıtları, ziyaretçilerin büyük bölümünün sayfanın ilk ekranında kalıp aşağı kaydırmadan çıktığını gösteriyor.
Hipotez, bu gözlemi test edilebilir bir öngörüye çevirir. Kullanışlı bir kalıp şöyledir: "[Gözlem] nedeniyle [değişiklik] yaparsak [metrik] [yön] yönde değişir, çünkü [gerekçe]." Örneğimizde hipotez şu: "Ziyaretçiler ilk ekranda karar veremeden çıktığı için, ilk ekrana ürünün üç somut faydasını ve sınırlı süreli indirim vurgusunu eklersek, ziyaretçi başına onaylanmış komisyon artar; çünkü ziyaretçi teklife geçmek için gereken bilgiyi kaydırmadan görür."
Hipotezi yazmanın iki faydası var. Test bittiğinde neyi öğrendiğinizi net biçimde söyleyebilirsiniz ve test sırasında hedef kaydırma yapamazsınız. Hipotez yazımı ve test fikirlerini önceliklendirme konusunu CRO test hipotezi nasıl yazılır rehberinde ayrıntılı ele aldık.
Adım 2: Birincil metriği ve koruma metriğini seçin
Birincil metrik, testin kazananını belirleyecek tek ölçüttür ve test başlamadan seçilir. Affiliate testlerinde en sık yapılan hata, kolay ölçüldüğü için tıklama oranını birincil metrik yapmaktır. Oysa daha fazla kişiyi teklife göndermek, daha fazla para kazanmak anlamına gelmez; düşük niyetli ziyaretçiyi teklife iten bir sayfa, tıklamayı artırırken onaylanmış satışı düşürebilir.
Örneğimizdeki yayıncı üç katmanlı bir metrik seti belirliyor:
- Birincil metrik: Ziyaretçi başına onaylanmış komisyon (onaylanan komisyon toplamı ÷ sayfa ziyaretçisi).
- Destekleyici metrikler: Teklife çıkış tıklama oranı ve ziyaretçi başına dönüşüm oranı. Bunlar sonucun nedenini açıklamaya yardım eder.
- Koruma metriği: Onay oranı (onaylanan dönüşüm ÷ toplam dönüşüm). Bu oran belirgin düşerse, birincil metrik iyi görünse bile varyant reklamverenle ilişkiyi zedeleyebilir.
Koruma metriği, özellikle agresif mesajların test edildiği durumlarda hayat kurtarır. "Son 2 saat" gibi baskı unsurları, ürünü gerçekten istemeyen kişileri de satın almaya iter; bu siparişlerin bir kısmı iade veya iptal edilir. Metriklerin tanımları ve birbirleriyle ilişkisi için EPC, CR ve ROAS metrikleri rehberine göz atabilirsiniz.
Adım 3: Örneklemi ve test süresini önceden belirleyin
Test süresi, "yeterince veri gelince bakarız" diye değil, test başlamadan hesaplanan bir örneklem büyüklüğüne göre belirlenir. Hesap üç girdiye dayanır: mevcut dönüşüm oranı, yakalamak istediğiniz en küçük iyileşme ve günlük ziyaretçi sayısı. Bu yazıda hesabın matematiğine girmiyoruz; adım adım formül ve tablolar A/B testinde örneklem büyüklüğü hesaplama rehberinde yer alıyor.
Örneğimizdeki yayıncının sayfası günde yaklaşık 1.400 ziyaretçi alıyor. Yüzde 1,2 civarındaki mevcut dönüşüm oranıyla yaklaşık yüzde 35 göreli bir iyileşmeyi yakalamak için yapılan hesap, varyant başına yaklaşık 9.800 ziyaretçiye ihtiyaç olduğunu gösteriyor; bu da iki varyant için yaklaşık 14 gün demek. Yayıncı süreyi tam iki hafta olarak sabitliyor: pazartesi başlayıp iki hafta sonraki pazar gece yarısı bitecek.
İki hafta kuralının mantığı basit: satın alma davranışı haftanın günlerine göre değişir. Hafta sonu gelen ziyaretçi ile salı sabahı gelen ziyaretçi aynı niyette olmayabilir. Testi tam haftalarla sınırlamak, varyantların her gün tipinden eşit pay almasını sağlar. Buna ek olarak affiliate tarafında bir bekleme payı eklenir: trafik kesildikten sonra gecikmeli dönüşümlerin gelmesi ve onay kararlarının verilmesi için beklenen süre. Bu kampanyada reklamveren siparişleri ortalama 10 günde onaylıyor; dolayısıyla nihai değerlendirme trafik bittikten 10–14 gün sonra yapılacak.
Adım 4: Varyantları hazırlayın ve sub ID ile işaretleyin
Varyant hazırlığında kural tektir: B, A'dan yalnızca hipotezde yazan değişiklikle ayrılmalıdır. Örneğimizde B sürümü ilk ekrana üç maddelik fayda listesi ve indirim vurgusu ekliyor; sayfanın geri kalanı, görseller, yükleme hızı ve teklif linkinin hedefi birebir aynı kalıyor. B'nin daha ağır bir görsel yüzünden yavaş açılması, testi farkında olmadan bir hız testine çevirir.
Sub ID, yayıncının affiliate linkine eklediği ve tıklamayla birlikte ağa taşınan serbest metin bir etikettir. Varyantları ayırmak için her sürümdeki teklif linkine farklı bir sub değeri verilir. Yayıncının şeması şöyle:
Varyant A linki: ...?sub1=meta&sub2=lp-firin-v1&sub3=test07-a
Varyant B linki: ...?sub1=meta&sub2=lp-firin-v1&sub3=test07-b
Burada sub1 trafik kaynağını, sub2 sayfayı, sub3 ise test numarasını ve varyantı taşıyor. Test kimliğini (test07) varyant harfiyle birlikte yazmak, aylar sonra raporlara baktığınızda hangi testin hangi satırı ürettiğini karıştırmamanızı sağlar. Tutarlı bir isimlendirme düzeni kurmak için sub ID adlandırma şeması rehberinden yararlanabilirsiniz.
Adfacten'de: Takip linklerinde sub1–sub10 alanları bulunur ve bu değerler tıklama, dönüşüm, onay ve red verisiyle birlikte gerçek zamanlı raporlarda geri döner. Bir testin varyantlarını sub3 gibi tek bir alanda işaretlediğinizde, raporu bu alana göre gruplayarak her varyantın onaylanan ve reddedilen dönüşümlerini sebep koduyla birlikte ayrı ayrı görebilirsiniz.
Adım 5: Trafiği rastgele ve eşit bölün
Trafik bölme, her ziyaretçinin hangi sürümü göreceğine rastgele ve kalıcı biçimde karar verme işlemidir. "Kalıcı" kısmı önemlidir: aynı kişi sayfaya ikinci kez geldiğinde aynı varyantı görmelidir; aksi halde bir ziyaretçi iki sürümden de etkilenir ve sonuç bulanıklaşır.
Affiliate yayıncıları için üç yaygın yöntem var:
- Sunucu tarafında bölme: Ziyaretçi geldiğinde sunucu rastgele bir sayı üretir, sonucu bir çereze yazar ve ilgili sürümü gösterir. En temiz yöntemdir; sayfa titremesi olmaz.
- Test aracıyla bölme: Bir A/B test aracı, aynı adres üzerinde sürümleri dönüşümlü gösterir. Kurulumu kolaydır ama yükleme sırasında kısa süreli içerik değişimi yaşanabilir.
- Reklam platformunda bölme: Reklam platformunun deney özelliğiyle iki ayrı adrese eşit bütçe dağıtılır. Uygulaması basittir; ancak platformun teslimat algoritması iki kola farklı kitleler gösterebileceği için gerçek rastgelelik zayıflar.
Örneğimizdeki yayıncı birinci yöntemi seçiyor. Bölme oranı 50/50; çünkü eşit bölme, belirli bir toplam trafikle en hızlı sonuç veren düzendir. Riskli bir değişiklik test ediliyorsa trafiğin küçük bir kısmıyla başlamak mümkündür, ancak dengesiz bölmenin testi uzattığını bilmek gerekir.
Adım 6: Yayına almadan önce kalite kontrol yapın
Kalite kontrol, testin teknik olarak doğru veri ürettiğini trafik açılmadan doğrulama adımıdır. Yanlış kurulmuş bir test, iki haftalık trafiği ve bütçeyi boşa harcar; üstelik hata çoğu zaman sonuç gelene kadar fark edilmez.
Yayıncının kontrol listesi şöyle:
- Her iki sürümü masaüstü ve mobilde açın; görsel bozulma, eksik buton veya kırık bağlantı olmadığını doğrulayın.
- Gizli pencerede sayfayı birkaç kez açarak her iki varyantın da gerçekten gösterildiğini ve aynı tarayıcıda varyantın sabit kaldığını kontrol edin.
- Her varyanttan birer test tıklaması yapın ve ağ raporunda tıklamanın doğru sub3 değeriyle düştüğünü görün.
- İki sürümün yüklenme süresini ölçün; aradaki fark belirginse önce bunu giderin.
- Analitik aracınızda sayfa ziyaretlerinin varyant etiketiyle ayrıştığını doğrulayın; ziyaretçi sayısı bu taraftan, dönüşüm verisi ağ tarafından gelecektir.
- Test başlangıç tarihini, bitiş tarihini, hipotezi ve metrikleri bir test kaydına yazın.
Uçtan uca takibin doğrulanmasıyla ilgili daha kapsamlı bir prosedür için test siparişi ile uçtan uca takip doğrulama yazısına bakabilirsiniz.
Adım 7: Testi çalıştırın, ama sonuca dokunmayın
Test çalışırken yapılacak tek iş, teknik sağlığı izlemektir; sonuçlara bakıp karar vermek değil. Her gün kontrol edilmesi gerekenler şunlardır: iki varyantın ziyaretçi sayısı yaklaşık eşit mi, sub ID değerleri raporda düzgün akıyor mu, sayfa hata veriyor mu?
Ziyaretçi dağılımı beklenen orandan belirgin saparsa, örneğin 50/50 planlanan bir testte bir varyant sürekli yüzde 55 trafik alıyorsa, bölme mekanizmasında bir sorun vardır ve sonuçlara güvenilmez. Buna örneklem oranı uyumsuzluğu denir ve test durdurulup hata düzeltilmelidir.
Buna karşılık "B üçüncü günde yüzde 20 öndeymiş, kazandı sayalım" türünden kararlar testin en yaygın bozulma nedenidir. Erken dönemde küçük sayılar büyük dalgalanmalar üretir ve sürekli bakıp ilk uygun anda durdurmak, yanlış kazanan ilan etme olasılığını katlar. Bu tuzağın ve benzerlerinin ayrıntılı açıklaması A/B testi hataları ve çözümleri rehberinde.
Test süresince değişmemesi gerekenleri de not edin: reklam hedeflemesi, teklif linki, komisyon oranı ve sayfadaki diğer öğeler. Reklamveren test ortasında kampanya koşullarını değiştirirse, bu tarih test kaydına yazılmalıdır.
Adım 8: Sonuçları birleştirin ve okuyun
Değerlendirme, sayfa analitiğindeki ziyaretçi verisini ağ raporundaki dönüşüm ve onay verisiyle sub ID üzerinden birleştirerek yapılır. Örneğimizde iki haftalık trafik ve ardından 14 günlük bekleme payı sonunda tablo şöyle oluşuyor (rakamlar varsayımsaldır, komisyon onaylanan dönüşüm başına 60 TL kabul edilmiştir):
| Metrik | Varyant A (kontrol) | Varyant B (fayda + indirim vurgusu) |
|---|---|---|
| Sayfa ziyaretçisi | 9.800 | 9.750 |
| Teklife çıkış tıklaması | 2.940 (%30,0) | 3.315 (%34,0) |
| Toplam dönüşüm | 118 (%1,20) | 121 (%1,24) |
| Onaylanan dönüşüm | 104 | 97 |
| Onay oranı | %88,1 | %80,2 |
| Onaylanan komisyon | 6.240 TL | 5.820 TL |
| Ziyaretçi başına onaylı komisyon | 0,64 TL | 0,60 TL |
İlk bakışta B'nin başarılı olduğu düşünülebilir: teklife çıkış oranı dört puan yükselmiş ve bu fark, bu hacimde tesadüfle açıklanamayacak kadar büyük. Ancak birincil metrik farklı bir hikâye anlatıyor. Toplam dönüşüm neredeyse aynı kalmış, onay oranı ise sekiz puan düşmüş. Reklamverenin red sebep kodlarına bakıldığında B tarafındaki fazlalığın büyük bölümünün "order_returned" ve "order_cancelled" olduğu görülüyor.
Yorum: İndirim vurgusu, teklife daha fazla kişi göndermiş ama bu kişilerin bir kısmı ürünü gerçekten istemeyen, fiyat cazibesiyle tıklayan ziyaretçilermiş. Ziyaretçi başına onaylı komisyondaki fark istatistiksel olarak anlamlı değil; yani B'nin daha kötü olduğunu kesin söyleyemiyoruz, ama daha iyi olduğuna dair hiçbir kanıt yok ve koruma metriği bozulmuş. Anlamlılık testinin nasıl okunacağını istatistiksel anlamlılık nedir rehberinde varsayımsal örneklerle anlattık.
İpucu: Reddedilen dönüşümleri sebep koduna göre varyant bazında ayırmak, "neden" sorusunun cevabını çoğu zaman tek tabloda verir. Bu analizin genel yöntemi için onay oranı analizi rehberine bakabilirsiniz.
Adım 9: Kararı verin ve öğrenimi kayda geçirin
Karar, birincil metriğe, koruma metriğine ve uygulama maliyetine birlikte bakılarak verilir. Olası üç karar vardır: varyantı kalıcı hale getirmek, kontrolde kalmak veya hipotezi revize edip yeni bir test kurmak.
Örneğimizdeki yayıncı kontrolde kalmaya ve hipotezi ikiye bölmeye karar veriyor. Veriler, fayda listesinin ilk ekranda çıkışı azalttığını, indirim vurgusunun ise kaliteyi düşürdüğünü düşündürüyor. Bir sonraki test (test08) yalnızca fayda listesini, indirim vurgusu olmadan deneyecek. Bu, büyük ve karma bir değişikliği test ettikten sonra bileşenlerine ayırmanın tipik bir örneği.
Test kaydı şu alanları içermeli:
- Test kimliği, tarih aralığı, sayfa ve trafik kaynağı
- Hipotez ve gerekçe
- Birincil, destekleyici ve koruma metrikleri
- Planlanan ve gerçekleşen örneklem
- Varyant bazında sonuç tablosu ve anlamlılık değerlendirmesi
- Karar, gerekçesi ve bir sonraki adım
Kaybeden testler de kazananlar kadar değerlidir. Altı ay sonra bir ekip arkadaşı "indirim vurgusunu deneyelim mi?" dediğinde, test07 kaydı iki haftalık trafiği ve bütçeyi korur. Sistemli bir test programının nasıl kurulacağını CRO nedir rehberinde süreç ve roller açısından ele aldık.
Reklamverenler ve ajanslar için aynı akış
Bu yazıdaki akış yalnızca yayıncılar için geçerli değildir; reklamverenler ve ajanslar da kendi landing page'lerinde aynı adımları uygular. Fark, varyant bilgisinin taşınma biçimindedir. Reklamveren kendi sitesinde dönüşümü doğrudan gördüğü için varyantı analitik aracında işaretler; ancak affiliate trafiğinin ayrı değerlendirilmesi gerekiyorsa, hangi yayıncı ve hangi sub ID'den gelen ziyaretçinin hangi sürümü gördüğünü de kaydetmek gerekir.
Reklamveren tarafında koruma metriği genellikle iade oranı veya lead kalitesidir. Örneğin CPL kampanyasında daha kısa bir form daha fazla lead getirebilir ama satış ekibinin ulaşamadığı geçersiz lead oranını da artırabilir. Lead formlarına özgü test fikirleri için lead formu optimizasyonu rehberine bakabilirsiniz.
Ajanslar için ek bir disiplin vardır: birden fazla müşteri için yürütülen testleri ortak bir kayıt formatında tutmak. Böylece bir müşteride öğrenilen ders, başka bir müşterinin benzer sayfasında hipotez kaynağı olur. Adfacten'in ajans paneli, birden fazla müşterinin kampanyasını tek yerden yönetmeye imkân verdiği için, test etiketlerini müşteriler arasında aynı şemayla uygulamak kolaylaşır. Ajanslara yönelik özellikleri ajanslar sayfasında inceleyebilirsiniz.
Test sonuçlarını otomatik izlemek
Test sayısı arttıkça varyant verisini elle dışa aktarıp birleştirmek zaman alır ve hata riskini artırır. Bu noktada raporlama otomasyonu devreye girer: ağın rapor API'sinden sub ID'ye göre gruplanmış tıklama, dönüşüm ve onay verisini düzenli olarak çekip kendi analitik verinizle eşleştiren küçük bir betik, her testin durumunu günlük olarak gösterebilir.
Adfacten'in REST API'si ve rapor API'si sub alanlarına göre gruplanmış veriyi programatik olarak sunar; dokümantasyonu developers.adfacten.com adresindedir. Yapay zekâ asistanı kullanan ekipler için MCP sunucusundaki get_report aracı, "test07'nin varyant bazında onaylı dönüşümlerini getir" gibi bir isteği doğrudan rapor sorgusuna çevirebilir. Otomatik raporlamanın kurulumu için rapor API ile otomatik raporlama rehberine göz atın.
Otomasyon, testi erken durdurma dürtüsünü de körüklememelidir. Günlük panel, örneklem oranı uyumsuzluğu ve takip hataları için bir alarm sistemi olarak kullanılmalı; kazanan seçimi yine planlanan süre ve bekleme payı dolduğunda yapılmalıdır.
Adfacten ile başlayın
A/B testi, sezgiyi veriye çeviren en güvenilir yöntemdir; ama affiliate dünyasında ancak dönüşüm ve onay verisini varyant bazında görebildiğinizde gerçekten işe yarar. Sub ID ile işaretlenmiş linkler, gerçek zamanlı raporlar ve sebep kodlu red kayıtları, yukarıdaki dokuz adımı uygulanabilir kılan temel altyapıdır.
Kendi trafiğiniz üzerinde test yürütmek istiyorsanız yayıncı olarak kaydolun; kampanyanızın landing page'lerini affiliate trafiğiyle test etmek istiyorsanız reklamveren hesabı açın. Birden fazla müşteri adına test programı yöneten ekipler ajans hesabıyla başlayabilir.
Sık sorulan sorular
A/B testi nasıl yapılır, en kısa haliyle adımlar nelerdir?
Önce bir sorun ve hipotez belirlenir. Ardından birincil metrik, koruma metriği ve gereken örneklem hesaplanır. İki varyant hazırlanır, trafik rastgele ve eşit bölünür, her varyant ayrı sub ID ile işaretlenir. Test önceden belirlenen süre boyunca müdahalesiz çalıştırılır, sonra sonuçlar istatistiksel olarak değerlendirilip karar ve öğrenim kayda geçirilir.
Affiliate kampanyasında A/B testi için hangi metriği seçmeliyim?
Kararı etkileyecek en yakın parasal metriği seçin. Yayıncı için bu genellikle ziyaretçi başına onaylanmış komisyondur; reklamveren için ziyaretçi başına onaylanmış sipariş veya lead olabilir. Tıklama oranı ve ham dönüşüm oranı destekleyici metrik olarak izlenir; onay oranı ise kalitenin bozulmadığını gösteren koruma metriği olarak takip edilir.
Varyantları ayırmak için neden sub ID kullanılıyor?
Çünkü dönüşüm, onay ve red bilgisi affiliate ağında oluşur ve sizin analitik aracınıza geri gelmez. Her varyanta ayrı bir sub ID değeri verdiğinizde, ağın raporunda tıklama, dönüşüm, onaylanan ve reddedilen işlemler varyant bazında ayrılır. Böylece sayfa analitiği ile gelir verisini aynı varyant etiketi üzerinden birleştirebilirsiniz.
A/B testi ne kadar süre çalışmalı?
Süre, gereken örneklem büyüklüğü ve günlük trafiğinize göre test başlamadan hesaplanır. Pratikte en az bir, tercihen iki tam hafta çalıştırmak hafta içi ve hafta sonu davranış farkını dengeler. Affiliate tarafında dönüşümlerin gecikmeli gelmesi ve onay sürecinin tamamlanması için ayrıca bir bekleme payı bırakmak gerekir.
Aynı anda birden fazla şeyi değiştirebilir miyim?
Değiştirebilirsiniz ama o zaman sonucu tek bir öğeye bağlayamazsınız. Başlık, görsel ve buton aynı anda değiştiyse kazanan varyantın neden kazandığını bilemezsiniz. Büyük bir yeniden tasarımı bütün olarak test etmek meşrudur; ancak öğe bazında öğrenmek istiyorsanız tek değişken ya da çok değişkenli test tasarımı gerekir.
Test sonucu anlamlı çıkmazsa ne yapmalıyım?
Anlamsız sonuç, varyantların aynı olduğunu değil, mevcut veriyle farkın ayırt edilemediğini gösterir. Önce testin planlanan örnekleme ulaşıp ulaşmadığına bakın. Ulaştıysa, beklediğiniz büyüklükte bir etkinin muhtemelen olmadığını not edin, daha basit veya daha ucuz olan sürümde kalın ve daha cesur bir hipotezle yeni bir test planlayın.