A/B Test Setup

İstatistiksel olarak geçerli ve uygulanabilir sonuçlar üreten A/B testlerini planlamak, tasarlamak ve analiz etmek için disiplinli bir çerçeve.

Önce hipotez kurmayı, örneklem boyutunu önceden taahhüt etmeyi ve çoğu ekibin atladığı geçerlilik korumalarını zorunlu kılar; böylece 'kazanan' varyantınız gürültü değil, gerçektir.

₺369 tek seferlik
Bir kit içine ekle →

Fiyatlara KDV (%20) dahildir. · Gerçek ajans işinden çıkarıldı · tek seferlik, kilit yok

  • Tür Skill
  • Kategori Büyüme & Dönüşüm
  • Teslimat E-posta · anında
  • Lisans Tek seferlik
Çalışma önizlemesi
forgehouse, ab-test-setup

Çalışmanın içinden · kara kutu yok

Satın almadan önce işin kendisini gör.

Skill'in her deneyde işlettiği gerçek döngü, hipotezden karara. Erken bakmak yok, körlemesine denemek yok, yaptığı iş tam olarak şu:

  1. Her şeyden önce hipotezi sabit kalıpla yazar: [gözlem] nedeniyle, [değişikliğin] [kitle] için [sonucu] doğuracağına inanıyoruz, [metrik] ile ölçeceğiz. Yazılı hipotez yoksa test de yok.
  2. Gerekli örneklem boyutunu baştan hesaplar: mevcut dönüşüm oranı, asgari tespit edilebilir etki, %95 anlamlılık ve %80 güç. Test süresini günlük trafikten türetir. O sayıya ulaşmadan test durdurulmaz.
  3. Üç metrik katmanı tanımlar: testi karara bağlayan tek birincil metrik, neden hareket ettiğini açıklayan ikincil metrikler ve kötüleşirse testi durduran koruma metrikleri (gelir, hemen çıkma, alt huni dönüşümü).
  4. Uygulama yolunu seçer (client-side, server-side veya feature flag) ve lansman öncesi listeyi işletir: varyantlar test edildi mi, izleme doğrulandı mı, kullanıcı geri geldiğinde aynı varyantı görüyor mu.
  5. Sonuç okunmadan önce SRM kontrolü çalıştırır: her varyantın gerçek atama sayısını çeker, tasarlanan bölünmeyle ki-kare testine sokar. p değeri 0.01 altındaysa randomizasyon veya izleme bozuktur, sonuç hiç yorumlanmaz.
  6. Sonucu üç eksende okur (örneklem doluldu mu, istatistiksel olarak anlamlı mı, pratikte anlamlı mı), kazanan ilan etmeden önce cihaz, trafik kaynağı ve yeni/dönen kullanıcı kırılımıyla Simpson paradoksunu kontrol eder, testi öğrenme arşivine yazar ki başarısız fikirler bir daha denenmesin.
Kullanım senaryoları · taktığında neler oluyor

Tek güç kaynağı. 6 hat dışarı.

ab-test-setup · çekirdek

çekirdek aktif · 6 hat

  1. Sayfaya dokunmadan önce güçlü ve çürütülebilir bir hipotez yazmak

    ✓ sayfaya dokunmadan önce
  2. Gerekli örneklem boyutunu ve test süresini baştan hesaplamak

    ✓ gerekli örneklem boyutunu
  3. İstemci tarafı, sunucu tarafı ve özellik bayrağı uygulaması arasında seçim yapmak

    ✓ i̇stemci tarafı, sunucu…
  4. Örneklem oranı uyumsuzluğu kontrolüyle bozuk bir deneyi yakalamak

    ✓ örneklem oranı uyumsuzluğu
  5. Simpson Paradoksunu önlemek için sonuçları cihaz ve kaynağa göre ayırmak

    ✓ simpson paradoksunu önle…
  6. Her testi aranabilir bir öğrenme arşivine kaydetmek

    ✓ her testi aranabilir bir
Kazanımlar · elinde kalanlar

Aldıkların sende kalır.

Zamanı ileri sar. Ne kaldığını izle.

Sonsuza dek

Sahip olmak tam olarak bu.

Kiralık yığın

yapay zekâ yazım aracı: abonelik

süresi doldu · erişim gitti

analiz paketi: abonelik

süresi doldu · erişim gitti

tasarım platformu: abonelik

süresi doldu · erişim gitti

(geriye bir şey kalmadı)

Senin ocağın

  1. Erken bakıp durdurmadan kaynaklanan yanlış pozitifleri yayınlamayı bırakın

    lisans: kalıcı
  2. Sınırlı test slotlarını ICE puanlamasıyla en yüksek etkili değişikliklere ayırın

    lisans: kalıcı
  3. Bir kazanan ilan edilmeden önce geçerlilik doğrulandığı için sonuçlarınıza güvenin

    lisans: kalıcı
  4. Kazanan kalıpları tüm siteye yayarak öğrenimleri katlayın

    lisans: kalıcı

abonelikler biter · tapular bitmez

Ne içerir · eksiksiz manifest

Kutudaki her şey.

Bir parçayı eline al. Çalışırken izle.

Hipotez yapısı şablonu (gözlem, değişiklik, etki, kitle, metrik)

parça 01 / 06 · kutuda

6 parça · tek çalışan sistem · e-postayla anında teslim

Kimler için

Bu herkes için dövülmedi.

  • Araç kiralamayı sahip olmaya tercih ediyorsan, sana göre değil.
  • Yığınını senin yerine başkası yönetsin istiyorsan, sana göre değil.
  • Tahmin etmekten memnunsan, sana göre değil.
Hâlâ burada mısın? Güzel.

Deneylerini içgüdü ve erken kazanımlar yerine istatistiksel titizliğe dayandırmak isteyen büyüme, dönüşüm optimizasyonu ve ürün ekipleri.

o zaman bu senin için dövüldü.

Hangi AI ile çalışır

Tasarımı gereği evrensel: her yapay zekada çalışır. Açık Agent Skills + MCP biçiminde gelir (Claude’da yerleşik); ChatGPT, Gemini, Cursor ve Copilot aynı dosyaları kendine uyarlar.

  • Claude Yerleşik biçim
  • ChatGPT Açık standartla uyarlanır
  • Gemini Açık standartla uyarlanır
  • Cursor Açık standartla uyarlanır
  • Copilot Açık standartla uyarlanır
Sorular · hâlâ havada

Aklındakini yakala.

hava temizlendi. seninle ocak arasında hiçbir şey kalmadı.
bir kıvılcım yakala: ocak cevaplar

  1. Beni Optimizely veya VWO gibi belirli bir test aracına bağlar mı?

    Hayır, istemci tarafı, sunucu tarafı ve feature flag uygulamalarının üçünü de kapsar, böylece stack'inize uyan yöntemi seçersiniz. Çerçeve aracın içinde değil, üstünde durur.

  2. Bir varyantın kazandığını zaten görebiliyorum, neden önceden örneklem büyüklüğü belirleyeyim?

    Kazananı erken ilan etmek, gürültüyü sonuç sanmanın en kolay yoludur ve önceden belirlenen örneklem büyüklüğü tam da bunu önler. Bu olmadan aynı veri bir gün kazanç, ertesi gün kayıp gibi görünebilir.

  3. Varyantı oluşturup testi benim için çalıştırır mı?

    Hayır, hipotezi planlar, testi boyutlandırır ve sonucu analiz eder. Varyantı kurmak ve trafiği yönlendirmek sizin tarafınızda kalır.

  4. Nasıl teslim edilir?

    Satın alımdan hemen sonra e-posta ile iletilir, kuruluma hazır, anında indirilir; bekleme yok.

  5. Tek seferlik mi, abonelik mi?

    Tek seferlik alımdır; abonelik veya gizli ücret yoktur. Fiyata KDV (%20) dahildir.

  6. İade alabilir miyim?

    Dijital ürün olduğu için indirildikten sonra iade yapılmaz. Bu yüzden ne içerdiğini ve kime uygun olduğunu burada açıkça paylaşıyoruz.