Eğitimin Amacı ve Kapsamı
Yeni bir ürün özelliğinin, algoritma değişikliğinin veya arayüz tasarımının gerçekten değer üretip üretmediğini anlamanın en güvenilir yolu çevrimiçi kontrollü deneylerdir (A/B testleri). Ancak yanlış örneklem hesabı, erken durdurma (peeking) veya hatalı rastgeleleştirme, ekipleri yanlış kararlara sürükler.
Bu eğitimde test edilebilir hipotez ve metrik hiyerarşisi (OEC, driver ve guardrail metrikler), minimum detectable effect (MDE) ve örneklem büyüklüğü hesabı, sıkçı (frequentist) ve Bayesçi değerlendirme, Sample Ratio Mismatch (SRM), çoklu test düzeltmeleri, CUPED ile varyans azaltma ve feature flag/deney platformu mimarisi uygulamalı olarak ele alınır. Katılımcılar kendi ürünleri için uçtan uca bir deney tasarım şablonu ve karar kontrol listesi hazırlar.
Kimler Katılmalı?
- Ürün yöneticileri (Product Manager), büyüme (Growth) ve dijital ürün ekipleri
- Deney sonuçlarını analiz eden veri analistleri ve veri bilimciler
- Feature flag, telemetri ve deney altyapısını kuran yazılım mühendisleri
- Ön koşul: temel olasılık/istatistik kavramlarına aşinalık
Kazanımlar
- İş hedeflerini birincil karar metriği (OEC) ve koruyucu (guardrail) metriklere dönüştürmek
- Deney öncesinde MDE, istatistiksel güç ve örneklem süresini doğru hesaplamak
- Erken bakma (peeking), SRM, yenilik etkisi (novelty effect) ve ağ etkileşimi yanlılıklarını tespit etmek
- Sequential testing, Bayesçi yaklaşım ve CUPED varyans azaltma yöntemlerini yerinde kullanmak
- Kurum içi standart bir A/B test tasarım dokümanı ve yayım karar protokolü oluşturmak
Konular
Deney Kültürü, Hipotez ve Metrik Hiyerarşisi
- Nedensellik vs korelasyon ve çevrimiçi kontrollü deneylerin anatomisi
- North Star, OEC (Overall Evaluation Criterion), ikincil ve guardrail metrik seçimi
- Rastgeleleştirme birimi (kullanıcı, oturum, cihaz, sayfa) kararları
İstatistiksel Tasarım: Güç Analizi ve Örneklem Büyüklüğü
- Tip I (alpha) ve Tip II (beta) hatalar, istatistiksel güç (power) ve MDE
- Oran (dönüşüm) ve sürekli (gelir, süre) metrikler için örneklem ve süre hesabı
- Çok değişkenli (A/B/n, multivariate) testler ve Bonferroni/BH-FDR düzeltmeleri
Sık Karşılaşılan Tuzaklar ve Güvenilirlik Kontrolleri
- A/A testleri ve Sample Ratio Mismatch (SRM) teşhisi
- Peeking (erken durdurma) problemi ve Always-Valid / Sequential Testing
- Simpson paradoksu, survivorship bias, novelty/primacy etkileri ve etkileşim (carryover)
İleri Analiz Teknikleri: CUPED, Bayesçi Test ve Segmentasyon
- Deney öncesi veriyi kullanarak CUPED ile varyans azaltma ve test süresini kısaltma
- Bayesçi A/B testi: kazanma olasılığı ve beklenen kayıp (expected loss)
- Heterojen tedavi etkileri (HTE) ve doğru alt segment analizi
Deney Altyapısı, Feature Flag'ler ve Karar Süreci
- İstemci vs sunucu taraflı atama, GrowthBook/LaunchDarkly/Statsig mimari desenleri
- Olay loglama şeması, otomatik raporlama ve Ship / Iterate / Rollback karar matrisi
Bu Kategorideki Diğer Eğitimler
-
Anlamlı isimlendirme, tek sorumluluklu fonksiyonlar, code smell tespiti, güvenli refactoring adımları, savunmacı olmayan hata yönetimi ve temiz birim testler (TDD); okunabilir ve bakımı kolay kod yazmak isteyen geliştiriciler için.
- Canlı Kurs
- 5 modül
-
Uçtan uca yazılım test yaşam döngüsü (STLC), iş kurallarından test senaryosu çıkarma, keşif testi (exploratory testing), Postman ile API testi, SQL ile veri doğrulama ve etkili hata raporlama; uygulamalı yazılım testi eğitimi.
- Canlı Kurs
- 5 modül
-
Gereksinim belirsizliklerini erken yakalama, BDD/Gherkin ve Example Mapping, kara kutu tasarım teknikleri (EP, BVA, karar tablosu, durum geçişi, pairwise), risk tabanlı test önceliklendirme ve izlenebilirlik matrisi eğitimi.
- Canlı Kurs
- 5 modül
-
ISTQB Certified Tester Foundation Level (CTFL v4.0) müfredatına tam uyumlu eğitim: testin 7 ilkesi, SDLC/Agile içinde test, statik inceleme, kara/beyaz kutu tasarım teknikleri, test yönetimi ve örnek sınav soruları.
- Canlı Kurs
- 5 modül
-
Selenium WebDriver 4 (W3C protokolü), sağlam CSS/XPath seçiciler, Explicit Wait senkronizasyonu, Page Object Model, Selenium Grid/Docker ile paralel koşum ve Allure raporlama; kurumsal web test otomasyonu geliştiren QA ekipleri için.
- Canlı Kurs
- 5 modül
-
Tarayıcı içi Cypress mimarisi, otomatik bekleme (auto-waiting), cy.intercept ile ağ izleme ve stubbing, cy.session ile hızlı oturum açma, React/Vue component testing ve CI paralel koşumu; modern frontend ve QA ekipleri için.
- Canlı Kurs
- 5 modül
Bizimle iletişime geçin
