Tek Kuyruklu ve Çift Kuyruklu Test Farkı: Yönü Ne Zaman Seçmeli?
Çift yönlü test "fark var mı" diye sorar ve iki yöndeki sapmayı da yakalar; tek yönlü test "belirli yönde fark var mı" diye sorar ve öbür yönü bilinçli olarak görmezden gelir. Doğru seçim veriye değil, veriyi görmeden önce yazdığınız soruya bağlıdır.
Bir bakışta
- Fark, testin kendisinde değil alternatif hipotezdedir. Aynı t testi, alternatif "eşit değil" kurulursa çift yönlü, "büyüktür" ya da "küçüktür" kurulursa tek yönlü olur.
- Tek yönlü test, öngörülen yönde daha kolay anlamlılık bulur. Ret bölgesinin tamamı tek kuyrukta toplandığı için aynı anlamlılık düzeyinde kritik değer ortalamaya daha yakındır.
- Ters yöndeki büyük bir fark, tek yönlü testte anlamlı çıkmaz. Bu yüzden ters yönün kararı değiştireceği her durumda çift yönlü test gerekir.
- Yön, veri görülmeden önce ve gerekçesiyle seçilmelidir. Sonuca bakıp yön değiştirmek, yanlış alarm olasılığını gizlice artırır.
Aynı test, farklı soru
Tek yönlü ve çift yönlü test iki ayrı istatistik testi değildir; aynı testin iki farklı soruya göre kurulmasıdır. t testi, z testi ya da oran testi, hangisi olursa olsun, yokluk hipotezi genellikle "fark yoktur" der. Ayrım, alternatif hipotezde başlar.
NIST'in mühendislik istatistiği el kitabı iki örneklem t testi için bunu açıkça gösterir. Çift yönlü kurulumda alternatif hipotez "iki ortalama eşit değildir" der ve test istatistiğinin mutlak değeri kritik değeri aşarsa yokluk hipotezi reddedilir. Tek yönlü kurulumda ise alternatif "birinci ortalama ikinciden büyüktür" ya da "küçüktür" diye kurulur; ret yalnız ilgili kuyrukta gerçekleşir.
Bu yüzden "hangi testi kullanmalıyım" sorusunun bir parçası da "neyi bilmek istiyorum" sorusudur. Bir değişikliğin herhangi bir etkisi olup olmadığını merak ediyorsanız çift yönlü, yalnız belirli bir yöndeki etkinin karar için önemli olduğu durumdaysanız tek yönlü soru sorarsınız.
Ölçüt ölçüt fark
İki kurulumu yan yana koyunca farklar şöyle sıralanır:
- Alternatif hipotez: Çift yönlü: "fark vardır", yönü belirtilmez. / Tek yönlü: "büyüktür" ya da "küçüktür".
- Ret bölgesi: Çift yönlü: anlamlılık düzeyi iki kuyruğa eşit paylaştırılır. / Tek yönlü: anlamlılık düzeyinin tamamı tek kuyruktadır.
- Kritik değer: Çift yönlü: ortalamadan daha uzaktadır, anlamlılık için daha büyük sapma gerekir. / Tek yönlü: daha yakındır, öngörülen yönde daha küçük sapma yeter.
- p değeri: Simetrik dağılımlarda ve sapma öngörülen yöndeyse tek yönlü p değeri, çift yönlü p değerinin yarısıdır.
- Ters yöndeki fark: Çift yönlü: yakalanır. / Tek yönlü: ne kadar büyük olursa olsun anlamlı sayılmaz.
- Güç: Tek yönlü test, yön doğru öngörüldüğünde aynı örneklemle daha güçlüdür; yön yanlışsa etkiyi hiç göremez.
Tek yönlü testin "daha kolay anlamlılık" sağlaması bir avantaj gibi görünür, ama bedeli öbür yöndeki bilgiden vazgeçmektir.
Tek yönlü test gücü artırır, bedeli öbür yönü görmemektir
| Çift yönlü | Tek yönlü | |
|---|---|---|
| Alternatif hipotez | Eşit değildir | Büyüktür ya da küçüktür |
| Ret bölgesi | İki kuyruğa paylaştırılır | Tamamı tek kuyrukta |
| Kritik değer | Ortalamadan daha uzak | Ortalamaya daha yakın |
| Ters yöndeki fark | Yakalanır | Anlamlı sayılmaz |
| Ne zaman | Her iki yön de karar için önemliyse | Yalnız bir yön kararı değiştiriyorsa |
Tek yönlü test ne zaman meşrudur?
Tek yönlü testin meşru olması için iki koşul birlikte sağlanmalıdır. Birincisi, yön veri toplanmadan önce ve bir gerekçeyle belirlenmiş olmalıdır. İkincisi, ters yöndeki bir sonuç, ne kadar belirgin olursa olsun, verilecek kararı değiştirmemelidir.
Bir ambalaj tedarikçisi değiştiren üretim ekibini düşünün. Yeni malzeme ancak eskisinden daha dayanıklıysa sözleşme imzalanacak, aksi her durumda eski malzemeyle devam edilecek. Burada soru yalnız "yeni malzeme daha dayanıklı mı" olduğu için tek yönlü test savunulabilir. Yeni malzemenin daha zayıf çıkması da, eşit çıkması da aynı karara götürür.
Aynı ekip yeni malzemenin dayanımda herhangi bir değişiklik yaratıp yaratmadığını izliyorsa, örneğin daha ucuz bir malzemeye geçiş sonrası kalite kontrolü yapıyorsa, durum değişir. Dayanımın düşmesi tam da yakalanması gereken risktir; bu soruyu tek yönlü "artış var mı" testine sıkıştırmak, asıl tehlikeyi görünmez kılar. Bu durumda çift yönlü test ya da düşüşü hedefleyen tek yönlü test gerekir.
Klinik ve kalite çalışmalarında görülen "üstün olmama" tasarımları da yapıları gereği yönlü soru sorar: yeni yöntemin eskisinden önceden belirlenmiş bir paydan daha kötü olmadığını göstermek amaçlanır. Bu tasarımlar, payın gerekçesi ve örneklem hesabıyla birlikte ayrıca planlanır; sıradan bir tek yönlü testten ibaret değildir.
En sık hata: veriye bakıp yön seçmek
Tek yönlü testin kötü ün kazanmasının nedeni çoğunlukla yanlış kullanımıdır. Analist çift yönlü testle anlamlılık eşiğinin hemen üzerinde bir p değeri bulur, farkın hangi yönde olduğuna bakar ve testi o yöne çevirir. p değeri yarıya iner ve sonuç birden "anlamlı" olur. Bu, aslında verinin iki kez kullanılmasıdır: bir kez yönü seçmek, bir kez de o yönü test etmek için. Gerçek yanlış alarm olasılığı, raporlanan anlamlılık düzeyinin üzerine çıkar.
Korunmanın yolu, analiz planını veriden önce yazmaktır. Hangi testin, hangi yönle, hangi anlamlılık düzeyiyle yapılacağı ve bu seçimin gerekçesi bir belgeye ya da deney kaydına not edilir. Yön gerekçesi yazılamıyorsa varsayılan seçim çift yönlü testtir.
Raporlamada da şeffaf olun: tek yönlü test kullandıysanız bunu ve gerekçesini açıkça yazın, ters yönde gözlenen bir fark varsa onu da betimleyin. Okur, ters yöndeki sonucu sizin testiniz göremese de bilmeyi hak eder.
Yön, veri toplanmadan önce yazılır
- Soruyu yazHerhangi bir fark mı, belirli yönde fark mı?
- Yönü gerekçelendirTers yön kararı değiştirir mi? Değiştiriyorsa çift yönlü.
- Planı kaydetTest, yön ve anlamlılık düzeyi deney kaydına yazılır.
- Veriyi topla ve test etPlan değiştirilmeden yürütülür.
- Şeffaf raporlaYön, gerekçe ve ters yöndeki gözlem birlikte yazılır.
Yazılımda yön nasıl belirtilir?
İstatistik yazılımlarında yön, testin bir seçeneğidir. SciPy'nin bağımsız iki örneklem t testinde alternative parametresi bu işi görür: two-sided varsayılan değerdir ve ortalamaların eşit olmadığını sınar; less birinci örneklemin ortalamasının ikinciden küçük, greater ise büyük olduğunu sınar.
Burada en sık yapılan teknik hata, örneklemlerin sırasını karıştırmaktır. stats.ttest_ind(yeni, eski, alternative="greater") çağrısı "yeni, eskiden büyük mü" sorusunu sorar; argümanların yeri değişirse aynı seçenek tam ters soruyu sorar ve sonuç anlamsızlaşır. Kodun yanına sorulan soruyu yorum olarak yazmak bu hatayı önler.
Tablo hesaplayıcılarında ve bazı istatistik paketlerinde çıktı yalnız çift yönlü p değeri olarak verilir. Tek yönlü sonuca ulaşmak için bu değeri elle dönüştürmeden önce, gözlenen farkın öngörülen yönde olup olmadığını kontrol edin; ters yöndeyse tek yönlü p değeri küçük değil, büyüktür.
Yön, test aşamasından önce örneklem planlamasında da belirtilmelidir. Güç analizi araçları tek yönlü ve çift yönlü kurulum için farklı örneklem büyüklüğü önerir; planlamada bir yönü, analizde öbürünü kullanmak testin gücünü baştan bozar.
Mindset programlarında hipotez kurma
Veri Bilimi için İstatistik Eğitimi'nin Hipotezlerin Sınanması ve T Dağılımı modülleri, alternatif hipotezin kurulmasını ve ret bölgesinin mantığını ele alır; Temel İstatistik Hataları modülü ise sonuca bakarak yön seçmek gibi tuzakları tanımaya yardım eder.
Data Science Bootcamp'te doğrulayıcı veri analizi ve hipotez testi, Python ile gerçek veri setleri üzerinde uygulanır; yönün kodda nasıl belirtildiği bu uygulamalarda somutlaşır.
İlgili Mindset programı
Veri Bilimi için İstatistik Eğitimi
Sık sorulan sorular
A/B testinde tek yönlü test kullanılmalı mı?
Çoğu A/B testinde yeni sürümün kötüleştirme ihtimali de bilinmek istenir; dönüşümü düşüren bir değişikliği fark etmemek ciddi bir kayıptır. Bu yüzden varsayılan seçim çift yönlü testtir. Yalnız "yeni sürüm daha iyi değilse eskisinde kalırız ve kötü olması kararımızı değiştirmez" denebilen durumlarda tek yönlü test savunulabilir, bu karar da test başlamadan yazılmalıdır.
Ki-kare ve F testleri neden tek kuyrukla hesaplanır?
Bu testlerin istatistikleri kareler toplamına dayandığı için yalnız pozitif değer alır ve sapmanın yönünden bağımsız olarak büyür. ANOVA'daki F testi ya da bağımsızlık için ki-kare testi, sağ kuyruğa bakarak "herhangi bir fark" sorusunu yanıtlar. Yani hesap tek kuyrukludur ama soru yön içermez; bu, tek yönlü hipotezle karıştırılmamalıdır.
Güven aralığı ile tek yönlü test nasıl ilişkilidir?
Çift yönlü test, iki taraflı güven aralığına karşılık gelir: aralık sıfır farkı içermiyorsa test anlamlıdır. Tek yönlü testin karşılığı ise tek taraflı güven sınırıdır; örneğin "fark en az şu kadardır" diyen bir alt sınır. Raporlamada test yönüyle güven aralığının türünü uyumlu seçmek, okurun sonuçları tutarlı yorumlamasını sağlar.
Tek yönlü test daha küçük örneklemle yetinmeyi sağlar mı?
Yön doğru öngörüldüğünde, aynı güce ulaşmak için gereken örneklem tek yönlü testte bir miktar daha küçüktür. Ancak bu kazanç ancak yön seçimi meşru olduğunda anlamlıdır. Örneklemi küçültmek için tek yönlü teste geçmek, ters yöndeki riski görmezden gelmeyi bir maliyet tasarrufu gibi göstermek olur.
Çift yönlü test anlamlı çıktıysa farkın yönünü söyleyebilir miyim?
Evet. Çift yönlü test anlamlı çıktığında, gözlenen farkın işaretine bakarak hangi grubun ortalamasının daha yüksek olduğunu raporlamak yaygın ve kabul gören bir uygulamadır. Yönü bilmek için baştan tek yönlü test kurmak gerekmez; çift yönlü test hem farkı hem de yönünü görmenizi sağlar, üstelik ters yöndeki sonucu da kaçırmaz.