Nicel ve nitel araştırma: kullanıcı araştırmasında "kaç" ile "neden" sorusunun farkı

Ortak zemin: kararları tahmin yerine kanıta dayandırmak

Nicel ve nitel araştırma, kullanıcılar ve müşteriler hakkında bilgi toplamanın iki temel yoludur. İkisinin de amacı, ürün ve tasarım kararlarını ekip içindeki varsayımlara değil, gerçek kullanıcıdan gelen kanıta dayandırmaktır. İkisi de iyi tanımlanmış bir araştırma sorusuyla başlar, bir katılımcı grubu seçer, veri toplar, analiz eder ve bulguları karara çevirir.

Ayrım, toplanan verinin türünde ve yanıtlanan soruda ortaya çıkar. Nielsen Norman Group'un kullanıcı deneyimi araştırması için yaptığı ayrıma göre nitel araştırma "neden?" sorusuna, nicel araştırma ise "ne kadar, kaç tane?" sorusuna yanıt verir. Nitel veri gözlem ve sözlerden, nicel veri ise ölçülebilir göstergelerden oluşur.

Nicel araştırma nedir, ne zaman kullanılır?

Nicel araştırma, kullanıcı davranışını ve tutumunu sayılabilir göstergelerle ölçer. Kullanılabilirlik bağlamında görev başarı oranı, görev süresi, hata sayısı ve memnuniyet puanı tipik göstergelerdir. Ürün bağlamında ise dönüşüm, terk, özellik kullanım sıklığı ve anket ölçek puanları öne çıkar.

Kullanıcı araştırmasında sık kullanılan nicel yöntemler: • Anketler: Kapalı uçlu sorular ve ölçeklerle tutum ve tercihleri ölçmek • Ürün analitiği: Kullanıcıların uygulama içinde nerede vazgeçtiğini, hangi özelliği ne sıklıkla kullandığını izlemek • A/B testleri: İki tasarım seçeneğinden hangisinin hedef göstergede daha iyi sonuç verdiğini karşılaştırmak • Nicel kullanılabilirlik testleri: Sıkı kontrol edilen koşullarda, görev sırası rastgele tutularak başarı ve süre ölçmek • Kart sıralama ve ağaç testi gibi yöntemlerin büyük örneklemle uygulanması

Nicel araştırma; bir tasarımın öncekine göre iyileşip iyileşmediğini göstermek, rakiplerle kıyaslamak ve zaman içindeki değişimi izlemek için uygundur. Sınırı şudur: bir göstergenin değiştiğini gösterir, ama nedenini açıklamaz. Güvenilir sonuç için örneklemin, sonuçların tesadüfe bağlı olmadığını gösterebilecek büyüklükte ve hedef kitleyi temsil eder nitelikte olması gerekir.

Nitel araştırma nedir, ne zaman kullanılır?

Nitel araştırma, kullanıcıların deneyimini, motivasyonunu ve zihinsel modelini derinlemesine anlamaya çalışır. Veri; görüşme notları, kullanıcının sesli düşünürken söyledikleri, gözlem kayıtları ve ekran kayıtlarından oluşur. Analiz, bu verideki örüntüleri temalara dönüştürmektir.

Kullanıcı araştırmasında sık kullanılan nitel yöntemler: • Derinlemesine görüşmeler: Kullanıcının bir işi nasıl yaptığını, nerede zorlandığını kendi sözleriyle anlatması • Sesli düşünme protokolüyle kullanılabilirlik testleri: Katılımcı görevi yaparken aklından geçenleri söyler, araştırmacı nerede takıldığını gözler • Bağlamsal sorgulama ve saha gözlemi: Kullanıcıyı kendi ortamında çalışırken izlemek • Günlük çalışmaları: Kullanıcının belirli bir süre boyunca deneyimini kaydetmesi

Nielsen Norman Group'a göre nitel çalışmalar ağırlıklı olarak biçimlendirici (formative) amaçla, yani tasarım sürerken büyük sorunları hızlı ve düşük maliyetle bulup düzeltmek için kullanılır. Görece küçük katılımcı gruplarıyla bile tekrarlayan sorunlar görünür hale gelir. Sınırı şudur: bir sorunun ne kadar yaygın olduğunu ya da kullanıcı kitlesinin ne kadarını etkilediğini söyleyemez.

Temel farklar ölçüt ölçüt

Yanıtladığı soru: Nicel / ne kadar, kaç kişi, ne sıklıkla? Nitel / neden, nasıl, hangi bağlamda?

Veri türü: Nicel / sayılar, oranlar, süreler, ölçek puanları. Nitel / sözler, gözlemler, davranış betimlemeleri.

Örneklem: Nicel / istatistiksel güven için daha büyük ve temsil gücü olan örneklem. Nitel / küçük, amaca göre seçilmiş katılımcı grubu.

Koşullar: Nicel / her oturumda aynı, sıkı kontrol edilen koşullar; genellikle sesli düşünme yok. Nitel / esnek koşullar, oturumlar arasında soru ve görev değiştirilebilir, takip soruları sorulur.

Analiz: Nicel / betimsel ve çıkarımsal istatistik, anlamlılık testleri. Nitel / kodlama, tematik analiz, afinite haritalama.

Tipik çıktı: Nicel / "Ödeme adımındaki terk oranı yeni tasarımdan sonra arttı" gibi ölçülmüş bir bulgu. Nitel / "Kullanıcılar kargo ücretini son adımda gördükleri için vazgeçiyor" gibi bir açıklama.

Amaç: Nicel / özetleyici (summative) değerlendirme, kıyaslama, izleme. Nitel / biçimlendirici değerlendirme, keşif, fikir üretimi.

Örnek: iki yöntemi aynı soruda birleştirmek

Örneğin bir mobil bankacılık uygulamasında para transferi akışının yeniden tasarlanması gündemde olsun.

İlk adımda ürün analitiği, transfer akışında hangi ekranda en çok terk yaşandığını gösterir. Bu nicel bulgu sorunun yerini işaret eder, ama nedenini söylemez.

İkinci adımda araştırmacı, o ekranı kullanan küçük bir katılımcı grubuyla sesli düşünme protokolüyle kullanılabilirlik testi yapar. Katılımcıların alıcı adını doğrulama adımında, gösterilen bilginin doğru kişiye ait olup olmadığından emin olamadıkları için tereddüt ettiği görülür. Bu nitel bulgu bir tasarım hipotezine dönüşür.

Üçüncü adımda yeni tasarım hazırlanır ve mevcut tasarımla bir A/B testinde karşılaştırılır. Terk oranındaki değişim nicel olarak ölçülür. Böylece nicel veri sorunun yerini ve çözümün etkisini, nitel veri ise sorunun nedenini ortaya koyar. Bu sıralı yaklaşım karma yöntem araştırması olarak da adlandırılır.

Hangi durumda hangisi?

Nicel araştırma daha uygun olabilir, eğer: • Bir sorunun ne kadar yaygın olduğunu ya da kaç kullanıcıyı etkilediğini bilmek gerekiyorsa • İki tasarım seçeneği arasında ölçülebilir bir hedef göstergeye göre karar verilecekse • Bir iyileştirmenin etkisini kanıtlamak, yatırım getirisini göstermek ya da zaman içinde izlemek isteniyorsa • Paydaşlar karar için ölçülmüş bir referans değer bekliyorsa

Nitel araştırma daha uygun olabilir, eğer: • Ürün ya da özellik henüz keşif aşamasındaysa ve kullanıcıların gerçek ihtiyacı belirsizse • Analitik veride bir sorun görülüyor ama nedeni bilinmiyorsa • Tasarım prototip aşamasında ve büyük kullanılabilirlik sorunları hızla bulunmak isteniyorsa • Kullanıcının dili, zihinsel modeli ve iş akışı anlaşılmadan anket sorusu yazmak riskliyse

Pratik bir kural: bilinmeyenin ne olduğu bile belirsizse nitel araştırmayla başlanır; seçenekler netleşip hangisinin daha yaygın ya da daha etkili olduğu sorulduğunda nicel araştırmaya geçilir.

Sık yapılan hatalar ve önlemleri

• Nitel bulguyu yüzdeye çevirmek: Küçük bir görüşme grubundaki katılımcı sayısını oran olarak raporlamak yanıltıcıdır. Nitel bulgu "bu sorun var ve şu nedenle oluyor" diye raporlanır, yaygınlığı nicel yöntemle doğrulanır.
• Anketle "neden" sormaya çalışmak: Açık uçlu anket soruları kısa ve bağlamsız yanıtlar üretir; gerçek nedeni anlamak için görüşme ya da gözlem gerekir.
• Yönlendirici soru: "Bu özellik işinizi kolaylaştırır mı?" gibi sorular hem görüşmede hem ankette sonucu çarpıtır. Davranışı anlatmaya davet eden tarafsız sorular kullanılmalıdır.
• Temsil gücü olmayan örneklem: Yalnızca en sadık kullanıcılara gönderilen anket, tüm kullanıcı kitlesi hakkında yanlış bir tablo çizer.
• Bulguyu karara bağlamamak: Her araştırma sorusu, sonuca göre hangi kararın değişeceği yazılarak başlatılmalıdır; aksi halde rapor arşivde kalır.
• Etik ve kişisel veri: Görüşme kayıtları ve anket yanıtları kişisel veri içerebilir; katılımcı onamı ve saklama kuralları baştan belirlenmelidir.

Mindset programlarında nitel ve nicel araştırma

Kullanıcı Araştırması (UX Research) eğitimi; UX araştırmasının temelleri ve planlama, nitel araştırma yöntemleri, kullanılabilirlik testleri, nicel araştırma ve anket tasarımı, veri analizi ve içgörü üretimi, araştırma bulgularının sunulması ile kurumsal UX araştırma operasyonu modüllerinden oluşur ve iki yaklaşımı aynı programda ele alır.

Yönteme göre derinleşmek isteyenler için Nicel Anket Tasarımı eğitimi ölçek kullanımı ve soru yazımı, örneklem planlaması, veri temizleme ve temel istatistiksel analizi; Nitel Veri Analizi: Tematik Kodlama ve Afinite Haritalama eğitimi açık kodlama, kod kitabı, afinite haritalama oturumu ve temadan içgörüye geçişi işler. Karma Yöntem Araştırması: Nitel ve Nicel Verinin Birleştirilmesi eğitimi ise iki veri türünü birleştirme tekniklerini ve çelişen bulguların yorumlanmasını çalışır.