UX Metriklerini Ölçmek: Görev Başarısı, Süre, Hata ve HEART

UX'i ölçmek neden zor, neden gerekli

Kullanıcı deneyimi sezgisel bir kavram gibi görünür, bu yüzden ölçülemez sanılır. Oysa tasarım kararlarını tartışmayı görüşten veriye taşıyan şey, deneyimin somut göstergelere bağlanmasıdır. "Bu akış daha iyi" cümlesi, "görevi tamamlayan kullanıcı oranı arttı, tamamlama süresi kısaldı, hata azaldı" cümlesinin yanında zayıf kalır.

Ölçüm üç iş görür: mevcut durumu gösterir (temel çizgi), değişikliğin işe yarayıp yaramadığını söyler ve ekiplerin öncelik konuşmasını ortak bir zemine oturtur. Ancak ölçüm bir araçtır, amaç değil. Metrik kendi başına bir şey söylemez; neden sorusuna kullanıcı gözlemi ve görüşme cevap verir.

İşe doğru soruyla başlayın: hangi kullanıcı davranışını anlamak istiyorsunuz, hangi karar bu ölçüme bağlı? Karar bağlanmamış bir metrik, raporda süs olarak kalır.

Davranışsal ve tutumsal ölçümler

UX metrikleri başlıca iki ailede toplanır. Davranışsal metrikler kullanıcının ne yaptığını ölçer: görevi tamamladı mı, ne kadar sürdü, hangi hatayı yaptı, hangi yolu izledi. Tutumsal metrikler ise kullanıcının ne hissettiğini ve nasıl değerlendirdiğini ölçer: memnuniyet, kolaylık algısı, güven.

Bu aileler birbirini tamamlar çünkü ayrışabilirler. Kullanıcı görevi başarıyla bitirip yine de deneyimi kötü bulabilir; ya da görevi tamamlayamadığı hâlde arayüzü beğenmiş olabilir. Yalnız birine bakmak yanıltıcıdır.

Bir de nicel ve nitel eksen vardır. Nicel veri "ne kadar" sorusuna sayıyla cevap verir; nitel veri "neden" sorusuna gözlem ve sözle cevap verir. İkisini birleştirince gruplu bir harita çıkar. Bir ürün ekibi her gruptan en az bir yöntem kullanırsa hem eğilimi hem nedeni görür.

Temel görev metrikleri

Görev başarı oranı, görevi başarıyla tamamlayan kullanıcıların, görevi deneyen tüm kullanıcılara oranıdır: başarılı kullanıcı sayısı bölü toplam kullanıcı sayısı. Önce başarının tanımını yazın: kullanıcı doğru sonuca ulaştı mı, yardımsız mı ulaştı? Kısmi başarıyı (hedefe ulaştı ama dolambaçlı yoldan) ayrıca işaretlemek, nerede zorlandığını görmeyi sağlar.

Görevde geçen süre, görevin başlangıcından bitişine kadar geçen süredir. Genellikle yalnızca başarılı denemeler için hesaplanır, çünkü vazgeçen kullanıcının süresi anlamlı bir hız göstergesi değildir. Süre dağılımı çarpıktır; birkaç çok uzun deneme ortalamayı bozar, bu yüzden ortanca (medyan) değere bakmak çoğu durumda daha sağlıklıdır.

Hata oranı, kullanıcının yaptığı hataları ölçer: yanlış tıklama, geri alınan işlem, form hatası. Hata türlerini sınıflandırın (kullanıcıdan mı, tasarımdan mı kaynaklı?) ve ciddiyetine göre ağırlıklandırın. Kritik olmayan bir yanlış tıklama ile geri dönüşü olmayan bir hata aynı şey değildir.

Bunlara ek olarak tıklama sayısı, yol sapması ve yardıma başvurma gibi yan göstergeler, aynı görevin neden zor olduğuna dair ipuçları verir.

Tutumsal ölçüm: SUS ve görev sonrası sorular

Kullanıcının algısı için standartlaşmış anketler kullanılır. Sistem Kullanılabilirlik Ölçeği (SUS), bir ürünün genel kullanılabilirlik algısını tek bir puana indirgeyen yaygın bir ankettir; ayrıntısı ilgili sayfada anlatılmıştır. Görev sonrası ise "bu görev ne kadar kolaydı" gibi tek soruluk ölçekler, her görev için anında algıyı yakalar.

Geçerli bir ankette soruları kendiniz yeniden yazmayın; bilinen ölçekler tutarlı biçimde ölçülmek ve zamanla karşılaştırılmak için vardır. Anketin metni, ölçek yönü ve sırası değişirse önceki sonuçlarla karşılaştırma bozulur.

Tutumsal veriyi davranışsal veriyle yan yana okuyun. Başarı oranı yüksek ama algı düşükse, görev yapılabiliyor fakat zahmetli demektir; başarı düşük ama algı yüksekse kullanıcı hatalarının farkında olmayabilir.

HEART çerçevesi: hedeften metriğe

HEART, ürün düzeyinde UX ölçümü için kullanılan bir çerçevedir. Mutluluk (Happiness), Katılım (Engagement), Benimseme (Adoption), Elde tutma (Retention) ve Görev başarısı (Task success) olmak üzere beş boyutu vardır. Her boyut, ürünün deneyimine farklı bir pencereden bakar: kullanıcı memnun mu, ürünü ne kadar kullanıyor, yeni kullanıcılar benimsiyor mu, geri dönüyorlar mı, görevlerini bitirebiliyorlar mı?

Çerçevenin asıl değeri boyutların yanında Hedef, Sinyal, Metrik (Goals, Signals, Metrics) sürecidir. Önce her boyut için ürün hedefini yazarsınız, sonra o hedefe ulaşıldığını gösterecek kullanıcı davranışı sinyalini belirlersiniz, en sonda bu sinyali izlenebilir bir metriğe çevirirsiniz. Böylece "elimizde ölçülebilen şey bu" diye metrik seçmek yerine, hedeften geriye doğru ilerlersiniz.

Her ürün beş boyutu birden izlemek zorunda değildir. Ürününüzün aşamasına ve hedefine uyan boyutları seçin; hepsini izlemek dikkat dağıtır.

Ölçümü kurmak: temel çizgi, örneklem, raporlama

Metriğin tek başına değeri yoktur, karşılaştırıldığında anlamlanır. Değişiklikten önce bir temel çizgi ölçün; sonra iyileştirmeyi aynı yöntemle yeniden ölçün. Ölçüm yöntemi değişirse karşılaştırma geçersiz olur.

Örneklem konusunda dürüst olun. Küçük gruplarla yapılan kullanılabilirlik testlerinde sayılar yönlendiricidir, istatistiksel kesinlik taşımaz; yüzde olarak sunmak yanıltıcı bir güven doğurur. Büyük bir kullanıcı kitlesinde analitikten gelen veri daha güvenilirdir, ancak nedeni açıklamaz. Her bulgunun yanına ölçümün nasıl yapıldığını ve kaç kişiye dayandığını yazın.

Raporlarda metriği kararlara bağlayın. "Görev başarı oranı yükseldi" tek başına bilgi vermez; "ödeme adımındaki yeniden tasarım sonrası başarı oranı yükseldi, hata azaldı, öncelik bir sonraki adıma geçebilir" bir karardır. Panoyu kalabalık tutmayın: az sayıda anlamlı metrik, çok sayıda göstergeden daha çok iş görür.

Yatırımın geri dönüşünü anlatırken de aynı disiplin geçerlidir; UX yatırımının iş sonuçlarına etkisi için ilgili blog yazısı geniş bir çerçeve sunar.

Sık yapılan hatalar

Sık görülen hatalar: karar bağlamadan metrik toplamak, yalnız tek bir metriğe bakmak, davranışı tutumsuz ya da tutumu davranışsız yorumlamak, başarı tanımını yazmadan ölçmek, küçük örneklemi kesin sonuç gibi sunmak, her şeyi ortalamayla özetlemek ve ölçümü yalnız sonda yapıp tasarım sürecine yedirmemek.

Bir diğeri, kolay ölçülen şeyi önemli sanmaktır. Tıklama sayısı kolay ölçülür ama kullanıcının hedefine ulaşıp ulaşmadığını söylemez. Önemli olanı ölçmek için çoğunlukla biraz emek gerekir: görev tanımı, test düzeni, anket. Bu emek, doğru kararın bedelidir.

Mindset programlarında nerede çalışılır

UX metrikleri, UX/UI eğitimlerinde kullanılabilirlik testi başlığında görev başarısı, süre ve hata ölçümü, SUS gibi anketlerle birlikte ele alınır. Tasarımın etkisini kanıtlaması beklenen UX tasarımcıları ve araştırmacıları ile ürün yöneticileri için, ölçümü tasarım sürecinin parçası yapma alışkanlığı kazandırır.