Eğitim programında prototip ve pilot: neyi, nasıl, kimle sınamalı

Prototip ile pilot arasındaki fark

Prototip, deneyimin henüz bitmemiş bir taslağıdır ve amacı fikirleri ucuza sınamaktır. Pilot ise neredeyse son haline gelmiş programın küçük bir gruba gerçek koşullarda uygulanmasıdır ve amacı yaygınlaştırma kararını desteklemektir. Birinde "bu fikir işe yarar mı, anlaşılır mı?" sorusu, diğerinde "bu program ölçeklenebilir ve hedefine ulaşıyor mu?" sorusu sorulur.

İkisi de eğitim tasarımındaki en ucuz hata düzeltme fırsatıdır. Tüm çalışanlara yayılmış bir eğitimde fark edilen yönerge hatası, çok sayıda kişinin zamanını harcatır; prototipte aynı hata bir akşamda düzeltilir. Bu yüzden her ikisini de takvime ve bütçeye baştan koyun.

Prototip testi: neyi sınamak, nasıl yapmak

Prototipte tüm programı üretmeye gerek yoktur; en riskli varsayımları sınayan kısım yeterlidir. Riskli kısım yeni bir etkinlik türü, karmaşık bir yönerge, ilk kez kullanılan platform ya da hassas bir geri bildirim anı olabilir. Prototip biçimleri:

• Kâğıt ya da slayt taslağı: akışı ve yönergeleri tartışmak için.
• Tek modülün çalışır örneği: öğrenenin ekranda ne gördüğünü ve nerede takıldığını izlemek için.
• Canlı oturumun prova sürümü: etkinlik süresini, katılımcı tepkisini ve fasilitasyon notlarını sınamak için.
• Karar senaryosu ya da vaka örneği: zorluk düzeyinin uygun olup olmadığını görmek için.

Test sırasında öğrenene görev verin ve onu izleyin; kendi düşündüklerini yüksek sesle söylemesini isteyin. Yönlendirmeden, yardım etmeden izleyin. Takıldığı yeri, yanlış anladığı yönergeyi ve duygusal tepkisini not edin. Az sayıda katılımcı bile, tekrar eden sorunları ortaya çıkarmaya yeter.

Test planı: görevler, ölçütler ve kayıt

Prototip testi için kısa bir plan yazın: Neyi öğrenmek istiyoruz? Hangi görevleri yaptıracağız? Başarıyı nasıl tanımlayacağız? Örneğin "öğrenen ilk etkinliği yönerge dışında yardım almadan tamamlayabilir mi", "hedef kavramı kendi sözleriyle açıklayabilir mi", "etkinliğin süresi planlanan zamana sığıyor mu".

Her oturumdan sonra gözlem notlarını ortak bir tabloya yazın: gözlem, kimde görüldü, ne kadar sık, ne kadar ciddi. Birden fazla kişide görülen sorunlar önce düzeltilir. Tek bir kişide görülen sorun önemsiz sayılmaz ama öncelik sırası farklıdır. Testi kayıt altına almak (izinle) sonradan ekip içinde somut örneklerle konuşmayı kolaylaştırır.

Pilot grubunu ve koşullarını seçmek

Pilot grubu hedef kitleyi temsil etmelidir. Yalnız gönüllü ve istekli çalışanlarla yapılan pilot, programın gerçek zorluğunu saklar. Mümkünse farklı birimlerden, deneyim düzeylerinden ve yöneticilerden katılımcı seçin. Pilotun koşulları gerçek uygulamaya yakın olmalıdır: gerçek eğitmen, gerçek platform, gerçek zamanlama.

Pilotu başlatmadan önce katılımcılara bunun bir deneme olduğunu, geri bildirimlerinin programı değiştireceğini ve bunun için kendilerinden açık görüş beklendiğini anlatın. Yöneticileri de bilgilendirin; pilot sırasında çalışanın eğitime ayıracağı zaman iş yükü içinde korunmalıdır. Aksi halde pilot sonuçları programı değil, iş yoğunluğunu ölçer.

Pilot sırasında ne ölçülür ve gözlemlenir

Pilotta hem öğrenme hem uygulama verisi toplayın. Programın akışı (süre aşımı, atlanan bölümler, teknik aksaklıklar), öğrenme kanıtları (etkinlik çıktıları, kısa değerlendirmeler), katılımcı deneyimi (anket ve odak görüşmesi) ve eğitmen gözlemleri birlikte değerlendirilir. Eğitmenin ve gözlemcinin pilot notları, program tasarımcısına en doğrudan bilgiyi verir.

Pilottan sonra bir süre geçince kısa bir takip yapın: katılımcılar öğrendiklerini işte kullanabildi mi, yöneticileri destekledi mi, kullanamadılarsa nedeni neydi? Bu takip, içerik kalitesinden çok uygulama koşullarını ortaya çıkarır ve sıklıkla program dışı kolaylaştırıcıların (yönetici desteği, araç erişimi) önemini gösterir.

Pilot öncesinde bir gözlem formu hazırlamak işi kolaylaştırır. Forma her bölümün planlanan ve gerçekleşen süresi, katılımcıların sorduğu sorular, eğitmenin yönergeyi yeniden anlatmak zorunda kaldığı yerler ve teknik sorunlar için satırlar ekleyin. Oturum bittiğinde gözlemci ve eğitmen birlikte kısa bir değerlendirme yapar; böylece unutulmadan not alınan konular program değişikliklerine dönüşür.

Bulguları önceliklendirmek ve karar vermek

Pilot ve testlerden çıkan bulguları şu türlere ayırın: programı engelleyen kritik sorunlar, öğrenmeyi zayıflatan orta düzey sorunlar ve iyileştirme önerileri. Kritik sorunlar yaygınlaştırma öncesi mutlaka düzeltilir; orta düzey sorunlar için hızlı çözüm ve takvim belirlenir; öneriler sonraki sürümlere alınır.

Pilot sonunda şu kararlar mümkündür: olduğu gibi yaygınlaştırmak, düzeltip yeniden denemek ya da durdurmak. Önceden tanımlı kriterler bu kararı kolaylaştırır: örneğin hedef davranış kanıtlarının çoğunun görülmesi, kritik sorun kalmaması ve eğitmenlerin programı bağımsız yürütebilmesi. Örneğin pilotta bir etkinliğin yönergesi katılımcıların çoğunda farklı anlaşıldıysa bu kritik sorundur; renk tonu ya da slayt düzeni hakkındaki yorum ise öneridir. Karar toplantısında bulguları somut örneklerle sunun; "katılımcılar memnun kaldı" cümlesi tek başına yaygınlaştırma gerekçesi sayılmaz.

Sık yapılan hatalar

Sık görülen hatalar: pilotu bir formalite olarak yapmak ve bulguları dikkate almamak, değişiklik yapmak için zaman bırakmamak, yalnız memnuniyet anketine bakmak, pilot grubunu gönüllülerden oluşturmak, pilotta bir eğitmen, yaygınlaştırmada başka eğitmen kullanıp farkı ölçmemek ve bulguları belgelememek. Pilot ve prototip bulgularını kısa bir raporla kayıt altına almak, sonraki programlarda aynı hataların tekrarını önler.

Ayrıca pilotu bir kereye mahsus görmeyin: büyük içerik güncellemelerinden sonra küçük çaplı yeni bir pilot yapmak, yaygınlaştırma riskini düşürür.

Bu beceriyi Mindset programlarında nerede çalışırsınız

Mindset kataloğundaki Öğrenme Deneyimi Tasarımı programı prototip ve kullanılabilirlik testi ile ölçme ve yaygınlaştırma başlıklarını içerir. Harmanlanmış (Blended) Öğrenme Programı Tasarımı programının son modülü ise pilot uygulama ve programın iyileştirilmesine ayrılmıştır; bu program sanal sınıf, eş zamansız bileşenler ve öğrenen desteği gibi başlıklarla harmanlanmış programların pilotunu gerçek bir bağlama oturtur.

Bu eğitimler, yeni program yayına almadan önce sınama düzeni kurmak isteyen kurumsal öğrenme ve gelişim ekipleri ve eğitim tasarımcıları için uygundur.