LLM Değerlendirme ve Karşılaştırma (Evals)
- 18 saat
- Canlı Online
- 16 Aralık 2026 başlangıç
- 6 modül
- Sertifikalı
500+ Kurumsal Organizasyonda Yetkinlik Dönüşümü
Programın özü
Dil modeli uygulamalarını sezgiyle değil ölçümle geliştirmek isteyen yapay zeka mühendisleri, ürün ekipleri ve kalite sorumluları için tasarlanmıştır. Katılımcılar otomatik değerlendirme setleri kurup model ve istem değişikliklerinin etkisini karşılaştırmalı biçimde ölçebilir hale gelir.
Açık dönemler
Tüm açık dönemler ve bireysel kayıt fiyatları.
Program hakkında
Bu programı tamamladığınızda
Program hedeflerine ulaşarak kariyerinizi bir üst seviyeye taşıyın.
Uygulamanın gerçek senaryolarını temsil eden değerlendirme setleri kurabilir
Deterministik ve model tabanlı puanlayıcıları görev tipine göre yazabilir
Model ve istem sürümlerini aynı set üzerinde karşılaştırmalı test edebilir
Sonuçların güvenilirliğini ve istatistiksel anlamlılığını değerlendirebilir
Programa Dahil Olanlar
Programla birlikte erişeceğiniz içerik, destek ve kaynaklar.
Canlı Dersler
CANLIAlanında uzman eğitmenlerle gerçek zamanlı, interaktif oturumlar. Sorularınızı anında sorar, uygulamaları birlikte yaparsınız.
Uygulamalı Proje
Kendi dil modeli uygulamanız için değerlendirme seti ve puanlayıcılar kurar, iki model ile iki istem sürümünü karşılaştırmalı olarak test edersiniz.
Eğitmen Desteği
Oturum dışında da eğitmene ulaşın: takıldığınız konuyu sorun, çalışmanıza geri bildirim alın.
Dönem Topluluğu
Farklı sektörlerden katılımcılarla aynı dönemde ilerleyin; soru sorun, çalışmalarınızı paylaşın.
Ders Kayıtlarına Erişim
Kaçırdığınız ya da tekrar etmek istediğiniz her dersi kayıttan izleyin.
Şablonlar ve Kaynak Seti
Eval Stratejisi şablonu, Test Seti Tasarım Rehberi, Rubrik Yazım Kılavuzu ve Model Karşılaştırma Raporu formatı verilir.
Araç Uygulamaları
OpenAI Evals yaklaşımı, promptfoo, DeepEval, Python puanlama betikleri ve GitHub Actions değerlendirme laboratuvarlarında uygulamalı olarak kullanılır.
Katılım Sertifikası
Programı tamamladığınızda LinkedIn profilinize eklenmeye hazır, QR ile doğrulanabilir sertifika.
Ücretsiz Tekrar Hakkı
%80 devam şartını yerine getiren katılımcılar, programı sonraki bir dönemde ücretsiz olarak tekrar edebilir.
Ön Hazırlık Materyali
Program başlamadan önce paylaşılan ısınma dokümanlarıyla ilk derse hazır gelirsiniz.
Mindset Güvencesi
Kaydınız Mindset katılımcı güvencesi kapsamındadır; dönem başında sorun yaşarsanız çözüm için yanınızdayız.
Emin değil misiniz?
20 dakikalık ücretsiz ön görüşmede uygunluğunuzu ve doğru dönemi netleştirelim.
Program içeriği
6 modülde, temelden uygulamaya ilerleyen kapsamlı bir eğitim programı. Modüllere tıklayarak konu başlıklarını görebilirsiniz.
- Görev tiplerine göre değerlendirme yaklaşımlarının belirlenmesi
- Kalite boyutlarının tanımlanması: doğruluk, biçim, ton, güvenlik
- Çevrimdışı eval ile çevrimiçi ölçümün ilişkisi
- Değerlendirme kapsamının ve bütçesinin planlanması
- Eval stratejisi dokümanının hazırlanması
- Gerçek kullanım günlüklerinden senaryo çıkarma
- Kenar durum ve zorlayıcı örneklerin eklenmesi
- Referans yanıtların hazırlanması ve etiketleme kuralları
- Set büyüklüğü ve kapsam dengesi
- Test setinin sürümlenmesi ve sızıntının önlenmesi
- Kesin eşleşme, düzenli ifade ve şema doğrulama puanlayıcıları
- Metin benzerliği ve gömme tabanlı puanlama
- LLM-as-judge puanlayıcı istemlerinin yazılması
- Rubrik tabanlı çok boyutlu değerlendirme
- Puanlayıcı güvenilirliğinin insan etiketleriyle doğrulanması
- İkili karşılaştırma (pairwise) yöntemi ve konum yanlılığı
- Elo ve kazanma oranı tabanlı sıralama
- Model ve istem sürümlerinin aynı set üzerinde koşturulması
- Sonuç farklarının istatistiksel anlamlılığı
- Maliyet ve gecikme boyutlarının karşılaştırmaya dahil edilmesi
- Zararlı içerik ve politika ihlali testleri
- İstem enjeksiyonu ve jailbreak senaryolarının denenmesi
- Halüsinasyon oranının ölçülmesi
- Tutarlılık ve tekrarlanabilirlik testleri
- Kırmızı takım (red team) senaryolarının hazırlanması
Program Sertifikası
Programı tamamladığında sertifikan otomatik olarak hesabına tanımlanır; beklemeden indirir, paylaşırsın.
Sertifikan dijital doğrulama kodu taşır; kurumlar kodu girerek geçerliliğini anında doğrulayabilir.
LinkedIn profiline tek tıkla ekleyebilir, doğrulama bağlantısıyla paylaşabilirsin.
Hesabındaki Sertifikalarım bölümünden istediğin zaman PDF olarak indirebilirsin.
Sıkça sorulan sorular
Cevabını bulamadığınız bir şey mi var? Danışmanlarımız hafta içi 09:00–19:00 arası yanıtlıyor.
Kariyerine bugün yatırım yap.
Geniş ödeme tercihleriyle hemen başla. Mindset'te öğrenmeye başlamak artık çok daha kolay. Size en uygun ödeme seçeneğini seçin, yolculuğunuza bugün başlayın.
- 256-bit SSL ile güvenli ödeme
- Kişisel bilgileriniz güvende
- Gizli ücret yok
Ödeme adımında bankanızı seçin, hesap bilgilerini anında görün.
Havale / EFT
- 1Havale/EFT seçinÖdeme adımında yöntem olarak işaretleyin.
- 2Bankanızı seçinHesap bilgilerini anında görün.
- 3Transferi yapınAçıklamaya sipariş numaranızı yazın.
- 4Kaydınız onaylanırÖdemeniz eşleşince kaydınız tamamlanır.
Sorularınız mı var?
Danışmanlarımız hedefinize uygun dönemi ve ödeme planını sizinle birlikte netleştirsin.
İlgili eğitimler
Veri Mühendisliği ve MLOps alanındaki programlar arasından bu programa en yakın olanlar.
- Veri ve Model SLA Yönetimi
- Üretim ML Sistemlerinde Olay Müdahalesi
- Öznitelik Kayması ve Kavram Kayması İzleme
- Çevrimiçi Öğrenme ve Artımlı Model Güncelleme
- Model Dağıtım Stratejileri (Multi-Armed Bandit)
- Yapay Zeka Uygulamalarında Sürüm ve Yapılandırma Yönetimi
- Vektör Veritabanı Operasyonu ve Bakımı
- Doküman İşleme ve Parçalama (Chunking) Pipeline'ı