After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Kurs Açıklaması
A description of the course.
Ön Koşullar
Müfredat
Kurs içeriği
1
LLM Uygulama Değerlendirmesi
Değerlendirme Temelleri
Doğruluk, maliyet ve gecikme boyutlarında performansı ölçen kapsamlı yapay zeka uygulaması değerlendirme sistemleri tasarlamayı öğreneceksiniz. Değerlendirme veri setlerini ve algoritmik eşleştirmeden LLM-as-judge yaklaşımlarına kadar çeşitli değerlendirici türlerini kullanarak; başarı kriterlerini en baştan belirlemenizi ve yayına hazır uygulamalara yönelik ilerlemeyi ölçmenizi sağlayacak bir yapı kurabileceksiniz.
Değerlendirme Uygulaması
Veri seti oluşturma, değerlendirici tanımlama ve deney yürütme süreçlerinde LangSmith kullanarak değerlendirme sistemlerini pratikte uygulamayı öğreneceksiniz — nesnel karşılaştırmalar için algoritmik değerlendiriciler, öznel değerlendirmeler için LLM-as-judge değerlendiricileri ve kapsamlı kalite analizi için çok ölçütlü değerlendiriciler inşa edeceksiniz.
Konuşma Değerlendirmesi
Kriter tabanlı değerlendirme ile online evaluation kullanarak conversational AI uygulamalarını değerlendirmeyi — LLM-as-judge değerlendiricileri aracılığıyla turn-level ve tam diyalog değerlendirme modellerini uygulayarak — öğreneceksiniz; bu sayede chatbot kalitesini tutarlılık, görev tamamlama ve verimlilik üzerinden sistematik olarak ölçebileceksiniz.
LLM Application Evaluation with LangSmith
Kurs
Tamamlandı
