Talimat izleme, bir modelin prompttaki kurallara, kısıtlamalara ve biçim isteklerine ne ölçüde uyduğunu anlatan yetenektir.
Talimat İzleme ne demek?
Ön eğitimden çıkan modeller talimatlara pek uymaz; talimat ince ayarı (instruction tuning) ve RLHF ile bu beceri kazandırılır. Modeller arasında talimat izleme gücü belirgin biçimde farklıdır.
Çok sayıda kural verildiğinde modeller bazılarını atlayabilir. En önemli kuralları başa ya da sona yazmak ve kuralları numaralandırmak uyumu artırır.
Yakın kavramlar
KısıtlamaConstraintKısıtlama, promptta cevabın uzunluğu, dili, tonu, içermesi ya da içermemesi gerekenler gibi sınırları belirleyen kurallardır.Prompt Mühendisliğiİnce AyarFine-tuningİnce ayar, önceden eğitilmiş bir modelin belirli bir görev, alan ya da üslup için daha küçük ve özel bir veri setiyle yeniden eğitilmesidir.Makine Öğrenmesi & EğitimRLHFReinforcement Learning from Human FeedbackRLHF (insan geri bildirimiyle pekiştirmeli öğrenme), dil modellerini insanların tercih ettiği cevaplara göre eğiterek daha yardımsever, dürüst ve güvenli hâle getirme yöntemidir.Makine Öğrenmesi & Eğitim