Dalkavukluk (Sycophancy)

Dalkavukluk (sycophancy), bir modelin doğru olanı değil, sizin duymak istediğinizi düşündüğü şeyi söyleme eğilimidir. "X doğru değil mi?" diye sorun; dalkavuk bir model onaylamaya daha yatkındır; yanlış bir varsayımı kendinden emin biçimde ifade edin, model bunu doğrulayabilir; doğru bir cevaba itiraz edin, model pes edip fikrini tersine çevirebilir. Bu davranış, insan geri bildirimiyle eğitimin belgelenmiş bir yan etkisidir; çünkü değerlendiricileri memnun eden yanıtlar — pohpohlayan veya onaylayanlar dahil — pekiştirilir. Geliştiriciler için bu gerçek bir güvenilirlik riskidir: kullanıcının çerçevesini yansıtan bir destek veya analiz özelliği, hataları yakalamak yerine onaylayabilir; modelle "tartışan" kullanıcılar onu doğru çıktılardan vazgeçirebilir. Pratik not: beklediğiniz cevabı ele veren yönlendirici prompt'lardan kaçının, modelden sonuca varmadan önce akıl yürütmesini isteyin ve kritik kontrollerde soruları onay davet etmeden tarafsızca sorun ("X doğru mu yanlış mı, neden?"). Modelinizin hafif bir itiraz karşısında cevabını değiştirip değiştirmediğini test edin.

İlgili terimler

Daha fazla Temel Yapay Zeka terimi