Bir profil raporundaki güven sayısının bir kanıt tanımına ihtiyacı var

Sayının birimini adlandırarak başlayın

Sayısal bir model puanı, kaynaklı bir olgudan ve ölçülmüş bir başarı oranından farklı bir nesnedir. Kaynaklı bir olgu, inceleyebileceğiniz bir kamusal beyana işaret eder; ölçülmüş bir başarı oranı, bilinen vakalar üzerinde doğrulamadan gelir; bir puan ise anlamı, neyi karşılaştırmak için eğitildiğine ve test edildiğine bağlı olan bir çıktıdır. Bir rapor bunlardan hangisi olduğunu söylemeden bir sayı gösterdiğinde, bunu tanımsız bir birim olarak kaydedin. Bunu sessizce bir kişi hakkında olasılığa dönüştürmeyin, çünkü bu dönüşüm raporun hak etmediği bir çıkarımdır. [NIST AI 600-1: üretken yapay zekâ konfabülasyonu ve kaynak doğrulaması]

• Sayıyı, etiketi ve eşlik eden sözcüklerle birlikte göründüğü gibi tam olarak yazın.
• Raporun bir birim, bir temel, bir aralık veya bir doğrulama kümesi belirtip belirtmediğini not edin.
• Bunlardan herhangi biri eksikse sayıyı kesin değil, tanımsız olarak işaretleyin.

Yorumlamadan önce üç soru sorun

Sayının neyi ölçtüğünü, neyle karşılaştırıldığını ve herhangi bir doğrulamanın sağlanıp sağlanmadığını sorun. Bir puan, saklanan bir örneğe benzerliği, kaynaklar arasındaki uyumu veya dahili bir model tercihini tanımlıyor olabilir; bunlar bir kişi hakkında olasılıklar değildir. Doğrulama, sayıyı kalibre edilmiş olarak okumanıza olanak tanıyacak kısımdır. Genel yapay zekâ riski rehberliği, performansın dar, sistematik olmayan veya anekdot niteliğindeki değerlendirmelerden genellenmemesi gerektiğini ve üretilen çıktının girdileriyle tutarsızken kendinden emin görünebileceğini belirtir. Bu ihtiyatı, belirtilmiş bir temeli olmayan her puana uygulayın. [NIST AI 600-1: üretken yapay zekâ konfabülasyonu ve kaynak doğrulaması]

• Sayı neyi ölçüyor?
• Neyle karşılaştırıldı?
• Herhangi bir doğrulama sağlanmış mı ve ne tür vakalar üzerinde?

Tanımsız bir puanı gözlemlenen olgulardan ayrı tutun

İki ayrı kayıt oluşturun. Birincisi, izin verilen kamusal kaynakta gözlemlediklerinizi tutar: bir kullanıcı adı, kamusal bir gönderi, bir görsel, belirtilmiş bir bağlılık. İkincisi, raporun sayısal çıktısını ve raporun bundan çıkarsadığı her şeyi tutar. Bunları görsel olarak ayrı tutun ki bir puan, kendi kaynağından yoksun bir ifadeye ödünç yetki vermesin. Rapor kaynaktan daha kesin olduğunda, eksik niteleyiciyi iddianın yanına yazın ve iddiayı kaynağın gerçekte desteklediği şeye indirgeyin.

Bir ondalık sayının doğrulama ima etmesine izin vermeyin

Sunumdaki kesinlik, doğruluğun kanıtı değildir. Birkaç ondalık basamağa yazılmış bir sayı, gerçek dünya hakkında hiçbir şeyi ölçmezken kalibre edilmiş görünebilir. Rapor puanın temelini tanımlayana kadar biçimi kozmetik olarak ele alın. Üretilen çıktı, desteklenmeyen içeriği kendinden emin bir tonla sunabildiğinden, herhangi bir üretilen çıktıdaki kaynakları güvenmeden önce inceleyip doğrulayın. Rapor bir tanım sunmuyorsa, çalışma sayfanız sayının yanında bir olasılık tahmini değil, tanımsız sözcüğünü taşımalıdır. [NIST AI 600-1: üretken yapay zekâ konfabülasyonu ve kaynak doğrulaması]

Kesin sınırı kaydedin ve orada durun

Kaynak yoksa, özelse, uyuşmuyorsa veya belirsizse, bu kesin sınırı yazın ve desteklenmeyen çıkarımı durdurun. Eksik kanıt yerine özel erişim, bir benzerlik tahmini veya daha yüksek bir puan koymayın. Yararlı bir sınır, neyin eksik olduğunu adlandırır: gönderi silinmişti, görsel yalnızca gevşek bir şekilde eşleşmişti, profil birden fazla kişiye ait olabilirdi. Boşluğu adlandırmak, belirsizliği biri hakkında bir sonuca dönüştürmeden sırada ne yapacağınıza karar vermenizi sağlar.

• Genel bir sorumluluk reddi değil, belirli boşluğu belirtin.
• Bir gizlilik ayarını, sessizliği veya eşleşen fotoğrafı kimliğin ya da niyetin kanıtı olarak ele almayın.
• Bir ipucu önemliyse, atlatma değil, kamusal kaynağın kendisi üzerinden yasal bir kontrol planlayın.

Tek bir rapor için okuyucu çalışma sayfası

Üç sütun yapın: rapor ifadesi, kaynak temeli ve durum. Kaynak temeli sütununda, raporun dayandığı kamusal beyanı yapıştırın veya başka sözcüklerle ifade edin. Durum sütununda kaynaklı olgu, çıkarsanmış iddia veya tanımsız puan seçeneklerinden birini seçin. Sayının tek başına göründüğü her satır tanımsız sütununda kalır. Bu, kendi yazdığınız editoryal bir yardımcıdır; herhangi bir platformun sunduğu bir denetim değildir. Hipotetik bir örneği dürüst tutar: bir rapor kamusal bir kullanıcı adının yanında 0.87 gösterseydi, çalışma sayfası kişi hakkında herhangi bir şeyin doğru olma olasılığını yüzde 87 olarak değil, kaynaklı bir kullanıcı adı ve tanımsız bir sayısal etiket kaydederdi.

Birkaç soru daha