Bir yapay zekâ raporundaki alıntı, atıfta bulunulduğu iddiayı kapsıyor mu?

Bir alıntının neden kanıtla aynı şey olmadığı

Üretici bir sistem, girdileriyle uyuşmayan kendinden emin ifadeler sunabilir; bu nedenle kaynak ve atıf incelemesi, yapay zekâ çıktısının her kullanımında yer almalıdır. Alıntılanan bir ifade, bir kelime dizisi olarak doğru olabilir ama yine de üzerine kurulan cümleyi desteklemeyebilir. Gerçek soru, kelimelerin bir yerde görünüp görünmediği değil, geldikleri pasajın raporun iddia ettiğini söyleyip söylemediğidir. Alıntıyı kanıtın kendisi değil, herkese açık sayfaya geri giden bir işaretçi olarak görün. [NIST AI 600-1: üretken yapay zekâ konfabülasyonu ve kaynak doğrulaması]

• Onları karşılaştırana kadar alıntının ve iddianın ayrı nesneler olduğunu varsayın.

Cümleyi değil, paragrafı açın

Belirtilen herkese açık sayfayı bulun ve alıntılanan ifadeyi bağlamı içinde tespit edin. Çevresindeki tam paragrafı, ifade net değilse de üstündeki bölüm başlığını okuyun. Kimin konuştuğunu, neyin anlatıldığını ve pasajın bir olguyu, bir planı, bir olasılığı mı yoksa bir görüşü mü dile getirdiğini not edin. Daha uzun bir pasajdan koparılan bir cümle, çoğu zaman onu sınırlayan niteleyiciyi kaybeder.

• Anlam belirsiz olduğunda alıntının bir paragraf öncesini ve sonrasını okuyun.
• Sayfa başlığını ve okuduğunuz tarihi kaydedin, böylece kontrol tekrarlanabilsin.

Her alıntı için tek bir kapsam notu yazın

Karşılaştırmanın görünür kalması için her alıntıyı tek bir satırda kullanın. Aşağıdaki tablo bir kapsam notunun nasıl işlediğini gösterir; girdiler varsayımsal örneklerdir, herhangi bir gerçek sayfaya veya ürüne ilişkin bulgular değildir.

Geri çekin, daraltın veya belirsiz olarak bırakın

Basit bir kural uygulayın. Alıntı iddiayı kapsıyorsa iddiayı o kaynağa bağlı tutun. Alıntı iddiadan daha darsa iddiayı alıntılanan kapsama indirecek şekilde yeniden yazın veya fazlasını geri çekin. Alıntı yoksa, bağımsız bir herkese açık kaynak bulunmadıkça iddiayı tamamen geri çekin. Geriye kalan her şey sessizce kesinleştirilmek yerine belirsiz kalır. Bir yapay zekâ raporu ayrıca herkese açık profil içeriğinden iş, gelir veya ilişkilere dair yorumlar da sunabilir; bunlar doğrulanmamış çıkarımlardır, kişisel olgular değildir ve bir alıntı onları olguya dönüştürmez. [TraceSeek: ürün genel bakışı ve operatör tarafından doğrulanmış yetenekler]

• Geri çekilmiş bir iddianın raporun başka bir yerinde özet biçiminde varlığını asla sürdürmesine izin vermeyin.
• Belirsiz kalan iddiaların onaylanmış gibi okunmaması için kısa bir liste tutun.

Kaynak kontrol edilemediğinde

Bazı atıflar temiz biçimde çözümlenmeyecektir. Sayfa ortadan kalkmış, çevresindeki metin belirsiz, alıntılanan kaynak raporla uyuşmuyor veya belirtilen materyal özel olabilir. Bu durumların her birinde kesin sınırı kaydedin ve çıkarımı orada durdurun. Özel bir sayfayı başka yollarla yeniden oluşturmaya çalışmayın ve eksik bir kaynağı örtük bir onay olarak değerlendirmeyin. Herkese açık bir kullanıcı adı veya görsel, herkese açık profil materyaline götürebilir, ancak kapsam garanti değildir ve oradaki hiçbir şey kimliği ya da güncel etkinliği kanıtlamaz. [TraceSeek: ürün genel bakışı ve operatör tarafından doğrulanmış yetenekler]

• Sınırı, iddianın yanına sade sözcüklerle yazın: sayfa yok, sayfa özel, metin belirsiz, kaynak uyuşmuyor.
• Belirtilen sayfanın yerine farklı bir sayfa koymak yerine durun.

Ayrıma dair varsayımsal bir örnek

Varsayımsal bir raporun, herkese açık bir profil sahibinin belirli bir şehirde yaşadığını belirttiğini ve belirtilen sayfadan "kuzeyde yerleşik" ifadesini alıntıladığını düşünün. Çevredeki paragraf eski bir işverenin ofis konumunu anlatıyorsa, alıntı kişinin şu anda nerede yaşadığına dair iddiayı kapsamaz. Doğru kapsam notu, alıntının iddiadan daha dar olduğu ve ikamet iddiasının geri çekildiği ya da belirsiz olarak işaretlendiğidir. Aynı rapordaki ikinci bir iddia, profilin belirli bir hobiyi listelediğini söylüyorsa ve alıntılanan paragraf bunu açıkça belirtiyorsa, o alıntı kendi iddiasını kapsar ve tek herkese açık kaynağa bağlı kalarak yerinde durabilir.

Birkaç soru daha