AI, yalnızca başlıkları veya özetleri değil, kaynağın tamamını okur ve kaynağın iddiayı doğrudan destekleyip desteklemediğini, çelişip çelişmediğini veya iddiayla ilgisiz olup olmadığını kontrol eder. Çarpıtma, seçici alıntılama veya bağlamın atlanması gibi durumları tespit eder . Sistemler, adı geçen kaynaklarla birincil verilere atıfta bulunan ve diğer güvenilir sitelere bağlantı veren veya onlardan bağlantı alan içerikleri tercih eder
. Anonim yazarlar tarafından, adı belirtilmeyen "sektör uzmanlarına" atıfta bulunan ve hiçbir dış referansı olmayan içerikler işlevsel olarak doğrulanamaz ve alıntılanma olasılıkları düşüktür
.
Otomatik bilgi doğrulama sistemleri, iddiaları birden çok bağımsız kaynağa karşı çapraz kontrol eder. Bir iddia birkaç yetkili kaynak tarafından destekleniyorsa, alıntılanma olasılığı artar. Kaynaklar birbiriyle çelişiyorsa, sistem güvenilirliği düşürebilir . Bu, mutlak anlamda "doğru" olmakla ilgili değildir; AI'ın güvenilir bulduğu kaynaklar arasındaki fikir birliğiyle ilgilidir
. Sistem, kaynaklar arasında örtüşme, tutarlılık ve uyum arar; aynı fikrin başka bir yerde benzer bir biçimde ortaya çıkıp çıkmadığını kontrol eder
.
Sistem, her aday sayfayı aynı beş kontrolden geçirir: sayfaya ulaşmak, sayfayı okumak, içinden net bir cevap çıkarmak, kaynağın belirli bir konuda güvenilir olup olmadığını değerlendirmek, iddiayı doğrulamak için yeterince spesifik olup olmadığını kontrol etmek ve soru için güncel olup olmadığını teyit etmek . Bir sayfa, yalnızca genel konuyla değil, yanıtlanan belirli soruyla yakından eşleşmelidir
. Tek bir net konsepte odaklanan içeriklerin AI tarafından alınması ve tekrar kullanılması, geniş veya karma konulu sayfalara göre daha kolaydır
. Tüm kontrolleri geçen sayfa alıntıyı hak eder; herhangi bir kontrolü geçemeyen sayfa ise alınır, değerlendirilir ve sessizce elenir
.
Sistem doğru belgelere sahip olduğunda, yanıtlarını oluşturmak için bu belgeleri kullanır. Yani, yalnızca eğitim verilerine güvenmek yerine, alınan içeriğe dayalı cevaplar üretir. Bu adım, desteklenmeyen iddiaları ve halüsinasyonları azaltmayı hedefler .
Tüm bu kontrollere rağmen, AI arama motorlarının kaynakları alıntılama doğruluğu mükemmel olmaktan çok uzaktır. Columbia Journalism Review tarafından yapılan bir çalışma, sekiz farklı AI arama motorunu test etmiş ve bu motorların endişe verici bir oranda, yaklaşık %60 oranında hatalı kaynak gösterdiğini bulmuştur . Motorlar bazen tamamen uydurma alıntılar yapmakta veya bir kaynağın ilgisiz bölümlerinden bilgiler çekmektedir. Bir sektör analizinin belirttiği gibi, doğrulama mekanizmaları "hiçbir şekilde kusursuz değildir"
.
Bu boru hattını anlamak, bazı kaynakların neden alıntılanırken diğerlerinin alıntılanmadığını açıklamaya yardımcı olur. Sistem, yenilikten ziyade fikir birliğine, anonimlikten ziyade otoriteye ve kolaylıktan ziyade doğrulanabilirliğe öncelik verir. Ancak yüksek hata oranı, kullanıcıların AI tarafından sağlanan iddiaları, özellikle haber, istatistik ve zamana duyarlı bilgiler için, orijinal kaynaktan tekrar kontrol etmeleri gerektiği anlamına geliyor. AI bilgiyi hızlıca bulabilir, ancak tekrarlamanın güvenli olup olmadığına karar vermek işin zor kısmıdır .
Comments
0 comments