Araştırma ve Sentez Desteği

Açılış sahnesi

Yozgat'ta gezen tavuk yumurtası üreten bir çiftlik, büyük şehirlerdeki şarküterilere satış yapmayı düşünüyor. Çiftliğin pazarlamadan sorumlu ortağı, bir hafta sürecek masa başı araştırmasını bir öğleden sonraya sığdırmak için arama yapabilen bir yapay zekâ aracına üç iş veriyor. Birincisi, bu pazardaki rakiplerin listesi. İkincisi, tüketicilerin gezen tavuk yumurtasına bakışını anlatan bir raporun özeti. Üçüncüsü, çiftliğin kendi sitesine son iki yılda gelmiş üç yüz müşteri yorumundan çıkan ana temalar.

Üç cevap da düzenli ve ikna edici. Rakip listesinde sekiz firma var, her birinin yanında kısa bir tanım ve bir bağlantı. Rapor özeti, tüketicilerin büyük çoğunluğunun gezen tavuk yumurtası için daha fazla ödemeye hazır olduğunu söylüyor. Yorum temalarının başında da fiyat şikâyeti geliyor.

Ortak, bulguları yatırım toplantısına taşımadan önce bir gün ayırıp hepsini kontrol ediyor. Sekiz rakipten ikisi bulunamıyor, biri iki yıl önce kapanmış. Rapor gerçekten var, ama ödemeye hazır olma bulgusu yalnız büyükşehirlerdeki ve belirli bir gelir grubundaki katılımcılara ait; özet bu koşulu atmış. Fiyat şikâyeti ise üç yüz yorumun yalnız altısında geçiyor. En sık tekrarlanan konu, yumurtaların kargoda kırılması.

Bu derste ne olacak

Yozgatlı çiftlik uydurma, derste geçen öbür işyerleri de. Sayılar örnek olsun diye seçildi. Ortağın bir günlük kontrolü, üç ayrı işin üç ayrı biçimde yanlış gidebildiğini gösterdi. Kaynak bulma işinde araç var olmayan firmaları ve kapanmış bir firmayı listeye koymuştu. Özetleme işinde, bulguyu anlamlı kılan bir koşulu atmıştı. Örüntü çıkarmada da birkaç yorumdaki bir konuyu genel bir temaya dönüştürmüştü. Üç hatanın hiçbiri cevabın dilinden anlaşılmıyordu.

Bu ders, bir aracın araştırma yardımını bu üç hatayı yakalayacak biçimde almayı çalışıyor. Önce aracın gösterdiği her kaynağın ve iddianın nasıl sınanacağını göreceğiz. Ardından bir özetin kaynağına sadık olup olmadığını denetlemeyi, bir veri yığınından çıkarılan temaların tek tek verilere kadar izlenebilmesini ve bu adımların bir araştırmanın başından sonuna bir zincir olarak nasıl kurulacağını ele alacağız.

Sıfır noktası

Araştırmanın temellerini bu akademi araştırma biriminde kurdu. Kaynak künyesi, bir verinin kim tarafından, ne zaman, kimden ve hangi amaçla toplandığı bilgisiydi. Kaynak bağımsızlığı, iki kaynağın birbirinden habersiz üretilmiş olmasıydı. Tema, kodlanmış verilerden çıkan örüntüydü; olumsuz örnek de temaya uymayan veri parçası. İçerik biriminde doğrulama notu, bir taslaktaki her olgusal iddianın yanına dayandığı kaynağı yazan listeydi. Bağlam kaybı ise bir bulgunun onu anlamlı kılan koşullardan koparılarak aktarılmasıydı.

Bu kursun ilk dersi akıcı uydurmayı ve dönüştürme görevini, ikinci dersi de görev tanımını ve bağlam paketini tanımladı. Araştırma işinde bu ikisi birleşir: araç kaynak bulurken bir bilgi görevi yapar ve uydurabilir; bir raporu özetlerken ya da yorumları gruplarken bir dönüştürme görevi yapar ve çıktısı kaynağıyla karşılaştırılabilir. Bu ders her iki durumda da neyin, nasıl denetleneceğini kuruyor.

Mekanizma — gösterilen kaynağa inmek

Arama yapabilen araçlar bir cevabın yanında kaynak gösterebilir: bir bağlantı, bir rapor adı, bir kurum. Bu, cevabı daha güvenilir gösterir. Ama bir kaynağın gösterilmiş olması, iddianın o kaynakta geçtiği anlamına gelmez. Bağlantı başka bir sayfaya açılabilir, rapor var olup bu bulguyu içermeyebilir, kaynak doğru olup eski olabilir.

Kaynak var, iddia yok.

Tarih de bir sorudur.

Listede her satır bir iddiadır.

Mekanizma — özetin kaynağa sadakati

Bir raporu ya da uzun bir belgeyi özetlemek, bir dönüştürme görevidir; malzeme isteğin içindedir. Ama özetleme aynı zamanda seçmektir: neyin kalacağına, neyin atılacağına karar verilir. Bu seçim sırasında bir bulgunun koşulu atılabilir, belgenin söylemediği bir çıkarım eklenebilir ya da belgenin bir bölümü hiç okunmamış gibi dışarıda kalabilir.

Eklenmiş öneri.

Kapsam, bölüm bölüm.

Birkaç cümle, kaynağında.

Mekanizma — temadan veriye geri dönmek

Yüzlerce yorumu, görüşme notunu ya da açık uçlu anket cevabını gruplamak, yapay zekânın en çok zaman kazandırdığı işlerden biridir. Ama araç temaları çıkarırken iki şey yapabilir: seyrek bir konuyu genel bir tema gibi sunabilir ya da birbirinden farklı iki konuyu tek bir başlıkta birleştirebilir. Bir temanın kaç veriye dayandığı ve hangi verilere dayandığı gösterilmezse, bu hataların hiçbiri görülmez.

Aykırı veriyi ayrıca iste.

İki konu, tek başlık.

Usta katmanı — bir zincir olarak araştırma

Bir araştırma sorusundan bir karara kadar olan yol birkaç adımdan geçer: kaynak bulmak, kaynakları okumak ve özetlemek, veriden örüntü çıkarmak ve bulguları birleştirip bir sonuca varmak. Yapay zekâ bu adımların her birinde kullanılabilir. Ama her adım bir öncekinin çıktısını girdi olarak alır; bir adımdaki denetlenmemiş bir hata, sonraki adımlarda daha düzgün bir dille ve daha sağlam görünerek büyür.

Zincirin en zayıf halkası.

Üç kaynak, tek köken.

Tek kişilik işletmede iki halka.

Yaygın hatalar

Aklında kalsın

Atıf sınaması, aracın gösterdiği her kaynağı açar: kaynak var mı, iddia orada mı, aynı koşullarla mı, hâlâ geçerli mi?

Özet sadakati, özetin kaynağa bir şey eklemediğini, koşulları atmadığını, oranı bozmadığını ve bütün bölümleri kapsadığını denetler.

İzlenebilir sentez, her temayı dayandığı veri parçalarına kadar geri götürür. Temanın ağırlığı sayılan veriyle okunur, aykırı veriler ayrıca istenir.

Doğrulama zinciri, araştırmanın her adımında neyin, nasıl ve kimin tarafından denetleneceğini yazar. Zincir en zayıf halkası kadar güçlüdür.

Sonraki derse köprü

Bu derste araçtan gelen araştırma çıktısının nasıl denetleneceğini kurduk: atıf sınaması, özet sadakati, izlenebilir sentez ve doğrulama zinciri. Yozgatlı çiftliğin ortağı artık araçtan gelen her rakibi arıyor, her özeti kaynağında sınıyor ve kargoda kırılan yumurtaların asıl sorun olduğunu biliyor.

Araştırma, söylenecek şeyin malzemesini verir. Çiftliğin bir sonraki işi bu malzemeyle şarküterilere ve tüketicilere konuşmak: ürün sayfaları, tanıtım metinleri, ambalaj yazıları, belki birkaç görsel. Yapay zekâ bu işlerde çok hızlı taslak üretebilir. Ama taslakların çiftliğin kendi sesiyle konuşması, başka markaların metinlerine benzememesi ve kullanılan her parçanın kullanma hakkının bulunması gerekir.

Sıradaki ders içerik ve yaratıcı üretimi ele alıyor: marka sesini korumayı, özgünlüğü, hakları ve kalite kontrolünü gözeterek yapay zekâyla taslak geliştirmeyi orada çalışacağız.