Belge parçası tek başına neden anlamsızlaşır?
Bir rapordan yalnızca bu oran geçen yıla göre arttı cümlesini kopardığında hangi orandan söz edildiği kaybolur. Belgeleri küçük parçalara bölerek arayan sistemler de benzer bir bağlam sorunuyla karşılaşabilir.
Bir belge parçasının tek başına okunması bana göre her zaman iyi bir başlangıç değil. Başlık, dönem veya ürün adı kopunca cümle doğru olsa bile yanlış yerde kullanılabilir. Benim için bağlamı taşımak, metne rastgele daha çok kelime eklemek değil, parçanın hangi soruya cevap verdiğini korumak demek.
Temel fikir
Anthropic’in 2024 tarihli Contextual Retrieval yazısı, parçaların arama sırasında daha anlaşılır olması için belgeye özgü kısa bağlam eklenmesini ele alır. Bu yaklaşım bütün arama sorunlarını çözmez. Yanlış veya yanıltıcı bağlam eklemek de yeni hatalar yaratabilir.
Bir örnek üzerinden
Bir ürün rehberinin Garanti iki yıldır cümlesini düşün. Hangi ürün, hangi sürüm ve hangi koşullar? Aranan parçanın yanında belge adı ve bölüm ilişkisi bulunması yorumlamayı kolaylaştırabilir. Yine de yanıtı üretirken özgün belgenin koşullarını kontrol etmek gerekir.
Nereden başlamalı?
Arama kalitesini gerçek sorularla değerlendir. Aynı terimi kullanan farklı ürünler ve sürümler özellikle iyi test örnekleridir. Başarı yalnızca benzer kelimeyi bulmak değil, doğru bağlamdaki parçayı getirmektir.
Benim yaklaşımım
İki ürünün benzer talimatlarını aynı arşivde tuttuğumu düşünürsem, bulunan paragrafın hangi ürüne ait olduğunu görmek isterim. Yalnızca ilgili görünen cümleyi getirmek yetmeyebilir. Son yanıtı değerlendirirken kaynağın çevresini açmayı tercih ederim; güçlü bir arama sonucu yanlış bağlamı kendi başına düzeltemez.
