data-infra

Parça Örtüşmesi

Parça örtüşmesi, bir getirme hattında ardışık parçaların sınırında metnin kasıtlı olarak yinelenmesidir. Bir belge gömme için parçalara ayrıldığında her kesik bir yere denk gelir ve nereye denk gelirse gelsin birlikte duran bir şeyi ayırır. Örtüşme, her parçanın bir öncekinin kuyruğunu ve bir sonrakinin başını taşıması demektir; böylece sınırın iki yanına yayılan bir cümle, bir tanım ya da bir sayı iki parçadan en az birinde bütün olarak kalır. Önlediği hata belirgindir ve kolayca gözden kaçar. Bir parçada başlayıp diğerinde biten bir koşul, ikisi de makul görünen ve hiçbiri soruyu yanıtlamayan iki kırıntı üretir. Daha kötüsü, getirilen kırıntı çoğu zaman tamamlanmış gibi okunur — istisnasız bir koşul, ardından gelen kaydı olmayan bir rakam — ve model, yalnızca bağlam içinde doğru olan bir malzemeden kendinden emin bir yanıt üretir. Getirme metrikleri gayet iyi görünür. Yanıt yanlıştır. Örtüşme bedava değildir. Dizini şişirir, yinelemeyle orantılı bir gömme hesabı harcar ve aramanın döndürdüğünü değiştirir: neredeyse aynı olan komşu parçalar aynı yerler için yarışır, böylece ilk sonuçlar aynı pasajın üç sürümü olabilirken ikinci en iyi kaynak hiç yüzeye çıkmaz. Örtüşme küçük olmaktan çıktığı anda, getirme sonrası tekilleştirme ya da neredeyse aynı olanları cezalandıran bir yeniden sıralama adımı genellikle gerekir. Miktar bir sabit değil bir denge meselesidir ve genel bir kuraldan çok metnin biçimine bağlıdır. Yoğun başvuru malzemeleri, sözleşmeler, şartnameler ve çapraz göndermesi olan her şey daha fazlasından yararlanır, çünkü anlam cümleler arasında taşınır. Anlatı düzyazısı ve kendi kendine yeten kayıtlar çok daha azıyla yetinir. Dürüst yöntem, soyut akıl yürütmek yerine sabit bir değerlendirme kümesinde iki ucu da denemek ve yanıtların iyileşip iyileşmediğine bakmaktır. Örtüşme aynı zamanda, doğru yerlerden kesmekle daha iyi çözülen bir sorunun kaba çaresidir. Yapıya göre bölme — başlıklar, bölümler, liste maddeleri, tablo satırları — sınırları belgenin zaten sahip olduğu yerlere koyar ve yapı farkındalıklı bir bölücü, aynı yanıt kalitesine ulaşmak için sabit boyutlu bir bölücüden çok daha az örtüşmeye ihtiyaç duyar. Örtüşme o zaman, yapının öngöremediği sınırlar için bir sigortaya dönüşür. Dikkate değer bir ayrıntı: bir parçanın tek başına anlaşılması için gereken bağlam umut edilmek yerine iliştirilmelidir. Tartışmanın ortasında, karşılığı belirsiz bir zamirle başlayan bir parça, örtüşmeden bağımsız olarak getirme açısından bir yüktür; her parçanın başına belge başlığını ve bölüm yolunu eklemek, örtüşme penceresini genişletmekten daha ucuz bir iyileştirmedir.

İlgili terimler

Daha fazla Veri ve Altyapı terimi