Bu sayfa canlı değil: her soru rag-lab ile bir kez çalıştırıldı ve sonuçları buraya kondu. Aynı adımları kendi makinende corpora/aci/ altındaki scriptlerle tekrarlayabilirsin.
Eski NTSB ve AAIB raporları taranmış görüntü. PDF okuyucu bunlardan tek karakter çıkaramıyor, hata da vermiyor: rapor sessizce indeksin dışında kalıyor. Bazı yeni raporların ekleri de taranmış.
Rapor başına iki soru ve beş Türkçe soru, toplam . Dosya doğru raporun ilk sırada gelip gelmediğini ölçer. Parça daha sıkıdır: ilk k parçadan biri doğru rapordan gelmeli ve cevabın geçtiği ifadeyi içermeli. Dosya düzeyinde hepsi iyi görünüyor; fark parça düzeyinde çıkıyor.
Her kartta üç yöntemin sıraları var: dosya / parça. Yeşil ilk 5, kırmızı ilk 8'in dışı. İz sayfasını aç o sorunun yolculuğunu gösterir: 1024 boyutlu vektör, tüm parçaların skor dağılımı, anlam haritası ve seçilen parçaların tam metni.
Tuzak sorular korpusta olmayan ama korpustakilere benzeyen kazaları soruyor. Arama yine de en yakın parçayı getiriyor. En yüksek kosinüs skoruna bir eşik koyup altında kalanları "bulamadım" saymak ilk akla gelen çözüm. Eşiği kaydırıp dene.