Abartısız RAG: gerçekten kullandığımız üretim kontrol listesi

RAG demolarının çoğu gerçek kullanıcı görünce çöker. Bir RAG sisteminin üretime yaklaşmasına izin vermeden önce kontrol ettiğimiz sıkıcı şeyler.

Önce değerlendirme

Eval seti yoksa merge yok. Tek bir embedding yazmadan önce alan uzmanı tarafından incelenmiş 200–500 soru-cevaptan oluşan altın küme oluştururuz.

Geri çağırma kalitesi

Hibrit arama (dense + BM25), belge türüne göre chunking, bütçe izin verirse cross-encoder ile yeniden sıralama.

Önemli koruma bantları

Giriş/çıkış filtreleme ve maliyet tavanı. Her çağrı izlenebilir.

RAG kalitesinin %80'i veri boru hattından gelir, modelden değil.