Yapay Zeka ve Otomasyon · Nov 2026

RAG Veri Soy Ağacı: Yapay Zekâ Yanıtının Kanıtı

Kurumsal yapay zekâ yanıtlarını güncel ve yetkili belgelere bağlamak, erişim izinlerini korumak ve atıf doğruluğunu ölçmek için uygulama rehberi.

Kurumsal asistan bir politika belgesine atıf yapıp yine de yanlış karar verebilir; eski sürümü getirmiş, kısıtlamayı atlamış veya iki kayıt arasında olmayan ilişki kurmuş olabilir. RAG data lineage, üretilen yanıtı arama, indeksleme, belge sürümü ve erişim kontrolleri üzerinden yetkili kanıta bağlayabilmektir. Bu yalnızca gözlemlenebilirlik özelliği değildir. Hukuk, güvenlik ve iş sahiplerinin bir şikâyet veya denetimde kararı savunup savunamayacağını belirler. Kayıtta kaynak, belge sürümü, çıkarım işlemi, parça, indeks sürümü, arama parametreleri, model yapılandırması ve gerektiğinde insan onayı bulunmalıdır. Bu zincir olmadan akıcı yanıt yeniden üretilemeyebilir.

Dört tür köken bilgisini ayırın

Dört köken türünü ayırın: belge, işleme, erişim ve yanıt kökeni. Belge kaydı yayımlayanı, yetkili kaynağı, yürürlük tarihini ve sınıflandırmayı içerir. İşleme kaydı metin çıkarma, temizleme, parçalara bölme ve gizleme kararlarını saklar. Erişim kaydı filtreleri, kiracı sınırlarını, eşleşme puanlarını ve aday sonuçları tutar. Yanıt kaydı ise her önemli iddiayı destekleyen pasajla, prompt ve model sürümüyle bağlar. Paragraf sonundaki bağlantı bütün cümlelerin kanıtlandığı anlamına gelmez. Denetçinin tam pasajı açmasını sağlayan tanımlayıcıları, gizlilik ve saklama kurallarını gözeterek saklayın. Böylece her hatayı modele yüklemek yerine neden bulunur.

Belge güncelliğini açık bir kontrol hâline getirin

İndeksleme hattı bir politikayı bir kez alıp sonsuza kadar geçerli sayabilir. Oysa satın alma koşulları, güvenlik standartları ve müşteri hakları değişir. Yetkili her kaynağa yürürlük tarihi, bitiş veya yerine geçme ilişkisi, belge sahibi ve son doğrulama zamanını ekleyin. Aramada eski sürümleri operasyonel yanıtlar için filtreleyin veya tarihsel olduklarını açıkça belirtin. Yüksek etkili kararlarda en güncel zorunlu politika doğrulanamıyorsa yanıt vermemek doğru olabilir. Gece değişen acil kural için aylık yeniden indeksleme yeterli değildir. Kritik kaynak güncellemesinin aramada görünme süresini tanımlayıp test edin. Güncellik ölçülebilir bir veri sözleşmesidir.

Model metni görmeden önce izinleri uygulayın

Bir asistan, son yanıtında gizlemeye yönlendirilmiş olsa bile kullanıcının okumaya yetkili olmadığı belgeyi getirmemelidir. Kimlik ve yetki filtrelerini üretimden sonra değil arama aşamasında uygulayın. Kiracı yalıtımını, grup üyeliği değişikliklerini, belge ACL kurallarını ve erişim iptalinin yayılmasını sınayın. Aynı soruyu yetkili ve yetkisiz kimlikle sorun; yalnızca yanıtı değil getirilen belge kimliklerini karşılaştırın. Yalnızca soru metniyle anahtarlanan önbellek kullanıcılar arasında veri sızdırabilir. Yetkiye duyarlı önbellek anahtarları ve izin değişiminde geçersiz kılma kullanın. Güvenlik modelin itaatine değil veri erişim katmanına yerleştirilmelidir.

Alıntının varlığını değil doğruluğunu test edin

Doğru destek pasajları bilinen iddialarla değerlendirme vakaları oluşturun. Her iddianın atıf yapılan kaynak tarafından desteklenip desteklenmediğini, çürütülüp çürütülmediğini veya kaynağın sessiz kaldığını puanlayın. Benzer başlıklı belgeler, eski sürümler, tablolar ve dipnotlar ekleyin; bunlar çıkarım ve atıf hatalarını açığa çıkarır. Desteksiz iddia oranını, atıf isabetini, kaynak güncelliğini ve doğru yanıt vermeme oranını ayrı ölçün. Hataları alan uzmanları ve mühendislerle birlikte inceleyin. Arama mühendisi sıralama kusuru görürken politika sahibi belirsiz ifadeyi fark edebilir. Yalnızca uzun yanıtı veya kullanıcı memnuniyetini artırmak doğru hedef değildir.

Tatbikat olarak varsayımsal bir politika anlaşmazlığı kullanın

Varsayımsal bir asistana müşterinin ücret muafiyetine uygun olup olmadığı sorulsun. Güncel politika iki koşul, eski politika tek koşul gerektirir. Asistan ikisini getirir ve eski metne atıf yapar. Bu gerçek müşteri veya kurum vakası değildir. Denetlenebilir sistem hangi sürümün geçerli olduğunu, eski sürümün adaylara neden girdiğini, son iddiayı hangi pasajın desteklediğini ve kullanıcının kaydı görme yetkisini gösterebilmelidir. Çözüm yeni prompt yerine kaynak güncelliği filtresi olabilir. İndeks düzeltildikten sonra aynı vakayı tekrar çalıştırın; önceki ve sonraki izleri saklayın.

Gizliliğe duyarlı bir izleme şeması oluşturun

İstek kimliği, takma adlı kullanıcı veya rol, veri kümesi ve indeks sürümü, arama filtreleri, seçilen belge kimlikleri, kaynak zamanları, yanıt sürümü ve değerlendirme sonucunu saklayın. Müşteri sorularının tamamını veya hassas pasajları gereksiz yere telemetriye kopyalamayın. Veri minimizasyonu, erişim kısıtlaması, saklama süresi ve sınıflandırmaya uygun şifreleme uygulayın. Olay sırasında izleri kimin görebileceğini ve tedarikçiye aktarımı kimin onaylayacağını tanımlayın. İzlenebilirlik ile mahremiyet karşıt değildir; iyi seçilmiş meta veriler kaynak deposunu çoğaltmadan nedenselliği gösterebilir. Silme ve saklama kurallarını, silinen kaynağın geçmiş denetim kayıtlarına etkisiyle birlikte sınayın.

30-60-90 günlük bir uygulama yolu

İlk otuz günde etkili bir iş akışı seçin, yetkili belge sahiplerini belirleyin ve desteksiz iddia oranının başlangıç değerini ölçün. Veri alımına sabit kaynak kimlikleri ve sürüm bilgisi ekleyin. 31–60. günlerde yetkiye duyarlı arama, eski belge filtreleri ve iz kaydı kurun; küçük saklı değerlendirme kümesi hazırlayın. 61–90. günlerde değişiklik tetiklemeli regresyon testleri çalıştırın, atıf doğruluğunu alan sahipleriyle gözden geçirin ve yüksek etkili yanlış yanıtlar için olay süreci oluşturun. Kusuru ölçmeden tüm arama altyapısını değiştirmeye kalkmayın. Belirli hata türüyle başlayın ve kontrolün sonucu değiştirdiğini kanıtlayın. Yalnızca özel kayıtları açığa çıkarmayan toplu göstergeler yayımlayın.

Yönetici kararı kanıt sahipliğiyle ilgilidir

AI programında kaynak yetkisi, arama güvenliği ve kabul edilebilir iş riski için ayrı sorumlular bulunmalıdır. Her çeyrekte güncel ve yetkili kaynaklara izlenebilen yanıt oranını, doğru yanıt vermeme sıklığını ve iptal edilen belgenin aramadan ne kadar hızlı çıktığını gösteren kanıt isteyin. İlgili kontroller için AI satın alma kabul testine ve halüsinasyon risk kontrollerine bakın. NIST AI RMF ve OWASP LLM rehberi yararlı kaynaklardır. Bu ay tek değişiklik finanse edilecekse yüksek etkili yanıtları yetkili ve sürümlenmiş kanıttan yeniden üretilebilir hale getirin.