Neuer Einflusswert quantifiziert Dokumentenwirkung in RAG-LLMs

Die neueste Studie von Forschern auf arXiv (2601.05260v1) präsentiert einen innovativen Ansatz zur Messung, wie einzelne abgerufene Dokumente die Antworten von Retrieval Augmented Generation (RAG)-Modellen beeinflussen. Durch die Einführung des „Influence Score“ (IS), der auf der Partial Information Decomposition basiert, lässt sich die Wirkung jedes Dokuments exakt quantifizieren.

In zwei sorgfältig konzipierten Experimenten wurde die Wirksamkeit des IS demonstriert. Zunächst zeigte eine simulierte Poison-Attack-Analyse, dass der schädliche Beitrag in 86 % der Fälle als höchst einflussreich identifiziert wurde. Anschließend bewies eine Ablationsstudie, dass Antworten, die ausschließlich aus den IS‑besten Dokumenten generiert wurden, konsistenter mit den Originalantworten übereinstimmen als solche, die aus den übrigen Quellen stammten. Diese Ergebnisse unterstreichen die Bedeutung des IS als Werkzeug zur Steigerung von Transparenz und Zuverlässigkeit in RAG‑Systemen.