LLM-Bewertung als Wettsystem: Mehr Genauigkeit und klare Vertrauenssignale
In einer neuen Pilotstudie wurde untersucht, ob die Einbettung von LLM‑Bewertungen in ein fiktives Wettsystem die Vorhersagegenauigkeit steigert und gleichzeitig ein deutliches Vertrauenssignal liefert. Dazu wurden 100 Mathematik‑ und Logikfragen mit überprüfbaren Antworten erstellt, die von sechs Basis‑Modellen beantwortet wurden. Drei Vorhersagemodelle schätzten anschließend, ob jedes Basismodell die jeweilige Frage korrekt beantwortet.