Das 2023 erschienene „LM vs LM“-Paper aus Globersons Gruppe richtete ein Kreuzverhör-Protokoll ein: Ein Modell produziert eine Behauptung, ein zweites Modell stellt Anschlussfragen, die auf Inkonsistenzen prüfen sollen, und die ursprüngliche Behauptung wird markiert, wenn die Anschlussfragen einen Widerspruch erzwingen. Das Setup gibt dem Feld etwas, das ihm gefehlt hatte — eine Methode zur Faktentreue-Erkennung, die keine gelabelte Ground Truth braucht, keinen Zugriff auf Modellinterna verlangt und nicht erfordert, einem der beiden Modelle für sich allein zu vertrauen. Globersons längerer Bogen liegt in der Theorie des maschinellen Lernens, und das prägt die Lektüre der Arbeit: LLM-Evaluation als Problem adversariellen Samplings und der Informationsgeometrie, nicht als Problem des Prompt Engineering.

Lesenswert, wenn
man Methodik zur Faktentreue-Erkennung will, die in theoretischen Grundprinzipien verankert ist, statt in empirischer Rezeptsuche.
Themen
adversariale LM-vs-LM-Evaluationsprotokolle; Faktentreue-Erkennung ohne gelabelte Daten; Lerntheorie als Linse auf LLM-Verhalten.
Zentrale Arbeiten
„LM vs LM: Detecting Factual Errors via Cross-Examination“ (2023); breiteres Werk in der ML-Theorie, das die Bewertungsmethodik prägt.