El nombre de Zettlemoyer aparece en una serie de trabajos que se parece más a un programa de investigación que a una lista de artículos: grandes modelos de lenguaje abiertos que cualquiera puede examinar (OPT en 2022 y la línea de modelos abiertos que le siguió), y la infraestructura de evaluación para decir si esos modelos mantienen correctas sus afirmaciones factuales. FActScore (2023, con Sewon Min como autora principal) es la versión metodológicamente cuidadosa: descomponer un párrafo largo generado en afirmaciones factuales atómicas y puntuar cada una contra una fuente de conocimiento, en lugar de puntuar "todo el párrafo" con un único juicio. Para ai100, la resolución importa: un modelo que acierta un hecho y falla dos en la misma frase no debería obtener una calificación aprobatoria.

Vale la pena seguirlo cuando
se quiere puntuación de factualidad de grano fino en lugar de un único juicio sí-o-no por respuesta.
Temas
puntuación de factualidad atómica; grandes modelos de lenguaje abiertos y su evaluación; análisis semántico como precursor de los métodos actuales de salida estructurada.
Obras clave
FActScore (2023, coautor); modelo de lenguaje abierto OPT (2022, coautor); trabajo fundacional en análisis semántico en la década de 2000.