Christopher Potts
Qué estructura lingüística representan realmente los modelos de lenguaje, y cuál solo parecen representar.
Potts aborda los modelos de lenguaje desde una formación en lingüística y filosofía, lo que le da un ángulo inusual sobre lo que la metodología de evaluación actual nos permite concluir. Stanford Sentiment Treebank, que su grupo co-construyó hace más de una década, sigue siendo citado en casi todos los artículos sobre clasificación de sentimiento: en parte por el conjunto de datos en sí, en parte porque hizo de la estructura composicional, y no de la polaridad de palabras, la unidad de evaluación. Su trabajo más reciente en benchmarks adversariales dinámicos como DynaSent sostiene un punto más silencioso: un conjunto de prueba estático se vuelve obsoleto en el momento en que aparece, porque los modelos posteriores entrenan sobre su eco en el corpus.