Статья Strubell 2019 года "Energy and Policy Considerations for Deep Learning in NLP" численно описала то, что область до этого молча игнорировала: обучение одной большой языковой модели могло давать выбросы CO2, сопоставимые с несколькими автомобилями за весь срок их службы, а разрыв между отчётами о точности в исследовательских статьях и углеродной ценой их получения расширялся с каждым новым state-of-the-art. Эта работа переосмыслила эффективность: из желательной, но необязательной инженерной заботы она превратилась в измерение оценки, которое должно стоять рядом с точностью в каждом сравнении моделей. Для ai100, который оценивает модели, различающиеся на порядки по стоимости инференса, это методологическое основание для того, чтобы считать «хороший ответ» и «хороший ответ какой ценой» разными вопросами.

Стоит читать, когда
вы хотите отчитаться о результате LLM или провести его аудит так, чтобы вычислительные и энергетические затраты рассматривались как показатели первого порядка.
Темы
энергетическая и вычислительная стоимость обучения и обслуживания языковых моделей; справедливость в NLP и доступ к вычислениям как исследовательские проблемы; эффективный дизайн моделей как самостоятельная методология.
Ключевые работы
"Energy and Policy Considerations for Deep Learning in NLP" (2019, ведущий автор); позиционная статья "Green AI" (2019, соавтор); текущая работа CMU по эффективной и справедливой NLP.