Watanabe — один из основателей и основных мейнтейнеров ESPnet (the End-to-End Speech Processing Toolkit), платформы с открытым исходным кодом, которая за последние несколько лет стала стандартной основой академических исследований распознавания и синтеза речи. В самой конструкции набора инструментов заложена методологическая позиция: оценка должна быть воспроизводимой между лабораториями, базовые линии должны запускаться «из коробки», а инструменты должны усложнять публикацию «нового SOTA» без честного сравнения с предыдущими работами. Для ai100, по мере того как оцениваемые нами AI-движки добавляют голосовые интерфейсы, ESPnet — методологическая основа, которая задаёт, как вообще выглядит честное сравнение речевых систем между собой.

Стоит читать, когда
вам нужно оценить возможности AI-движков по речевому вводу или речевому выводу, и вы хотите опереться на методологию открытого набора инструментов, на которой сошлось академическое сообщество.
Темы
сквозная обработка речи с открытым исходным кодом (ESPnet); воспроизводимость как принцип дизайна в инструментарии оценки речи; методологическая линия benchmark-ов для распознавания и синтеза речи.
Ключевые работы
инструментарий ESPnet для сквозной обработки речи (с 2018 года, сооснователь и мейнтейнер); корпус работ по сквозному распознаванию и синтезу речи; публикации CMU LTI по обработке речи.