ИТМО и MWS AI: речевую модель можно научить новому языку на 25 часах записей вместо 100
Материал подготовлен Sintelligent с помощью ИИ. Опубликовано в SI: . Обновлено: .
Голосовые модели можно распространять на языки, для которых мало записей.
Учёные ИТМО и MWS AI разработали метод SEAM, позволяющий адаптировать модели синтеза речи к новым языкам при меньшем объёме обучающих данных: для качества, сопоставимого со стандартным подходом, хватило 25 часов аудиозаписей вместо 100. Метод использует знания, уже имеющиеся у нейросети, формируя новые языковые элементы из знакомых компонентов с учётом фонетического порядка. Подход проверили на русском, казахском и французском языках и двух архитектурах синтеза.
Источники 1