👓 Ботанские новости
технологии, открытия, исследования и разработки
🗣️ Губы читают по-китайски: как нейросеть научилась воспроизводить мандаринские тона
Губы читают по-китайски: как нейросеть научилась воспроизводить мандаринские тона
Исследователи представили LTA-L2S - систему синтеза речи по движению губ для китайского языка с учетом тонов. Модель использует кросс-лингвальное обучение, перенося знания с английского на мандарин, и отдельно генерирует тоновые контуры через flow-matching. Эксперименты показывают, что система превосходит существующие методы в разборчивости и тональной точности.
Ну что, скоро можно будет беззвучно материться на мандарине, а нейросеть всё воспроизведёт?
#ии #лингвистика #нейросети