Фотография, которая поет!

Фотография, которая поет!

В Китае создали нейросеть, которая оживляет портреты. Анимированные снимки начинают разговаривать и даже петь.

Авторы проекта сделали так, что система выдает пользователям реалистичную мимику и движения. Ученые обучили ИИ на базе свыше 250 часов видеозаписей «говорящей головы»: разного рода выступлений, фрагментов фильмов, телешоу и концертов.

Нейросеть преобразует звук в видеоряд и передает мельчайшие движения, связанные с естественной речью.

На сегодня такая модель превосходит существующие методы за счет качества видео, сохранения идентичности и выразительности.

Тестирования показали, что ролики ИИ оказываются более естественными и эмоциональными, чем работы других подобных систем.