Ученые «оживили» и научили говорить портрет Федора Достоевского

Ученые из России создали нейросеть, оживившую портрет писателя Федора Достоевского. В препринте на arXiv.org опубликовано описание работы алгоритма.

Технология выполнена на основе сверточной нейросети, умеет превращать в анимированные изображения статичные портреты. Она снимает на отдельных кадрах из видео маску с лица человека, а в дальнейшем переносит их на отдельные изображения лиц.

Специалисты из Samsung и «Сколково» решили упростить задачу. Эксперты разработали алгоритм, который может достоверно переносить данные между изображениями. Система создает в итоге «говорящие головы», но при этом не использует большое количество примеров изображения-источника и изображения-цели. В идеале, как утверждают авторы исследований, подобные разработки на конкретный объект не должны ориентироваться.

В декабре 2018 года подобный алгоритм представили американские разработчики. Их модель способна оживлять статичные изображения человека целиком, заставляя его выбегать за пределы кадра.