В Samsung искусственный интеллект научили «оживлять» изображения

Нейросеть, разработанная в Samsung и описанная авторами в статье Few-Shot Adversarial Learning of Realistic Neural Talking Head Models в журнале Computer Science, буквально «оживляет» статичные картинки, заставляя объект на ней двигаться и меняться.

Нейросеть основана на принципе состязательного обучения. При работе алгоритм использует доступные изображения заданного человека и создает из его статичного портрета анимированный. По результатам испытаний, искусственный интеллект смог «оживить» Мону Лизу, Мерлин Монро и многих других людей, базируясь на исходном фото или картине и массиве открытых датасетов.

При создании анимации алгоритм учитывает положение глаз, бровей, носа, губ и челюсти, привычную мимику и возможные варианты сочетаний данных. Программа работает в три этапа: анализирует данные, создает видео, и выбирает лучшую анимацию.

Стоит отметить, что искусственный интеллект уже давно демонстрирует успехи в работе с изображениями и видео. Например, нейросети уже умеют повышать качество картинок и GIF-анимации; устранять недочеты освещенности; раскрашивать видео и менять его стиль; восстанавливать поврежденные изображения или менять объекты на них; и даже подделывать видео и фото буквально «на лету».

Иллюстрация на обложке: Youtube

Источник

Интересное по теме