Ученые московского отделения Samsung AI Center представили уникальный алгоритм на основе сверточной нейросети, способный «оживить» любую фотографию и даже картину используя всего один кадр.
Технологию нельзя назвать новой; искусственный интеллект уже накладывал лицо с одной головы на другую, но для этого требовался анализ большого количества исходных данных, вроде роликов длинной по несколько минут.
Исследователям из Москвы же достаточно одного кадра, чтобы заставить даже лицо с картины демонстрировать весьма обширный спектр эмоций. Эффект достигается путем слаженной работы трех нейронных сетей — Embedder, Generator и Discriminator, — обученных при помощи целого массива кадров с человеческими лицами.
Первая сеть использует вектора для хранения информации, вторая создает маску, на которую затем накладывается изображение человека, когда третья оценивает правдоподобность получившегося результата.
Возможности технологии продемонстрировали на примере «Моны Лизы» и «Девушки с жемчужной сережки». Пока не идеально, но чем больше информации в распоряжении алгоритма, тем правдоподобней результат.
Важно отметить и то, что нейронные сети пока умеют работать только с лицами, поэтому заставить «Мону Лизу» показывать неприличные жесты руками или щелкать пальцами не выйдет. Пока.
