Нейромережі для роботи достатньо однієї нерозміченої фотографії та будь-якої веб-камери. Передрук роботи, підсумком якої стало створення MarioNETte, розмістили на сайті ArXiv, повідомляє VentureBeat.
Цікаво: Штучний інтелект IBM посперечався сам з собою
Чому це може бути небезпечно
Саме такого алгоритму побоювалися противники цієї технології, адже вони вважають, що тепер маніпулювати зображенням будь-якого політика, знаменитості або бізнесмена зможе будь-який охочий.
Зазначимо, що метою діпфейка – анімувати особу-оригінал (драйвер), наклавши на нього міміку людини перед камерою (мета). MarioNETte покращує технологію "вклеювання" осіб буквально за всіма параметрами, стверджують творці.
Як це працює
Раніше для навчання моделі потрібні були або технології захоплення руху для особи-мети, або хоча б кілька хвилин зйомки з різних ракурсів. Альтернатива – розмічене зображення особи-драйвера.
MarioNETte обходиться без цього. Просто дайте нейромережі фотографію, почніть кривлятися перед веб-камерою – і діпфейк готовий.
Демонстрація роботи алгоритму / venturebeat
Водночас алгоритм успішно долає і загальну біду конкурентів, цілком правдоподібно перетворюючи зображення, які сильно відрізняються.
Деякі артефакти, все ж помітні, але робота загалом вражає / venturebeat
MarioNETte складається з трьох функціональних частин: розпізнавач образу, алгоритм прив'язки і алгоритм перетворення.
Загалом новий алгоритм непогано справляється з завданням / venturebeat
Творці стверджують, що у дослідженні за участю 100 волонтерів майже всі вони назвали створені MarioNETte образи більш правдоподібними і з менш помітними артефактами.
Більше новин, що стосуються подій зі світу технологій, ґаджетів, штучного інтелекту, а також космосу читайте у розділі Техно