Нейромережу навчили доповнювати фото та відео
Штучний інтелект вже давно навчився коригувати фото. Однак розробники Google вирішили створити нейромережу, яку навчили реалістично домальовувати картинку за кадром на статичних фото та вертикальних відео.
Як повідомляє 4PDA, новий алгоритм, створений командою Google Research, представляє собою генеративно-змагальну нейромережу.
Читайте також: YouTube заблокував відео з роботами, через "жорстоке поводження з тваринами"
Навчання нейромережі. Під час її навчання використовувалося відразу два вихідних зображення: оригінальний знімок, частина якого (від 25 до 75%) була залита одним кольором, і маска заливки. Такий підхід дозволив штучному інтелекту сконцентруватися на області, домальованій генератором, і підвищити якість розпізнавання.
Фото, доповнене нейромережею
Як вихідний матеріал для навчання використали датасет Places365-Challenge, що включає більше двох мільйонів фотографій.
Результат. В результаті алгоритм навчився відтворювати навіть відсутні на оригінальному знімку деталі, не маючи вихідних даних про зображення поза кадром. Аналогічну технологію розробники застосували і до відеороликів.
Відео, доповнене ШІ Google – дивіться ролик
Незважаючи на явні артефакти по краях зображення, при постановці відео на паузу відтворені ШІ частини кадру практично не відрізняються від оригінальної картинки.
Де можна використати розробку? У перспективі технологію можна використовувати для корекції старих відеозаписів або корекції вертикальних відеороликів. На відміну від професійних додатків, такий метод не зажадає від користувача досконалого знання тонкощів монтажу.
Більше новин, що стосуються подій зі світу технологій, ґаджетів, штучного інтелекту, а також космосу читайте у розділі Техно