Google Bard теперь может просматривать видео вместо вас, отвечая на вопросы о его содержании

Первые пользователи уже получили возможность опробовать функцию. Журналистка The Verge Элисон Джонсон описала свой опыт использования Bard для YouTube.

Смотрите также Теперь вы можете подключить чат-бот Bard к своему аккаунту в Google и всем сервисам компании

Как это работает

Джонсон опробовала технологию на видео с рецептом эспрессо-мартини. Она ввела запрос с подробным описанием того, что ей нужно и описывает результат как "действительно хороший": ИИ выдал полный список ингредиентов и пошаговые инструкции, полностью соответствовавшие тому, о чем говорилось в ролике.

Бард правильно оценил все важные моменты, подытоживая видео: ингредиенты и измерения точные, а инструкции правильные. Он даже показал, как охладить бокал с мартини, наполнив его льдом и водой. Единственное, что не совсем соответствует действительности, это то, что в результатах сказано, что вы должны встряхивать напиток в течение 30 секунд – видео точно не демонстрирует и не советует стряхивать его так долго. Но в целом? Да, Бард, ты хорошо поработал,
– пишет Элисон Джонсон.

Результат выдачи Bard на основе видео / Скриншот The Verge

Такой подход создает определенные неприятные последствия. Под этим видео на YouTube нет текстового описания всего рецепта, так что обычно пользователь должен запустить ролик и полностью его посмотреть. Автор, в этом случае America's Test Kitchen, получает выгоду от просмотров и монетизации, а компания — свой процент. Но благодаря тому, что Bard анализирует видеоряд вместо пользователя, последний пропускает шаг с просмотром. Вряд ли Google не продумала этот момент и позволит себе терять деньги, поэтому вероятно компания предусмотрела какой-то выход из ситуации, хотя об этом пока ничего не известно.

Сейчас функция работает не идеально. Журналистка отмечает, что смогла получить полный рецепт не с первого раза. Сначала она попросила об этом, но Bard не смог ничего сгенерировать. Ей пришлось перефразировать "полный рецепт" на "пошаговую инструкцию", чтобы достичь желаемого результата. Пока что такая и другие подобные недоработки могут отпугнуть пользователей, но со временем ИИ становится умнее, поэтому начнет все лучше понимать запросы и лучше на них отвечать