Google представил свою языковую модель для искусственного интеллекта PaLM 2: что она может

11 мая 2023, 17:31
Читати новину українською

Источник:

Engadget

Каждый чатбот имеет в основе определенную языковую модель, состоящую из сложного алгоритма (нейросети), позволяющего вычислить вероятность появления в предложении того или иного слова. В ChatGPT, например, это GPT. Facebook создает LLaMA. Google в свою очередь работает над PaLM, и теперь выпустил вторую его версию.

Компания Google стояла за многочисленными этапами развития ИИ в мире и приложилась ко многим прорывам последних лет. Однако она не успела доработать собственную языковую модель и чат-бот Bard, уступив первенство ChatGPT. В панике компания была вынуждена раньше срока запускать свой искусственный интеллект, что привело к проблемам в его работе, а затем сильной критике как со стороны как пользователей, так и от самих работников компании. Разработка OpenAI запустила новую эпоху искусственного интеллекта, диктующую жесткие правила: теперь всё, что только может быть соединено с нейросетями, должно с ними объединиться. Поэтому Google пытается интегрировать разработку в наибольшее количество собственных сервисов.

Интересно Google Pixel 7a: главный претендент на звание лучшего среднебюджетного смартфона

PaLM 2: что о ней известно

Вице-президент Google DeepMind Зубин Гахрамани и другие руководители Google представили PaLM 2 в среду, 10 мая. Большая языковая модель теперь доступна в четырех масштабах и может работать локально на всех устройствах – от смартфонов до целых серверных ферм.

PaLM 2 является преемником существующей модели PaLM от Google, которая недавно была основой экспериментального искусственного интеллекта Bard.

Думайте о PaLM как об общей модели, которую затем можно точно настроить для достижения конкретных задач. Например, исследовательские группы в области здравоохранения доработали PaLM с учетом медицинских знаний, чтобы помочь отвечать на вопросы и обобщать информацию по различным медицинским текстам,
– объяснил Гахрамани.

  • Сейчас Bard уже работает на PaLM 2, предлагающей улучшенные возможности многоязычия, рассуждений и кодирования, сообщает компания. Языковая модель была гораздо лучше обучена на многоязычных текстах, чем ее предшественница, и охватывает более 100 языков с улучшенным пониманием культурных идиом и оборотов.
  • Она все равно хорошо генерирует программный код на Python и JavaScript.
  • Как сообщается, модель также продемонстрировала "улучшенные способности в логике, соображениях здравого смысла и математике" благодаря обилию учебных данных с "научных статей и веб-страниц, содержащих математические выражения".

Еще более впечатляюще то, что Google смогла выделить версии базовой системы PaLM для конкретных приложений, получивших названия Gecko, Otter, Bison и Unicorn.

Мы создали PaLM, чтобы она была меньше, быстрее и эффективнее, одновременно увеличивая ее возможности. Затем мы создали семейство моделей в широком диапазоне размеров, чтобы самая легкая модель могла работать как интерактивное приложение на мобильных устройствах на базе последней модели Samsung Galaxy,
– говорит Гахрамани.

В целом, на мероприятии I/O Google анонсировал более двух десятков продуктов, которые будут иметь возможность PaLM. О них мы также расскажем позже.