Google представил DolphinGemma-модель искусственного интеллекта, которая позволяет исследователям разговаривать с дельфинами. Модель обучена анализировать и генерировать вокализации дельфинов, и весь разговор выполняется с помощью смартфонов Pixel 6. Анонс приурочен к Национальному дню дельфинов

Модель искусственного интеллекта DolphinGemma создана Google в сотрудничестве с исследователями из Технологического института Джорджии и морскими учеными из проекта Wild Dolphin Project (WDP).

Google объясняет, что у атлантических пятнистых дельфинов есть целый подводный язык, состоящий из щелчков, свиста и того, что исследователи называют «импульсными импульсами». Думайте об этом как о сонарной версии предложений и эмодзи.

WDP изучает этих дельфинов почти 40 лет и собрала океан данных о том, кто, когда и кому говорит. Это банк данных, к которому подключается DolphinGemma.

Модель искусственного интеллекта воспринимает реальные звуки дельфинов и идентифицирует закономерности в вокальных последовательностях. Технология, лежащая в его основе, заимствована из собственных моделей Google Gemma (младших братьев и сестер моделей Gemini), разработанных специально для обработки звука.

DolphinGemma работает на телефонах Pixel, используемых в полевых условиях, что устраняет необходимость в громоздких подводных компьютерах и другом оборудовании. Благодаря аудио-алгоритмам Google и мощному токенизатору SoundStream исследователи могут не только слушать болтовню дельфинов в режиме реального времени, но и отвечать млекопитающим.

WDP и Georgia Tech даже тестируют систему под названием CHAT (телеметрия усиления слуха китообразных) для общения с дельфинами. В CHAT используются синтетические свисты, обозначающие конкретные объекты, которые любят дельфины. Идея состоит в том, что дельфин услышит синтетический свист, поймет, что он означает «игрушка», подражает ему и общается с исследователями.

Телефоны Pixel 6 С DolphinGemma прислушиваются к шуму, распознают мимику дельфина и передают исследователям-людям, что сказал Дельфин. Эта информация поступает прямо в наушники, и исследователи могут реагировать в режиме реального времени. Google заявляет, что серия Pixel 9 Еще больше ускорит этот процесс за счет локального запуска моделей с искусственным интеллектом.