Компания Google представила свою новую разработку — искусственный интеллект DolphinGemma, созданный для изучения и расшифровки звуков, которые используют дельфины во время общения.
Цель проекта — понять структуры языка этих очаровательных млекопитающих и приблизиться к возможности межвидового диалога.
Что такое DolphinGemma
DolphinGemma — это большая языковая модель, разработанная Google в сотрудничестве с исследователями из Технологического института Джорджии (Georgia Tech) и некоммерческим проектом Wild Dolphin Project (WDP).
Она создана на основе открытой архитектуры Gemma, из которой также происходят модели Gemini. DolphinGemma анализирует последовательности звуков, которые издают дельфины, и учится распознавать шаблоны подобно тому, как другие языковые модели работают с человеческой речью.
Модель использует технологии Google для обработки аудио, в частности инструмент SoundStream, который разбивает звуки на маленькие понятные частицы — токены, чтобы ИИ мог их анализировать. Она имеет около 400 млн параметров и может работать даже на смартфонах Pixel, которые исследователи используют в полевых условиях.
Организация Wild Dolphin Project уже почти 40 лет изучает дельфинов в естественной среде обитания. Благодаря многолетним наблюдениям исследователи накопили уникальную базу видео- и аудиоматериалов, где звуки дельфинов сопоставлены с конкретными индивидуумами и их поведением.
Например, личные “свисты” дельфинов помогают матерям и детенышам находить друг друга; “шкварчание” связано с агрессивным поведением; щелчки используются во время ухаживания или преследования акул.
Разработчики проекта хотят понять, имеют ли дельфины структурированный язык, подобный человеческому, и можно ли его разложить на правила и шаблоны.
Как работает DolphinGemma
Модель анализирует естественные звуки дельфинов, обнаруживает повторяющиеся структуры и прогнозирует, какой звук может идти следующим в “предложении” млекопитающих. Такие возможности открывают новый уровень в понимании того, как дельфины общаются друг с другом.
В перспективе, используя эти знания, ученые смогут создавать синтетические звуки, которые дельфины будут узнавать как сигналы к взаимодействию. К примеру, связанные с любимыми предметами или играми.
Кроме пассивного анализа, исследователи WDP работают над двусторонним общением с дельфинами через систему CHAT (Cetacean Hearing Augmentation Telemetry), которая работает под водой. CHAT создает искусственные сигналы — свисты, связанные с определенными предметами, например водорослями или платками. Если дельфин повторяет этот свист, система распознает его в режиме реального времени, и исследователь может дать ему соответствующий предмет в качестве награды.
Для этого используются смартфоны Google Pixel. Именно они анализируют звуки, отслеживают ответы и выдают сигнал исследователям через специальные наушники, которые работают под водой. Уже этим летом Google планирует сделать DolphinGemma открытой для научного сообщества.
