Модель DolphinGemma на базе Google Gemini — новый инструмент в изучении сложной системы коммуникации дельфинов

15.04.2025 21:16:00 | iXBT.com

Исследователи из проекта Wild Dolphin Project (WDP), занимающегося изучением дельфинов с 1985 года, объединились с компанией Google, чтобы сделать значительный шаг вперёд в понимании сложной системы свистов и кликов, используемых дельфинами для общения. WDP применяет неинвазивный подход к изучению сообщества атлантических пятнистых дельфинов, создавая видеозаписи и аудиозаписи их поведения, а также соответствующие заметки.

Основной целью WDP является анализ того, как дельфины используют вокализации и как это влияет на их социальное взаимодействие. За десятилетия исследований учёным удалось связать некоторые базовые действия с определёнными звуками. Например, было обнаружено, что атлантические пятнистые дельфины имеют характерные свисты, которые, по-видимому, используются как имена, позволяя двум особям находить друг друга. Кроме того, они постоянно воспроизводят «квакающие» звуковые шаблоны во время драк.

Фото: Wild Dolphin Project

Исследователи WDP считают, что понимание структуры и закономерностей дельфиньих вокализаций необходимо для определения того, является ли их общение языком. Конечной целью является возможность «говорить на языке дельфинов», если таковой существует. Для достижения этой цели WDP создал огромный, тщательно размеченный набор данных, который, по мнению Google, идеально подходит для анализа с помощью генеративного искусственного интеллекта.

Для анализа вокализаций дельфинов исследователи используют модель DolphinGemma, основанную на открытых моделях искусственного интеллекта Google Gemma, которые, в свою очередь, построены на той же основе, что и коммерческие модели Gemini. Модель DolphinGemma использует разработанную Google технологию SoundStream для токенизации вокализаций дельфинов, позволяя звукам быть поданными в модель в том виде, в котором они записаны.

Большие языковые модели (LLM), по сути, предсказывают шаблоны. Им предоставляется входной сигнал, и модели предсказывают следующий токен снова и снова, пока не будет получен выходной сигнал. Когда модель обучена эффективно, этот выходной сигнал может звучать так, как будто он был создан человеком. Google и WDP надеются сделать нечто подобное с помощью DolphinGemma для морских млекопитающих.

Использование искусственного интеллекта в изучении дельфинов может стать значительным прорывом в понимании их языка и социального поведения. С помощью модели DolphinGemma исследователи надеются получить новые открытия в области коммуникации дельфинов и, возможно, приблизиться к пониманию их «языка».

Подробнее