Связь с морским миром. Google создала ИИ-переводчик для общения с дельфинами

Google сотрудничает с проектом Wild Dolphin Project (WDP), который с 1985 года исследует дельфинов, наблюдая за ними, и создавая массивный архив видео- и аудиозаписей. Среди исследуемых ими дельфинов — популяция диких атлантических пятнистых дельфинов (Stenella frontalis) на Багамских островах.

Ценные записи Google использовала для создания модели искусственного интеллекта DolphinGemma. Эта модель может помочь исследователям раскрыть скрытые структуры и потенциальные значения звуков, которые дельфины издают во время общения.

«Анализ естественного, сложного общения дельфинов является монументальной задачей, и огромный набор данных WDP с метками предоставляет уникальную возможность для передового ИИ. Как DolphinGemma. Эта модель искусственного интеллекта, разработанная Google, использует специальные аудиотехнологии Google: токенизатор SoundStream эффективно представляет звуки дельфинов, которые затем обрабатываются архитектурой модели, которая подходит для сложных последовательностей. Эта модель с примерно 400 миллионами параметров имеет оптимальный размер для работы непосредственно на телефонах Pixel, которые WDP использует в полевых условиях. … DolphinGemma функционирует как модель аудиовхода и аудиовыхода, обрабатывает последовательности естественных звуков дельфинов, чтобы идентифицировать шаблоны, структурировать и в конце концов предсказать вероятные следующие звуки в последовательности, подобно тому, как большие языковые модели для человеческой речи прогнозируют следующее слово или лексему в предложении», — объясняют в Google.

Конечная цель этой работы заключается в том, чтобы понять структуру и потенциальное значение естественных звуковых последовательностей, которые могут быть похожими на человеческую речь.

WDP также исследует потенциальное двустороннее взаимодействие с помощью технологий. Эти усилия привели к разработке системы CHAT (Cetacean Hearing Augmentation Telemetry) на основе смартфонов Google Pixel. CHAT — это подводный компьютер, предназначенный не для непосредственной расшифровки сложной естественной речи дельфинов, а для создания более простого общего словарного запаса на основе синтетически созданных звуков. Концепция опирается на связь новых, синтетических свистов, созданных CHAT и отличных от естественных звуков дельфинов, с конкретными объектами, которыми пользуются дельфины, например морская трава. Исследователи надеются, что любопытные от природы дельфины научатся имитировать новые свисты, чтобы общаться.