Зв’язок із морським світом. Google створила ШІ-перекладач для спілкування з дельфінами

Google співпрацює з проєктом Wild Dolphin Project (WDP), який з 1985 року досліджує дельфінів, спостерігаючи за ними, та створюючи масивний архів відео- та аудіозаписів. Серед досліджуваних ними дельфінів — популяція диких атлантичних плямистих дельфінів (Stenella frontalis) на Багамських островах.

Цінні записи Google використала для створення моделі штучного інтелекту DolphinGemma. Ця модель може допомогти дослідникам розкрити приховані структури та потенційні значення звуків, які дельфіни видають під час спілкування.

«Аналіз природного, складного спілкування дельфінів є монументальним завданням, і величезний набір даних WDP з мітками надає унікальну можливість для передового ШІ. Як DolphinGemma. Ця модель штучного інтелекту, розроблена Google, використовує спеціальні аудіотехнології Google: токенізер SoundStream ефективно представляє звуки дельфінів, які потім обробляються архітектурою моделі, яка підходить для складних послідовностей. Ця модель з приблизно 400 мільйонами параметрів має оптимальний розмір для роботи безпосередньо на телефонах Pixel, які WDP використовує в польових умовах. … DolphinGemma функціонує як модель аудіовходу та аудіовиходу, обробляє послідовності природних звуків дельфінів, щоб ідентифікувати шаблони, структурувати та зрештою передбачити ймовірні наступні звуки в послідовності, подібно до того, як великі мовні моделі для людської мови передбачають наступне слово чи лексему в реченні», — пояснюють в Google.

Кінцева мета цієї роботи полягає в тому, щоб зрозуміти структуру та потенційне значення природних звукових послідовностей, що можуть бути схожими на людську мову.

WDP також досліджує потенційну двосторонню взаємодію за допомогою технологій. Ці зусилля призвели до розробки системи CHAT (Cetacean Hearing Augmentation Telemetry) на основі смартфонів Google Pixel. CHAT — це підводний комп’ютер, призначений не для безпосереднього розшифровування складної природної мови дельфінів, а для створення простішого спільного словникового запасу на основі синтетично створених звуків. Концепція спирається на зв’язок нових, синтетичних свистів, створених CHAT і відмінних від природних звуків дельфінів, з конкретними об'єктами, якими користуються дельфіни, як-от морська трава. Дослідники сподіваються, що цікаві від природи дельфіни навчаться імітувати нові свисти, щоб спілкуватися.