Google представив DolphinGemma – модель штучного інтелекту, яка дозволяє дослідникам розмовляти з дельфінами. Модель навчена аналізувати і генерувати вокалізації дельфінів, і вся розмова виконується з допомогою смартфонів Pixel 6. Анонс приурочений до Національного дня дельфінів
Модель штучного інтелекту DolphinGemma створена Google у співпраці з дослідниками з Технологічного інституту Джорджії і морськими вченими з проекту Wild Dolphin Project (WDP).
Google пояснює, що у атлантичних плямистих дельфінів є ціла підводна мова, що складається з клацань, свисту і того, що дослідники називають “імпульсними імпульсами”. Думайте про це як про сонарну версію пропозицій і емодзі.
WDP вивчає цих дельфінів майже 40 років і зібрала океан даних про те, хто, коли і кому говорить. Це банк даних, до якого підключається DolphinGemma.
Модель штучного інтелекту сприймає реальні звуки дельфінів і ідентифікує закономірності у вокальних послідовностях. Технологія, що лежить в його основі, запозичена з власних моделей Google Gemma (молодших братів і сестер моделей Gemini), розроблених спеціально для обробки звуку.
DolphinGemma працює на телефонах Pixel, що використовуються у польових умовах, що усуває необхідність у громіздких підводних комп’ютерах та іншому обладнанні. Завдяки аудіо-алгоритмам Google і потужному токенізатору SoundStream дослідники можуть не тільки слухати балаканину дельфінів в режимі реального часу, але і відповідати ссавцям.
WDP і Georgia Tech навіть тестують систему під назвою CHAT (телеметрія посилення слуху китоподібних) для спілкування з дельфінами. В CHAT використовуються синтетичні свисти, що позначають конкретні об’єкти, які люблять дельфіни. Ідея полягає в тому, що дельфін почує синтетичний свист, зрозуміє, що він означає “іграшка”, наслідує йому і спілкується з дослідниками.
Телефони Pixel 6 з DolphinGemma прислухаються до шуму, розпізнають міміку дельфіна і передають дослідникам-людям, що сказав дельфін. Ця інформація надходить прямо в навушники, і дослідники можуть реагувати в режимі реального часу. Google заявляє, що серія Pixel 9 ще більше прискорить цей процес за рахунок локального запуску моделей з штучним інтелектом.
