DeepMind создала ИИ для спасения вымирающих видов через звуки

DeepMind представила Perch 2.0 — искусственный интеллект, который слушает природу и спасает вымирающие виды. Эта компактная модель уже скачана более 250 тыс. раз и переворачивает представления о биоакустическом мониторинге! Ссылка в описании.

Представьте масштаб инновации. 1 час записи из тропического леса содержит десятки накладывающихся голосов животных. Расшифровка вручную — это недели адского труда. Perch 2.0 анализирует эти данные мгновенно, выявляя критически важные сигналы о состоянии экосистем.

Никаких млрд параметров, никакого сложного self-supervised обучения. Просто гениально оптимизированная архитектура с 3 специализированными головами. Классификация 15 тыс. видов, прототипная для семантических логитов и предсказание источника записи.

Берёте 5 секунд аудио — получаете вектор для поиска похожих записей, кластеризации звуков или обучения классификатора новых видов. Работает без GPU, без дообучения. Просто фиксированные эмбеддинги высочайшего качества.

Реальные результаты впечатляют. В Австралии с помощью Perch обнаружили новую популяцию исчезающего Plains Wanderer. На Гавайях модель распознала трели редчайших honeycreeper. Обработка звуков ускорилась в 50 раз. И это критически важно для спасения видов на грани исчезновения!

Птицы, млекопитающие, амфибии, подводные сцены коралловых рифов, антропогенные шумы — модель адаптируется к любым условиям. Отличная переносимость на морские данные с китами и дельфинами, которых почти не было в тренировке!

DeepMind доказала — качественная разметка данных, простая архитектура и чёткая постановка задачи важнее бесконечных параметров.