Это что, уже зима?! 😳

Фото серой неясыти (Strix aluco): Стас Крутоверцев

Сегодня хотим рассказать про любопытное исследование, связанное с приложением Merlin Bird ID. Группа учёных сравнила точность определения птиц человеком и нейросетью и получила интересные результаты.

С августа по октябрь 2023 года раз в неделю в лесу на Северо-Востоке США проводились точечные учёты птиц. Каждый раз учётчики делали десять остановок по три минуты, точки отстояли друг от друга на 500 метров. Один учётчик (средней опытности) определял все виды птиц, которые смог увидеть и услышать. Второй, стоя рядом, использовал Merlin Bird ID. Позднее запись звука и списки обоих учётчиков проверял эксперт и соглашался или не соглашался с их определением. Естественно, сравнивали только количество найденных видов, но не количество индивидуальных птиц — такое приложению не под силу.

Результаты таковы: "Люди превосходят Merlin Sound ID в полевых точечных учётах", — гласит заголовок статьи. После проверки экспертом учётчики-люди показали точность 92%, а Мерлин — сравнимую, но ниже, 86%. При этом в равных условиях люди смогли зарегистрировать как больше встреч, так и больше разных видов.

Если птица издавала звуки, то человек слышал её на 72% чаще, чем Мерлин. Дело в том, что человеческое ухо часто слышит то, что не может услышать микрофон смартфона: крики ворон с большого расстояния, низкий голос горлицы, для Мерлина сливающийся с фоновым шумом, позывки совы. Также Мерлин в 12 раз чаще человека по ошибке регистрировал вид, который не присутствовал в точке учёта (о, как знакомо, о, эти бесконечные мифические зимние зяблики в каждом парке!).

При этом результаты показали, что Мерлин увереннее определяет птицу по коротким позывкам, тогда как человек для определения скорее склонен ждать более яркую вокализацию. Характерно, что для тех видов, с которыми Мерлин справился лучше людей, были зарегистрированы только одна-две встречи за учёт.

Получило подтверждение и то, что мы часто наблюдаем сами: приложения, запущенные на двух разных смартфонах, находящихся рядом, определяют по-разному. Результат зависит от чувствительности микрофона и его позиции в момент записи. По данным исследования при использовании двух смартфонов одновременно Мерлин не согласен сам с собой в 57% наблюдений! В исследовании, кстати, были использованы несколько разных моделей Айфонов и Самсунги.

Исследователи рекомендуют использовать приложение в качестве "напарника", это увеличит вероятность обнаружения видов, хуже знакомых недостаточно опытному наблюдателю. Но слепо верить результатам нельзя — для незнакомых видов обязательно нужно записать звук и постараться идентифицировать его отдельно.

Прочитала и пересказала: Тоня В.


#научная_статья