Merlin Bird Photo ID: компьютер научился определять птиц по фотографии

Исследователи и орнитологи-любители создали систему, способную распознавать сотни видов птиц на фотографиях — задачу, с которой часто не справляются люди.

Бесплатный фотоидентификатор Merlin Bird Photo ID, разработанный проектом Visipedia и Лабораторией орнитологии Корнеллского университета, доступен на сайте AllAboutBirds.org/photoID. Результаты работы представлены на конференции по компьютерному зрению CVPR в Бостоне 8 июня 2015 года.

Как это работает:

  1. Пользователь загружает фото, указывает место и время съемки.
  2. Вручную отмечает на изображении клюв, глаз и хвост птицы, а также обводит её рамкой.
  3. Merlin анализирует пиксели, комбинируя методы искусственного интеллекта с миллионами точек данных от людей, и за секунды выдает наиболее вероятные виды.

Точность и возможности:

  • Система способна распознавать 400 самых распространенных видов птиц США и Канады.
  • В 90% случаев правильный вид находится среди трех первых результатов.
  • Алгоритм использует базу данных eBird.org (более 70 миллионов наблюдений), чтобы сузить поиск до видов, встречающихся в указанном месте и время года.

Ключевые особенности:

  • Система основана на машинном обучении и будет улучшаться по мере использования.
  • Распознавание стало возможным благодаря десяткам тысяч изображений, размеченных энтузиастами.
  • В будущем технологию планируют интегрировать в мобильное приложение Merlin Bird ID.

Проект реализован при поддержке Google, Jacobs Technion-Cornell Institute и Национального научного фонда (NSF).

2015-06-04