Leafsnap: первый в мире полевой определитель растений с визуальным поиском

Команды из Колумбийского университета, Университета Мэриленда и Смитсоновского института создали первое в мире мобильное приложение для идентификации растений с помощью визуального поиска — Leafsnap. Это электронный полевой определитель позволяет пользователям определять виды деревьев, просто фотографируя их листья.

Как это работает

• Пользователь фотографирует лист.
• Визуальные алгоритмы распознавания сопоставляют снимок с библиотекой изображений, анализируя многочисленные параметры формы по контуру листа.
• Приложение ранжирует наилучшие совпадения и предоставляет результат для окончательной проверки пользователем.

Ключевые особенности

• Помимо названия вида, Leafsnap предоставляет фотографии высокого разрешения и информацию о цветах, плодах, семенах и коре дерева.
• Приложение автоматически и анонимно делится изображениями, идентификациями и геолокацией с учёными для мониторинга популяций деревьев по всей стране.
• Текущая база данных включает деревья северо-востока США, но скоро расширится на всю континентальную часть страны.

Научная основа

Технология основана на алгоритмах распознавания лиц, адаптированных для идентификации видов. Основная техническая задача заключалась в нахождении эффективного способа описания формы листа, которая может сильно варьироваться даже в пределах одного вида.

Роль участников проекта

• Колумбийский университет и Университет Мэриленда: разработка алгоритмов и программного обеспечения.
• Смитсоновский институт: научное руководство, идентификация видов и создание эталонной библиотеки изображений.
• Некоммерческая организация Finding Species: съёмка детальных изображений видов для приложения и сайта.

Приложение уже доступно для iPhone, версии для iPad и Android появятся летом.