приложение для птиц 12 31

(Кредит: Дрю Вебер / Корнеллская лаборатория орнитологии)

Мобильное приложение ID ID Merlin Bird ID может идентифицировать сотни североамериканских видов, которые он «видит» на фотографиях благодаря технологии машинного обучения.

После загрузки на мобильное устройство приложение может отправляться куда угодно - даже без использования сотовой службы или Wi-Fi.

«Когда вы открываете приложение ID ID Merlin Bird, вас спрашивают, хотите ли вы сделать снимок со своим смартфоном или потянуть изображение с цифровой камеры», - говорит руководитель проекта Merlin Джесси Барри в Лаборатории Орнитологии Корнелла. «Вы приближаетесь к птице, подтверждаете дату и место, и Мерлин покажет вам лучшие варианты для матча из числа североамериканских видов 650, которые он знает».

Крылья, клювы и когти

Компьютерные ученые Caltech и Cornell Tech обучили Мерлина распознавать птиц, показав почти 1 миллионов фотографий, которые были собраны и аннотированы птицами и добровольцами, мобилизованными Лабораторией Корнелла. Аннотации включают виды птицы, а также ключевые точки, идентифицирующие физические элементы, такие как крылья, клювы и когти.

Когда пользователь приложения представляет его с птицей для идентификации, Мерлин выбирает виды, которые точно соответствуют этим характеристикам. Как и любой хороший барьер, система рассматривает виды, которые будут найдены в это конкретное время года и в этом месте, используя информацию из eBird, онлайн-ресурса птиц, которая собирает и регистрирует в среднем по 7 миллион записей наблюдений за птицами каждый месяц со всего мира ,


графика подписки внутри себя


«При создании ID ID Merlin Bird мы были особенно обеспокоены качеством и организацией данных», - говорит Серж Belongie, профессор компьютерных наук в Cornell Tech. Вместе с Пьетро Пероной из Калифорнийского технологического института (Caltech) он является соучредителем Visipedia, финансируемого Google, зонтичного проекта, который использует достижения в области машинного обучения и компьютерного зрения, чтобы помочь классифицировать объекты на фотографиях.

«В конечном итоге мы хотим создать открытую платформу, которую любое сообщество может использовать, чтобы сделать инструмент визуальной классификации для бабочек, лягушек, растений или того, что им нужно», - говорит Белонжи.

«Это приложение является кульминацией семилетней напряженной работы наших студентов и вызвано огромным успехом, достигнутым учеными в области компьютерного зрения и машинного обучения во всем мире», - говорит Перона, профессор электротехники в отделе инженерии Caltech и прикладные науки. «Машина, которая распознает объекты на изображениях, как и люди, была далекой мечтой, когда я была аспирантом, и теперь это происходит».

Хорошие изображения, хорошие совпадения

Насколько хорош ID изображения Merlin Bird? «Точность составляет около 90 процентов, если фотография пользователя имеет хорошее качество. Представьте нечеткое изображение или изображение, в котором птица маленькая или частично покрыта листьями, и шансы получить точное совпадение идут вниз », - говорит Стив Брэнсон, старший научный сотрудник по электротехнике в Кальтех.

Несмотря на достижения в области высоких технологий, люди по-прежнему являются важной частью процесса. «Нам нужны данные eBird от наблюдателей от птиц, а также эксперты, которые могут маркировать фотографии, используемые для обучения Мерлина», - говорит аспирант Caltech Грант Ван Хорн. «Вам нужны учителя, чтобы научить машину тому, что ей нужно делать. Наша система сочетает в себе опыт сотен птиц и орнитологов ». Ван Хорн и Брэнсон являются частью команды Visipedia и разработали алгоритмы, которые позволяют Merlin научиться распознавать птиц.

Глобальное покрытие

Прямо за углом находится выпуск ID ID Merlin Bird на испанском языке для птиц в Мексике. По дороге команда Merlin будет выпускать версии для Южной Америки, Европы, Азии, Африки и Австралии, в конечном итоге расширяющиеся для покрытия земного шара.

«Замечательная вещь в этом проекте - это сотрудничество с командой Visipedia, - говорит Барри. «У нас есть продукт, который действительно работает, потому что он поддерживается фантастическими исследованиями и отлично подходит для сообщества птиц, потому что он построен для птицеводов птицами».

Обновленный идентификатор фотографии Merlin Bird бесплатно для систем iOS или Android с Apple, ITunes и Гугл игры магазинов приложений. Это пара с оригинальным приложением Merlin, выпущенным в 2014, который использует несколько коротких вопросов, чтобы помочь пользователям сузить личность новой птицы.

Идентификатор фотографии Merlin Bird основан на Visipedia при поддержке Google, Института Джейкобса Тенион-Корнелла и Национального научного фонда.

Источник: Калифорнийский технологический институт

Похожие книги:

at Внутренний рынок самовыражения и Amazon