鸟应用程序12 31

(Credit:Drew Weber / Cornell实验室鸟类学)

借助机器学习技术,Merlin Bird Photo ID移动应用程序可以识别照片中“看到”的数百个北美物种。

一旦在移动设备上下载,该应用程序可以去任何地方,甚至没有细胞服务或Wi-Fi的地方。

Merlin项目负责人,鸟类学康奈尔实验室的Jessie Barry说:“当您打开Merlin Bird Photo ID应用程序时,会询问您是否想用智能手机拍照或者从数码相机中提取图像。 “你放大鸟,确认日期和地点,而Merlin将向你展示它所知道的650北美种类中的一个比赛的最佳选择。”

翅膀,喙和爪子

加州理工学院和康奈尔特科技计算机科学家通过向康奈尔实验室动员的观鸟者和志愿者收集并注释了几百万张照片,培训了梅林对鸟类的认识。 注释包括鸟的种类以及识别诸如翅膀,喙和爪等物理元素的关键点。

当应用程序的用户用鸟识别时,Merlin会选择与这些特征非常匹配的物种。 与任何好的鸟类一样,该系统考虑在一年的特定时间和在该地点使用来自eBird的信息的物种,eBird是一种在线鸟类资源,收集和记录来自世界各地每月平均7万鸟观测记录。


内在自我订阅图形


康奈尔大学计算机科学教授Serge Belongie说:“在构建Merlin Bird Photo ID时,我们特别关心数据的质量和组织。 加州理工学院(加州理工学院)的Pietro Perona,他是Visipedia的联合创始人,这是Google资助的一个伞式项目,利用机器学习和计算机视觉方面的进步来帮助分类照片中的物体。

Belongie说:“最终,我们希望创建一个开放的平台,任何社区都可以使用这个平台为蝴蝶,青蛙,植物或任何他们需要的任何东西制作视觉分类工具。

加州理工学院电子工程教授Perona说:“这个应用程序是我们学生七年努力工作的成果,是由计算机视觉和机器学习科学家在全球范围内取得的巨大进步推动的。和应用科学。 “像人类一样,能够识别图像中的物体的机器,当我是研究生时,是一个遥远的梦想,现在终于发生了。

良好的图像,良好的匹配

Merlin Bird照片ID有多好? “如果用户的照片质量很好,精确度在90左右。 提交一个模糊的图像,或者是一个小的或部分被树叶覆盖的小鸟,而获得准确匹配的几率会下降,“加州理工学院电子工程高级博士后史蒂夫·布兰森(Steve Branson)说。

尽管高科技进步,人类仍然是这一进程的重要组成部分。 加州理工学院研究生格兰特·范霍恩(Grant Van Horn)说:“我们需要来自鸟类观察家的电子鸟数据以及可以标记用来训练梅林的照片的专家。 “你需要老师教这台机器它需要做什么。 我们的系统结合了数百名鸟类和鸟类学家的专业知识。“Van Horn和Branson都是Visipedia团队的一员,并开发了允许Merlin学习识别鸟类的算法。

全球覆盖率来

即将到来的是墨西哥鸟类的西班牙语版Merlin Bird Photo ID版本。 沿着这条路,Merlin团队将为南美洲,欧洲,亚洲,非洲和澳大利亚制作版本,最终扩展到全球。

Barry说:“这个项目的好处是与Visipedia团队合作。 “我们有一个真正有效的产品,因为它得到了梦幻般的研究的支持,对于观鸟界来说是非常棒的,因为它是由鸟类为鸟类而建造的。”

更新的梅林鸟照片ID是从iOS或Android系统免费的 苹果的iTunesGoogle Play 应用商店。 它与2014发布的原始Merlin应用程序配对,它使用一些简短的问题来帮助用户缩小新鸟的身份。

Merlin Bird Photo ID由Visipedia提供支持,由Google,Jacobs Technion-Cornell Institute和国家科学基金会提供支持。

Sumber: 加州理工学院

相关书籍:

at InnerSelf 市场和亚马逊