0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

受人眼启发!科学家开发出新型改良相机

jf_64961214 来源:jf_64961214 作者:jf_64961214 2024-07-22 06:24 次阅读

wKgZomadiqiAbl6IAADXHDtbOAY536.jpg

新型事件相机系统与标准事件相机系统对比图。

马里兰大学计算机科学家领导的一个研究小组发明了一种照相机装置,可以改善机器人观察周围世界并做出反应的方式。受人眼工作原理的启发,他们的创新型照相机系统模仿了人眼为长期保持清晰稳定的视觉而进行的微小不自主运动。

该团队在《科学机器人学》(Science Robotics)杂志上发表的一篇论文详细介绍了这种名为 "人工微停滞增强事件相机"(AMI-EV)的相机的原型设计和测试过程。

论文的第一作者、UMD 计算机科学博士生Botao He说:"事件相机是一种相对较新的技术,与传统相机相比,它能更好地跟踪移动物体,但如今的事件相机很难在有大量运动时捕捉到清晰、无模糊的图像。"

"这是一个大问题,因为机器人和许多其他技术,例如自动驾驶汽车,都需要准确及时的图像才能对不断变化的环境做出正确反应。因此,我们扪心自问: 人类和动物如何确保自己的视觉始终聚焦在移动的物体上?

对于贺的团队来说,答案就是微注视,即人在试图集中视线时不由自主地发生的细微而快速的眼球运动。通过这些微小而持续的运动,人眼可以长时间准确地保持对物体及其视觉纹理(如颜色、深度和阴影)的关注。

他说:“我们认为,就像我们的眼睛需要这些微小的运动来保持聚焦一样,相机也可以利用类似的原理来捕捉清晰准确的图像,而不会因为运动而导致模糊。”

研究小组在 AMI-EV 内部插入了一个旋转棱镜,以重新定向镜头捕捉到的光束,从而成功复制了微小运动。棱镜的连续旋转运动模拟了人眼自然发生的运动,使相机能够像人一样稳定所记录物体的纹理。研究小组随后开发了一款软件,用于补偿 AMI-EV 中棱镜的移动,从而从移动的灯光中整合出稳定的图像。

研究报告的共同作者、UMD 计算机科学教授 Yiannis Aloimonos 认为,该团队的发明是在机器人视觉领域迈出的一大步。

我们的眼睛会对周围的世界进行拍照,然后将照片发送到大脑,在大脑中对图像进行分析。感知就是通过这个过程发生的,这就是我们理解世界的方式,马里兰大学高级计算机研究所(UMIACS)计算机视觉实验室主任Aloimonos解释说。他还兼任马里兰大学高级计算机研究所计算机视觉实验室主任,他解释说:“在使用机器人时,可以用摄像头代替眼睛,用计算机代替大脑。更好的摄像头意味着机器人有更好的感知和反应能力”。

研究人员还认为,他们的创新可能会在机器人和国防之外产生重大影响。在依赖精确图像捕捉和形状检测的行业工作的科学家们一直在寻找改进相机的方法,而 AMI-EV 可能是解决他们所面临的许多问题的关键方案。

该论文的资深作者、研究科学家Cornelia Fermüller说:“凭借其独特的功能,事件传感器和 AMI-EV 将在智能可穿戴设备领域占据中心位置。与传统相机相比,它们具有明显的优势,如在极端照明条件下的卓越性能、低延迟和低功耗。这些特性非常适合虚拟现实应用,例如,需要无缝体验以及快速计算头部和身体动作的应用。”

在早期测试中,AMI-EV 能够在各种情况下准确捕捉和显示运动,包括人体脉搏检测和快速移动的形状识别。研究人员还发现,AMI-EV 能够以每秒数万帧的速度捕捉运动,优于大多数常见的商用相机,后者的平均捕捉速度为每秒 30 到 1000 帧。

这种更平滑、更逼真的运动描绘可能被证明在创造更身临其境的增强现实体验和更好的安全监控,以及改善天文学家捕捉太空图像的方式等任何方面都具有关键作用。

Aloimonos说:“我们新颖的摄像系统可以解决许多具体问题,比如帮助自动驾驶汽车识别道路上哪些是人,哪些不是。因此,它有许多大众已经在使用的应用,比如自动驾驶系统,甚至智能手机摄像头。我们相信,我们新颖的摄像系统正在为未来更先进、功能更强大的系统铺平道路。”

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28398

    浏览量

    206988
  • 相机
    +关注

    关注

    4

    文章

    1350

    浏览量

    53594
收藏 人收藏

    评论

    相关推荐

    西湖大学:科学家+AI,科研新范式的样本

    研究,创新科研新范式。这一点在西湖大学的科研项目中已得到体现。 成立于2018年的西湖大学是由施一公院士领衔创办的、聚焦前沿科学研究的研究型大学,该校鼓励科学家们探索AI与各学科交叉融合,为科研创新提速。为此,西湖大学在浪潮信息等企业助力下打造
    的头像 发表于 12-12 15:59 160次阅读
    西湖大学:<b class='flag-5'>科学家</b>+AI,科研新范式的样本

    AI for Science:人工智能驱动科学创新》第4章-AI与生命科学读后感

    了传统学科界限,使得科学家们能够从更加全面和深入的角度理解生命的奥秘。同时,AI技术的引入也催生了一种全新的科学研究范式,即数据驱动的研究范式,这种范式强调从大量数据中提取有价值的信息,从而推动科学
    发表于 10-14 09:21

    《AI for Science:人工智能驱动科学创新》第一章人工智能驱动的科学创新学习心得

    的效率,还为科学研究提供了前所未有的洞察力和精确度。例如,在生物学领域,AI能够帮助科学家快速识别基因序列中的关键变异,加速新药研发进程。 2. 跨学科融合的新范式 书中强调,人工智能的应用促进了多个
    发表于 10-14 09:12

    科学家开发出首台可见光飞秒光纤激光器

    光纤激光器的实验装置图 加拿大拉瓦尔大学科学家开发出了第一台可在电磁光谱的可见光范围内产生飞秒脉冲的光纤激光器,这种能产生超短、明亮可见波长脉冲的激光器可广泛应用于生物医学、材料加工等领域。通常产生
    的头像 发表于 07-25 06:43 282次阅读
    <b class='flag-5'>科学家</b><b class='flag-5'>开发出</b>首台可见光飞秒光纤激光器

    中国科学家发现新型高温超导体

    据新华社报道,我国科学家再立新功,又一新型高温超导体被发现。 复旦大学物理学系赵俊团队利用高压光学浮区技术成功生长了三层镍氧化物,成功证实在镍氧化物中具有压力诱导的体超导电性,而且超导体积分数达到
    的头像 发表于 07-19 15:14 688次阅读

    新华社:突破性成果!祝贺我国科学家成功研发这一传感器!

    6月25日,新华社以《突破性成果!祝贺我国科学家》为标题,报道了由我国科学家研发的传感器成果。 我国科学家研发高通道神经探针实现猕猴全脑尺度神经活动监测 神经探针是一种用来记录神经活动的针状电传
    的头像 发表于 06-27 18:03 486次阅读
    新华社:突破性成果!祝贺我国<b class='flag-5'>科学家</b>成功研发这一传感器!

    前OpenAI首席科学家创办新的AI公司

    消息在业界引起了广泛关注,因为苏茨克维曾是OpenAI的联合创始人及首席科学家,并在去年在OpenAI董事会上扮演了重要角色。
    的头像 发表于 06-21 10:42 520次阅读

    科学家研制出一款新型柔性X射线探测器

    英国科学家开发出一种有机半导体材料,并利用其研制出一款新型柔性X射线探测器。这种探测器不仅“身段”更柔软,可贴合需要扫描物体的形状,从而提高患者筛查的准确性,降低肿瘤成像和放射性治疗的风险,而且成本
    的头像 发表于 06-13 06:29 302次阅读

    我国科学家开发出新型激光切割技术

    精度和深宽比。 近日,针对这一难题,清华大学精密仪器系孙洪波教授和吉林大学陈岐岱教授联合团队,开发出一种超隐形切割技术,利用激光-物质相互作用过程中的非线性反馈,促进横向的亚波长光场局域化和纵向的能量沉积均
    的头像 发表于 05-23 06:36 189次阅读

    本源量子参与的国家重点研发计划青年科学家项目启动会顺利召开

    2024年4月23日,国家重点研发计划“先进计算与新兴软件”重点专项“面向复杂物理系统求解的量子科学计算算法、软件、应用与验证”青年科学家项目启动会暨实施方案论证会在合肥顺利召开。该项目由合肥综合性国家科学中心人工智能研究院(安
    的头像 发表于 05-11 08:22 687次阅读
    本源量子参与的国家重点研发计划青年<b class='flag-5'>科学家</b>项目启动会顺利召开

    NVIDIA首席科学家Bill Dally:深度学习硬件趋势

    Bill Dally于2009年1月加入NVIDIA担任首席科学家,此前在斯坦福大学任职12年,担任计算机科学系主任。Dally及其斯坦福团队开发了系统架构、网络架构、信号传输、路由和同步技术,在今天的大多数大型并行计算机中都可
    的头像 发表于 02-25 16:16 1146次阅读
    NVIDIA首席<b class='flag-5'>科学家</b>Bill Dally:深度学习硬件趋势

    康奈尔大学科学家研制出5分钟快速充电锂电池

    锂离子电池如今广泛应用于电动汽车及智能手机领域。其优点包括轻巧、抗震、环保,但充电时间较长及承受大功率电涌的能力不足。随着最新研究成果发布,科学家找到了一种独特的铟阳极材料,与锂离子电池内的阴极材料实现良好配合。
    的头像 发表于 01-26 09:57 676次阅读
    康奈尔大学<b class='flag-5'>科学家</b>研制出5分钟快速充电锂电池

    什么是光伏IR相机

    光伏IR相机是一种特殊的光电设备,它使用红外线(IR)技术来检测和捕捉光伏电池板上的热图像。这种相机的主要功能是检测光伏电池板上的热分布和异常,帮助工程师和科学家更好地了解光伏电池板的性能和存在的问题。
    的头像 发表于 01-23 11:36 891次阅读
    什么是光伏IR<b class='flag-5'>相机</b>?

    谷歌DeepMind科学家欲建AI初创公司

    据知情人士透露,谷歌人工智能部门DeepMind的两名杰出科学家Laurent Sifre和Karl Tuyls正在与投资者商讨在巴黎成立一家新的人工智能初创公司的事宜。
    的头像 发表于 01-22 14:41 488次阅读

    飞腾首席科学家窦强荣获 “国家卓越工程师” 称号

         飞腾首席科学家窦强荣获 “国家卓越工程师” 称号 1月19日上午,首届 “国家工程师奖” 表彰大会在北京人民大会堂隆重举行。81 名个人被授予 “国家卓越工程师” 称号,50 个团队被授予
    的头像 发表于 01-19 19:22 1716次阅读
    飞腾首席<b class='flag-5'>科学家</b>窦强荣获 “国家卓越工程师” 称号