0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

眼动追踪对于AR眼镜的重要性不言而喻

0wvm_ARchan_TT 来源:未知 作者:李倩 2018-07-22 10:47 次阅读

眼动追踪对于AR眼镜的重要性不言而喻,现阶段用于AR头显的眼动追踪方案主要都是红外(IR)LED来实现的,但是精度并不算高,除非愿意在脖子上再加几斤铁倒是可以得到高精准度。

头戴式眼动追踪精度不高的问题,主要可以提到两点。我们写过很多文章,经常提到AR眼镜在户外运作的挑战,这次也不例外,户外的强光会对红外的效果产生影响,而且在户外广阔的视野的条件下,一点点的错误都会被放大无数倍,将会强烈的影响到用户体验感。在短距离下使用,就体现不出来这种缺点了。

其次,我们可以把人眼认为是一块凸镜,对于光线是有折射率的,这将导致光线弯曲。从而使得眼球位置、注视角度、瞳孔半径都产生了误差。而解决方案里其实是忽略了这一点,误差自然而然是出现了。这种误差通常能达到1度,甚至更多。

还不仅仅是凸面的关系这么简单,而是与眼角膜的性质有关。在角膜的顶部不会产生折射现象,而在角膜的底部,就会产生屈光现象(也就是发生折射)。

而且传统方案不会考虑到眼镜的滑动会对眼动追踪造成的影响。

Pupil Labs在其研究中则希望解决这些缺点,而且很轻便,只需要一个摄像头就可以完成这项任务了。让我们一起来看看吧。

采用了摄像头而不是红外,第一个问题自然而然就迎刃而解了。对于角膜而言,我们第一个要解决的是它折射率的问题,因为在不同的位置角膜的折射率是不同的。通过将眼球视为球形,通过数学模型计算,这就得出了各个位置上角膜的折射率。

对于眼球位置的估计,使用的方法是回归模型的方法,这种方法适合于3D眼睛模型的构建,并可以对注视进行估计。通过一个或多个摄像机从眼睛中获取的面部特征加上从模型中获取的眼睛特征,就可确定眼睛的相关参数

至于注视方向的估计方法,使用的方法是利用3D眼睛模型进行估计的。传统方法也是 这样进行的,但是在考虑到眼睛的折射后,就不一样了,即虹膜的2D轮廓不再是3D虹膜的简单投影了,尤其是在一些角度更加倾斜的使用环境下。

对此,Pupil Labs抛弃前人的假设,使用的是单个相机的图像,来进行折射建模估计眼睛注视的方向。

要确定瞳孔的轮廓和半径,第一个就必须要找到瞳孔的中心。传统方法假设3D瞳孔的中心就是2D瞳孔的中心,这也是一个忽略了折射的一个简单假设。Pupil Labs在这里也同样抛弃前人的方法,使用其眼睛模型来估计。

他们假设3D眼睛模型由两部分球体组成——眼球和角膜。眼球的中心位于E =(sx,sy,sz),曲率半径为rc,外层覆盖着不透明的巩膜。角膜的中心为C,曲率半径re,为透明。但是也为了便于计算,设定角膜内的房水为均匀介质,有效折射率n=1.3375,虹膜和瞳孔为同心圆,法线平行。光轴为EP线(通过校准获得),下面偏移的线就是视轴。

具体的模型计算丸子酱就不多言了(毕竟看不懂。。。大家看了也头大),直接来说结论吧。

绿色的是Pupil Labs的数据,红色的另一个方案的对比组。

在注视角度变大的时候(也就是斜着眼睛看人),对比组误差指数型增长,甚至能达到15度的误差。而Pupil Labs的数据结果十分稳定,无论什么时候性能都十分良好。但是由于模型问题,还会存在离散误差,对结果的正确性有一定的影响,而且其模型还是存在一定的系统误差的。

Pupil Labs提出的新型眼动追踪方案,就传统方案忽略了眼角膜折射而造成的误差进行了改正。研究也证明红外方案的确会有较大误差和局限性,不顾Pupil Labs的方案似乎还存在一点点问题,不知道完善后能不能得到应用呢。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 摄像头
    +关注

    关注

    59

    文章

    4797

    浏览量

    95340
  • AR眼镜
    +关注

    关注

    4

    文章

    522

    浏览量

    23007

原文标题:新型眼动追踪,精度更高

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    什么是追踪追踪如何运作?

    什么是追踪追踪如何运作?
    发表于 06-17 06:11

    STM32F4时钟树的重要性

    STM32F4时钟树时钟是单片机的心脏,重要性不言而喻,STM32F4的时钟树是比较复杂的,所以不是一言两语能写清楚的,我只简单的描述下时钟来源,详细知识需要去看正点原子的视频讲解。整个时钟来源有五
    发表于 08-11 07:40

    电源对电子设备的重要性

    电源对电子设备的重要性不言而喻,它是保证系统稳定运行的基础,保证系统能稳定运行的同时,又有低功耗的要求。在很多应用场合中都对电子设备的功耗要求非常苛刻,如 某些传感器信息采集设备,仅靠小型的电池
    发表于 08-11 07:57

    时钟的重要性

    运行执行指令,才能够做其他的处理 (点灯,串口,ADC),时钟的重要性不言而喻。为什么stm32需要多个时钟源?STM32本身十分复杂,外设非常多但我们实际使用的时候只会用到有限的几个外设,使用任何外设
    发表于 08-13 07:31

    时钟系统的重要性

    时钟系统就是CPU的脉搏,像人的心跳一样,重要性不言而喻。由于STM32本身十分复杂,外设非常多,但并不是所有的外设都需要系统时钟那么高的频率,比如看门狗以及RTC只需要几十k的时钟即可。并且
    发表于 08-20 07:59

    韩国芯片发展的重要启示

    在5G已经逐步商用化、AI大量应用的今天,芯片对于一个科技企业来说的重要性已经不言而喻
    的头像 发表于 06-03 11:48 4279次阅读

    当前5G对于智慧城市建设的重要性不言而喻

    城市是人类最伟大的发明之一,城中的每一条街道,每一栋楼宇都容纳着生活在城中的人们的一切生活轨迹。人类社会的发展、进展,本质是技术的进步,随着第四次工业革命浪潮的到来,城市也向智能化不断迭代升级。人工智能将对于城市功能优化、帮助产业转型升级,同时在生活便捷安全方面发挥更大的作用。
    的头像 发表于 09-02 11:00 6661次阅读

    追踪将是下一代VR头显非常重要的一项技术

    追踪是许多人认为下一代VR头显必备的重要技术,近日Lemnis Technologies最新的变焦原型旨在为头显制造商提供软件和硬件,了解
    发表于 12-28 11:03 1368次阅读

    追踪集成的眼镜,可将数据带入任何场景

    BIOPAC Systems, Inc.宣布了一项适用于研究人员的追踪集成新方案,让这些研究人员能从不同位置的移动参与者进行实验。ETVision (EYE-ETV)
    发表于 07-16 11:22 1535次阅读

    废旧电池拆解回收重要性

    废旧电池拆解回收的重要性不言而喻。当前电池回收依然存在高兼容安全环保破碎难、高效物理分选不佳、回收段与再生段优化匹配不足等行业难题待解。
    的头像 发表于 09-05 09:46 5263次阅读

    追踪技术初显潜力 落地还需硬件推广

    CES2020上,Nreal宣布与七鑫易维合作,为旗下MR眼镜开发应用场景。追踪技术一直在多个方面有着广泛的应用,随着AR元年的到来,其
    的头像 发表于 10-14 16:34 2340次阅读

    随着人工智能的发展,少儿编程的重要性不言而喻

    掌握的第四项必备技能。全球相比之下,目前中国少儿编程教育的渗透率仅有1.5%,随着人工智能的发展,未来编程的重要性不言而喻。 妙小程,作为国内领先的在线少儿编程教育平台,坚持打造有温度的科技,用有趣的方式拥抱教育
    的头像 发表于 12-26 10:19 3064次阅读

    浅谈硬件测试的重要性

    硬件测试是衡量电子工程师所设计电路性能好坏的一个重要手段。有很多问题你以功能的测试是测试不出来的,但通过硬件测试是可以测试出来,所以硬件测试的重要性不言而喻了。
    的头像 发表于 07-23 16:20 4276次阅读

    苹果新专利揭示其追踪系统

    最近的 AR / VR 头显,如 PICO 4 和 Quest Pro,开始整合更多的传感器和摄像头来制作身临其境的内容。苹果也意识到这项技术对其即将推出的智能眼镜重要性,最新的专利直观诠释了苹果在不同领域的
    的头像 发表于 01-04 10:39 834次阅读

    BMS电池管理系统的重要性

    如今,锂电池已经成为很多电子产品的标配,BMS作为锂电池的大脑,其重要性不言而喻。BMS作为锂电池系统的核心部件,主要负责监控、控制和管理电池组的状态,确保电池组在安全、稳定、高效的条件下运行。
    的头像 发表于 10-21 09:43 270次阅读
    BMS电池管理系统的<b class='flag-5'>重要性</b>