0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

新版本ARKit对利用iPhone X前置结构光摄像头进行眼动追踪的支持

0wvm_ARchan_TT 来源:未知 作者:李倩 2018-07-02 15:05 次阅读

在ARKit 2.0发布之后不久,不少开发者发现了新版本ARKit对利用iPhone X前置结构光摄像头进行眼动追踪的支持。

类似的功能我们在过去也见识过(不会写程序怎么当好艺术家?跳出iPhone X屏幕的3D立体视觉效果)

该艺术效果的开发者就是利用了前置景深摄像头获取眼球位置,根据位置实时改变动画呈现角度。

但严格意义来说,这并不算是眼动追踪,只是对眼球位置的识别,换言之如果头部和手机的相对位置不改变,眼球转动时画面不发生变化。

而ARKit 2下眼动追踪的效果效果就非常惊艳了

转动眼睛,屏幕中的十字光标便会随着注视点的移动而移动,响应速度和精确度都很不错

通过眨眼睛(忍不住想眨眼了怎么办,会不会误触)完成点击选择,操纵手机全程不需要动手,在很多场景中可以说是非常方便了。得益于红外方案,即便是在黑暗中也能实现眼动追踪。

手机眼球追踪

用眼动追踪来控制手机,是不少开发者一直以来都在设想的。

去年年初发布的ZTE Hawkeye加入的眼球追踪利用前置摄像机检测用户的虹膜运动,上下或左右滑动控制屏幕。

滑动的功能能方便人们在手上没空的情况下简单的操作手机,但是对于一些使用群体(肢体残障)来说,他们渴望功能更加强大的眼动追踪方案。

一般而言,有两种跟踪眼球的方案,即普通摄像头和红外摄像头。

普通摄像头方便小型化,低成本但是精度低,红外方案体积大,造价高,同时精度高。

但随着技术的发展,优缺点不能一刀切,针对普通摄像头方案,2016年麻省理工开设的“Eye tracking for everyone”就利用了卷积神经网络(CNN)预测用户对手机或者平板的注视位置,只使用普通摄像机的情况下让精度变为1.34cm到2.12cm。

尽管精度上有所提高,但从目前的市场情况可见虽然该技术还并没有成熟。

红外摄像头则一直都是主流的眼动追踪识别方案

例如Tobii眼动仪采用的技术就是通过识别用户眼球上角膜、瞳孔产生的反射图像,使用两个图像传感器分别采集眼睛与反射图像,通过图像处理算法和一个三维眼球模型精确地计算出眼球、注视点在空间中的具体位置。

解决了小型化问题的True-Depth相机模组是否也采用了相似地技术原理呢?

6月20日,开发者Andrew Zimmer在Twitter发布了一个demo,展示ARKit 2对眼睛注视点位置的实时追踪效果,随着Andrew眼球的转动,注视点点的移动在屏幕上画出一条连贯的曲线。在图中,颜色越暖(橘色、红色),代表注视时间越长。注视点位置的检测精确,识别轨迹流畅连贯,在未来的人机交互中潜力巨大。

有相当数量的患者由于操作不便,与信息时代脱节。其中有不少唯一与设备相互动的渠道就是眼睛,眼球追踪加入智能手机的交互模式同样也能造福健全人,让我们在手上没空的情况下操作手机比如做饭看菜谱、开车看导航。

不过同时,技术也带来了很大的隐私问题。相信大家都有同感,在网上浏览过某一类商品之后,pc和手机app的各种广告和弹窗中会根据你的浏览内容推荐一堆类似商品。当未来的APP知道了你因为感兴趣而长时间注视的内容,内容推送会更加精确,人们的注视内容信息会被拿去贩卖,更无隐私可言了。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • iPhone
    +关注

    关注

    28

    文章

    13472

    浏览量

    201979
  • 摄像头
    +关注

    关注

    60

    文章

    4851

    浏览量

    95940
  • 结构光
    +关注

    关注

    0

    文章

    74

    浏览量

    13255

原文标题:ARKit 2眼动追踪,人机交互新模式

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    苹果iPhone 14系列摄像头内部拆解

    苹果在基准型号 iPhone 14 上推出了升级的主后置摄像头,在 iPhone 14 Pro/Max 上推出了改进的前置摄像头模块,当然还
    发表于 09-20 10:33 6225次阅读
    苹果<b class='flag-5'>iPhone</b> 14系列<b class='flag-5'>摄像头</b>内部拆解

    请问有iPhone X的原深感摄像头相关元器件的数据参数吗?

    face ID问题,想知道iPhone X的原深感摄像头相关元器件的数据参数。
    发表于 02-26 10:42

    追踪能提供全新人机互动体验

    强大的电脑芯片、高效的红外LED以及新型的摄像传感器,让先前复杂的追踪系统如今能够适应消费类电子应用的各种需要。借助这些系统,电子设备可以检测用户的眼球运动,从而识别用户的下一步意
    发表于 05-18 08:30

    回收vivo摄像头高价收购vivo摄像头

    !帝欧现金紧急求购vivo手机全新摄像头!深圳龙华高价回收vivo手机高清摄像头,现紧急求购vivo各型号手机后置摄像头前置摄像头!帝欧电
    发表于 04-21 17:16

    什么是追踪追踪如何运作?

    什么是追踪追踪如何运作?
    发表于 06-17 06:11

    iPhone X摄像头+AR、显示屏和Face ID成产品主要卖点

    消费者信心分析(CSA)服务近日发布了一份新报告,题为“早期买家信心:iPhone X消费者对手机的摄像头、显示屏和Face ID信心十足”,该报告对主要在线零售商上的苹果iPhone
    的头像 发表于 12-29 09:12 4429次阅读

    丘钛包揽OPPO Find X全隐藏式3D摄像头模组

    但是机身没有开孔,怎么解锁?在Find X上,更方便更安全的解锁就是面部识别,OPPO称其为O—Face。该款机型搭载了全隐藏式3D摄像头前置摄像头模组包含了3D
    的头像 发表于 06-21 18:17 6195次阅读

    TDA2x前置摄像头同运行的全景可视系统

    在TDA2x上同时运行带有前置摄像头分析的全景可视系统
    的头像 发表于 08-22 00:34 2876次阅读

    Oculus获新专利 能实现更精确的追踪功能

    Oculus公司获得了一项追踪技术新专利,他们或将在显上安装摄像头,从而实现更精确的
    发表于 11-12 11:18 1596次阅读

    vivo X27 Pro前置摄像头采用双边了滑轨升降结构并新增了NFC功能

    前置升降摄像头的设计也发生了部分改变,前置摄像头采用双边滑轨升降结构,升起行程缩短至0.62秒,占用的体积也比
    发表于 04-30 08:46 3995次阅读

    SteamVR获新版本更新 已全面支持OculusRiftSVR

    SteamVR平台迎来新版本更新,宣布现在已经全面支持最近发布的Oculus Rift S VR显,此外该版本还修复了“众多稳定性问题和错误”。
    发表于 06-18 16:31 1964次阅读

    realme正式推出了realme X新版本升级了8GB+256GB超大存储组合

    realme X新版本升级了8GB+256GB超大存储组合,其他配置方面保持不变。正面依然搭载6.53英寸三星AMOLED屏幕,屏占比高达91.2%,前置1600万像素升降摄像头,后
    发表于 08-12 11:53 1792次阅读

    OpenVINO™ 2022.2新版本有哪些亮的新特性

    金秋已至。伴着凉爽的秋风一起到来的,还有 OpenVINO 工具套件刚刚推出的最新版本 OpenVINO 2022.2。除了能支持英特尔今年新推出的一系列独立显卡进行 AI 模型的推理加速及部署外,2022.2的
    的头像 发表于 10-09 09:13 1733次阅读

    网络摄像头追踪则的优势

    . 首先, 网络摄像头追踪基本上意味着从"一般" 相机获取
    的头像 发表于 11-03 12:03 1119次阅读

    NVIDIA多摄像头追踪工作流的应用架构

    为提高安全性并优化运营,仓库、工厂、体育场、机场等大型区域通常会有数百个摄像头进行监控。多摄像头追踪指的是通过这些摄像头
    的头像 发表于 09-06 14:23 358次阅读
    NVIDIA多<b class='flag-5'>摄像头</b><b class='flag-5'>追踪</b>工作流的应用架构