0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

高通第五代 AI Engine,旗舰手机智慧化体验的基石

lhl545545 来源:IT之家 作者:汐元 2020-11-16 14:35 次阅读

不知不觉 2020 年已经接近尾声,过去一年的智能手机市场和往年一样是热火朝天,有一个明显的特点是各大手机厂商越来越重视高端旗舰产品,从年初三星 Galaxy S20 全球首发高通最新的旗舰移动平台骁龙 865 开始,随后是小米 10 系列、小米 10 Pro 至尊纪念版、一加 8 Pro、Find X2 Pro、iQOO Neo 3…… 旗舰之上还有至尊旗舰,各种卖点各种花样层出不穷。

在这些旗舰手机身上,厂商们也更加重视差异化的竞争,例如有主打发烧性能的游戏手机,有死磕顶级拍照的影像手机,还有主打美观颜值和系统交互的 “小而美”机型,而在这诸多的看点中,我们经常听到的一个词是 AI。性能需要 AI,拍照需要 AI,系统交互也需要 AI,如今 AI 已经融入到智能手机的方方面面,而智能手机的这些 AI,往往又和一个角色分不开,那就是骁龙 865 移动平台。

也许过去,我们总是认为,作为旗舰手机标配的骁龙移动平台是以强劲的性能为手机带来优质的使用体验,而现在,我们需要改观了,以骁龙 865 移动平台为例,在性能之上,强大的 AI 能力会将智能手机的体验带到更顶级的层次。

今天我们就来盘一盘,骁龙 865 移动平台是怎样通过 AI 能力赋能一众旗舰手机的。

第五代 AI Engine,旗舰手机智慧化体验的基石

在盘点各种智能手机之前,我们需要先对高通骁龙 865 移动平台的 AI 能力有一个详细的了解。

众所周知,骁龙移动平台的 AI 能力主要通过高通自家的人工智能引擎 AI Engine 展现,而在骁龙 865 上,则是第五代 AI Engine。

我们知道,AI 运算和传统 CPUGPU 负责的整数、浮点运算属于不同类型的运算,CPU、GPU 自己很难搞定,因此需要专门针对 AI 运算的功能模块。这个功能模块可以是专门的 AI 芯片,也可以是一种整合 CPU、GPU 等运算资源的功能机制,让 SoC 更适合处理 AI 运算,而高通的 AI Engine 属于后者。

高通在传统 CPU 和 GPU 的基础上,加入了一枚更适合处理 AI 运算内容的 Hexagon 向量处理器,而 AI Engine 的工作主要就是协调好 CPU、GPU 和 DSP(Hexagon 处理器)三种核心的工作内容。

CPU、GPU 和 DSP(Hexagon 处理器)这三种核心各自擅长不同的运算,其中,CPU 擅长逻辑控制与串行运算,GPU 擅长大规模的并行运算,而 DSP 中的 Hexagon 张量加速器特别擅长高开销等级的矩阵乘法运算。

AI 运算需要融合传统的高性能串行计算和新兴的并行运算,在智能手机这种移动终端中也包含大规模的乘法运算,所以高通骁龙这种异构运算的思路非常契合深度学习的运算需求。

具体到骁龙 865 的第五代 AI Engine 上,它由 Kryo 585 CPU、Adreno 650 GPU、新一代 Hexagon 处理器、ISP、高通传感器中枢(Sensing Hub)、安全处理单元、调制解调器,甚至 Quick Charge 等模块组成,在他们的支持下,第五代 AI Engine 的 AI 能力才能实现大跃进。

其中,骁龙 865 的 Kryo 585 CPU 的性能相比上代提升了 25%,能效提升 25%,而 Adreno 650GPU 的性能相比上一代也提升了 25%,能效提升了 35%;新一代张量加速器 Hexago 的 TOPS 性能是前代张量加速器的 4 倍,运行能效提升 35%。

综合起来,骁龙 865 移动平台的第五代 AI Engine 的 AI 性能相比上一代提升了 2 倍多,具体到体运算力上,可以达到 15TOPS,也就是每秒 15 万亿次运算的水平。

不仅如此,在第五代 AI Engine 中,传感器中枢让终端能够以极低功耗感知周围情境,高精度语音侦测确保语音助手能够清晰准确地接受用户指令,而增强的始终开启的传感器和智能声音识别进一步将情境感知 AI 提升至全新水平。

此外,它还支持深度学习带宽压缩技术,可以实现高达 50% 压缩比的无损压缩,配合全新 LPDDR5 所带来的 30% 的带宽提升,可以进一步 AI 处理能力。

可见,骁龙 865 的第五代 AI Engine 拥有强大的 AI 能力,这种 AI 运算能力是它能够在游戏、拍照、交互等领域助力各大旗舰手机提升体验的基础。

游戏性能,不仅仅是更流畅

这两年游戏手机的热度持续不减,很多手机品牌都开辟了自家的游戏手机产品线,2020 年游戏手机仍然火热,像腾讯黑鲨游戏手机 3、努比亚红魔 5G、vivo NEX 3S、iQOO Neo 3、拯救者电竞手机 Pro、ROG 游戏手机 3 等。

在这些游戏手机中,骁龙 865 第五代 AI Engine 通过智能调度 SoC 中 CPU、GPU 和 DSP 等模块的 AI 运算资源,一方面可以极大提高游戏手机运行游戏的流畅性体验,另一方面还可以为游戏手机带来一些独家的功能体验。

在游戏流畅性方面,IT之家以努比亚红魔 5G 手机为例,在最高画质下玩 10 分钟的《和平精英》,游戏过程丝滑流畅,测得平均帧率为 59.7fps。

再看游戏运行时 CPU、GPU 的调度情况,无论是 CPU 的各个核心,还是 GPU 的性能输出,都很有规律且保持稳定,这就是基于第五代 AI Engine 对两者性能实时、合理的分配实现的,体现在结果上,就是游戏运行时的始终平稳、流畅。

iQOO Neo 3 手机测试了《和平精英》90 帧 + HDR 画质的运行状况,游戏时长仍然为 10 分钟,从结果看,Neo3 的平均帧率达到了 89.5FPS,可见骁龙 865 第五代 AI Engine 为游戏手机带来的流畅性体验上限还是比较高的。

除了流畅性体验,骁龙 865 的第五代 AI Engine 还可以辅助游戏手机实现一些独特的功能,例如努比亚红魔 5G 手机的游戏插帧,就是很有意思的功能。

游戏插帧在红魔 5G 手机上叫做 Touch Choreographer 游戏插帧算法,IT之家以《巅峰战舰》这款游戏为例进行了体验。红魔 5G 的屏幕刷新率可以高达 144Hz,因此游戏插帧也可以插到 144fps。游戏过程中的平均帧率可以达到 141.5fps,从帧率变化的图上,我们可以看到 AI Engine 不停尝试调节游戏帧率的过程,当帧率下滑时,立刻能够补上去,实际的游戏效果也是非常顺滑。

影像能力,让摄像头成为手机的智慧之眼

说到影像,绝对是这两年智能手机上的 “明星功能”,是各大手机厂商都在费尽心思打磨的功能点,而在大家打磨自家旗舰手机的拍照效果和体验时,骁龙 865 的第五代 AI Engine 无疑是他们可以利用的一大 “工具”。

从原理上讲,第五代 AI Engine 对手机影像能力的提升,主要是作用于 Spectra 480 ISP 对图像数字信息进行去除噪点、高光抑制、暗光补偿等处理的过程以及后续更多优化算法处理的过程。

图像视频信息处理计算复杂度极高,但 AI 中的卷积神经网络恰恰擅长这样的信息处理,更重要的是,它不仅是提高拍照的水平,还能实现很多智能的相机应用,例如人脸解锁、拍照场景优化、智慧美颜、拍照翻译、拍照背景虚化等。

2020 年有很多影像能力出色的旗舰手机,例如小米 10 至尊纪念版、魅族 17、OPPO Find X2、OPPO Reno4 Pro 等等。

以小米 10 至尊纪念版为例,这款手机支持一项双原生 ISO Fusion 技术,这项技术可以同时拍摄两张低原生 ISO 图像和高原生 ISO 图像,然后彼此融合成一张高动态范围照片,这个技术实现时对运算的要求比较大,基于骁龙 865 的第五代 AI Engine,则可以很好地完成。

夜晚光线不足时,小米 10 至尊纪念版拍摄的样张画面也足够通透、亮度充足,画面纯净度也很高,而打开夜景模式后,高光控制更加优秀,可以呈现出了一流的夜拍动态范围表现,可见高通第五代 AI Engine 在辅助成像算法计算方面强大的能力。

除了小米 10 至尊纪念版,OPPO Reno 4 Pro 也是一款拥有出色拍照表现的手机,我们直接以考验更严苛的夜间拍照来举例。

拍照成像之外,旗舰手机们利用骁龙 865 的第五代 AI Engine 还可以实现更多智慧化的功能。例如拍照翻译。我们还是用 OPPO Reno4 Pro 来介绍,在 Reno4 Pro 中唤醒语音助手小布,然后对她说 “帮我翻译”,就可以直接调出摄像头进行拍照翻译。

还有 AI 快速识别物体,也是手机通过第五代 AI Engine 的计算机视觉能力来进行的,IT之家也用 Reno4 Pro 尝试识别了物体,速度和准确度都很高。

系统交互及其他 AI 能力,全面提升智慧体验

正如前文所说,骁龙 865 的第五代 AI Engine 对于旗舰手机的体验升级是方方面面的,游戏、性能和影像是其中比较高频的应用,而在日常生活中,我们需要用到 AI 的地方还有很多,旗舰手机能利用第五代 AI Engine 做的事也还有很多,这些事融合在各家手机品牌的系统中,成为定义这些手机的标签之一。

例如在 vivo NEX 3S 手机中,有一款《翻译机》自带应用,这个应用就利用第五代 AI Engine 作出了语音实时翻译的功能。

大家可以看下面这段测试:

实时翻译需要智能手机在极短的时间里快速处理大量的语音信息,并通过 AI 能力理解语义,对手机 AI 能力的挑战是很高的。通过测试可以看到,vivo NEX 3S 的确可以将一段英语的朗读内容实时地翻译成中文,翻译的结果也能够让人满意,尽管难免有局部不准确的地方,但至少可以让人看懂这段语音讲了什么内容。

还有 OPPO Find X2 Pro 上的 Motion Clear 视频动态补帧功能,这个功能可以把我们平时看的 24 帧、30 帧的视频优化到 60 帧甚至 120 帧,从而让我们看到的视频画面更接近人眼现实中看到的画面,增强视频的逼真度。

评测 OPPO Find X2 Pro 时就体验过这个功能,特别是在一些动画片和体育节目中,经过 Motion Clear 视频动态补帧优化后的视频明显看起来比普通的视频更加真实、流畅。

在原生 24 帧的视频中进行补帧,需要对视频的画面进行快速实时的分析,然后确定如何添加帧数,这同样对 AI 的运算性能是巨大的考验,Motion Clear 动态补帧之所以能实现,也是因为骁龙 865 第五代 AI Engine 的运算性能达到了补帧的要求。

最后还有一个比较有意思的应用,就是在魅族 17 Pro 手机 Flyme 8 系统中的 Aicy 识曲功能。平时我们看视频时经常会遇到不少好听的背景音乐,但又不知道叫什么名字,有两台手机的还好,打开音乐软件用 “听音识曲”功能搜索,但随身携带两台手机的小伙伴毕竟是少数,更多时候,是那些好听的歌曲带着遗憾与你之擦肩而过。

而魅族的 Aicy 识曲则利用 AI 的能力,在一台手机中做到了听歌识曲,你只要长按抖音 / 快手短视频触发小窗打开音乐 App(如 QQ 音乐 / 酷狗音乐 / 网易云音乐),就能轻松获取流行 BGM。

结语

在 AI 技术如火如荼的今天,手机越来越聪明,越来越智能,无疑是大势所趋。但是仔细思考,如何让手机更加聪明,却不是一件轻易的事,需要底层芯片和技术提供商、终端厂商以及应用生态的联合,才能做到。

而高通基于骁龙移动平台的 AI Engine 相当于为 “手机更加聪明”提供了一个可能性,它是骁龙手机的 AI 运算之源,利用强劲的 AI 算力,终端厂商和应用生态的企业才能构造出更多的 AI 功能和应用,就像上文介绍的,众多旗舰终端利用第五代 AI Engine 挥洒创意,作出了很多非常实用且有创意的功能,相信未来随着骁龙人工智能引擎算力的增强,这些终端和功能会逐渐构筑成一个全场景的智慧体系,彻底改变我们的生活。
责任编辑:pj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 智能手机
    +关注

    关注

    66

    文章

    18423

    浏览量

    179776
  • 三星电子
    +关注

    关注

    34

    文章

    15854

    浏览量

    180895
  • AI
    AI
    +关注

    关注

    87

    文章

    29962

    浏览量

    268267
收藏 人收藏

    评论

    相关推荐

    Snap发布第五代Spectacles AR眼镜

    9月19日最新资讯,科技巨头Snap近日隆重推出了其第五代Spectacles AR眼镜,这款前沿产品不仅标志着Snap在增强现实(AR)领域的又一重大突破,也预示着智能穿戴设备与AI技术的深度融合将开启全新篇章。
    的头像 发表于 09-19 15:14 749次阅读

    第五代AMD EPYC处理器预计下半年发布

    近日,在Computex 2024上,AMD董事会主席及首席执行官Lisa Su博士向大家预览了具有超强性能的下一 EPYC 处理器——第五代 AMD EPYC 处理器(代号“Turin”)。
    的头像 发表于 09-18 11:06 565次阅读

    三星第五代DDR产品良率不达标

    据报道,三星电子在最新的半导体技术探索中遭遇了挑战。其第五代10nm级(1b)制程DRAM的良率尚未达到业界通常期望的80%~90%的水平,这一状况引发了业界的广泛关注。
    的头像 发表于 06-13 09:41 672次阅读

    【机器视觉】欢创播报 | 比亚迪第五代DM混动技术正式发布

    1 比亚迪第五代DM混动技术正式发布 5月28日,比亚迪第五代DM技术发布暨秦L DM-i、海豹06 DM-i发布会在西安举行。第五代DM技术实现全球最高发动机热效率46.06%、全球最低百公里亏电
    的头像 发表于 05-30 10:53 756次阅读

    capsense第四第五代在感应模式上的具体区别是什么?

    据我所知,第五代capsense相比第四将电容(包括自电容+互电容技术)和电感触摸技术集成到了一起,snr信噪比是上一的十多倍,同时功耗仅是上一的十分之一。但是这张图在感应模式
    发表于 05-23 06:24

    佛瑞亚海拉第五代77GHz雷达荣获《汽车观察》智輅奖

    佛瑞亚海拉第五代77GHz雷达荣获《汽车观察》智輅奖
    的头像 发表于 05-06 11:05 609次阅读
    佛瑞亚海拉<b class='flag-5'>第五代</b>77GHz雷达荣获《汽车观察》智輅奖

    第五代英特尔至强处理器,AI特化的通用服务器CPU

      电子发烧友网报道(文/周凯扬)随着AI已经成了数据中心与服务器市场的主流应用,就连通用服务器CPU,也开始着重加强AI计算能力。为此,英特尔于去年年底发布了第五代至强处理器,进一步提升通用
    的头像 发表于 03-18 08:14 4173次阅读
    <b class='flag-5'>第五代</b>英特尔至强处理器,<b class='flag-5'>AI</b>特化的通用服务器CPU

    Vishay推出多功能新型30 V N沟道TrenchFET第五代功率MOSFET

    Vishay 推出多功能新型 30 V N 沟道 TrenchFET 第五代功率 MOSFET,进一步提高工业、计算机、消费电子和通信应用的功率密度,增强热性能。
    的头像 发表于 02-22 17:11 728次阅读
    Vishay推出多功能新型30 V N沟道TrenchFET<b class='flag-5'>第五代</b>功率MOSFET

    哈博森推出第五代超级电池,续航型和爆力型两种可选

    据悉,第五代超级电池既继承前四智能电池的优势,又在重要技术升级中取得突破,包括能量密度和放电倍率等指标。相较于第四智能电池,第五代超级电池能量密度显著提升 20%。
    的头像 发表于 02-22 14:14 822次阅读

    英特尔专家为您揭秘第五代英特尔® 至强® 可扩展处理器如何为AI加速

    近日,英特尔发布了第五代至强 可扩展处理器,尤其是其“为 AI 加速”的口号引起了广泛关注。 在 AI 快速发展的今天,第五代英特尔 至强 可扩展处理器的成绩亮眼,其相对于上一
    的头像 发表于 12-23 12:20 699次阅读

    宝德服务器全面升级到第五代英特尔®至强®平台

    近日,英特尔正式发布了第五代英特尔®至强®可扩展处理器,得到了产业链各方伙伴的广泛认可和积极拥护,一起致力于用科技的力量普及大众、继续推动科技创新。作为英特尔在中国最重要的战略合作伙伴之一,宝德同时
    的头像 发表于 12-21 16:12 671次阅读
    宝德服务器全面升级到<b class='flag-5'>第五代</b>英特尔®至强®平台

    持续性能优化,从容应对挑战——澜起科技全新第五代津逮®CPU上市!

    澜起科技于今日正式向外界发布其全新第五代津逮®CPU,旨在以多方面的性能优化应对AI、HPC、数据服务、网络/5G、存储等严苛工作负载的挑战。 澜起科技第五代津逮®CPU,基于英特尔®第五代
    的头像 发表于 12-18 10:27 431次阅读

    澜起科技全新第五代津逮®CPU上市!

    澜起科技于今日正式向外界发布其全新第五代津逮®CPU,旨在以多方面的性能优化应对AI、HPC、数据服务、网络/5G、存储等严苛工作负载的挑战。
    的头像 发表于 12-18 09:13 527次阅读

    第五代英特尔至强可扩展处理器,为AI加速而生

    今日,在以“AI无处不在 创芯无所不及”为主题的2023英特尔新品发布会暨AI技术创新派对上,英特尔正式推出第五代英特尔 至强 可扩展处理器(代号 Emerald Rapids)。期间,英特尔亦
    的头像 发表于 12-16 16:15 418次阅读
    <b class='flag-5'>第五代</b>英特尔至强可扩展处理器,为<b class='flag-5'>AI</b>加速而生

    第五代英特尔至强可扩展处理器,为AI加速而生

    今日,在以“AI无处不在 创芯无所不及”为主题的2023英特尔新品发布会暨AI技术创新派对上,英特尔正式推出第五代英特尔® 至强® 可扩展处理器(代号Emerald Rapids)。期间,英特尔亦与生态伙伴分享了该全新产品在京东
    发表于 12-16 15:53 316次阅读
    <b class='flag-5'>第五代</b>英特尔至强可扩展处理器,为<b class='flag-5'>AI</b>加速而生