0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

肇观电子3D深度计算AI加速芯片D163A正式发布

你好张江 来源:你好张江 作者:你好张江 2021-02-04 16:02 次阅读

近日,肇观电子正式发布3D深度计算+AI加速芯片——D163A,可广泛应用于包括各种形态机器人、AGV、无人机、可穿戴设备等多个领域。

我们所处的现实世界是一个三维空间,即3D立体空间;高级动物如哺乳类长了一双眼睛,通过左右眼观察到的信息的差别来判断物体的远近。而普通的照相机拍摄出来的照片却是平面的,二维的。

如果要用计算机视觉的方式来获得环境空间信息,根据二维照片的输入,怎么实现呢?

对空间立体信息的感知能力是智能设备比如无人机、无人车、机器人的最重要的能力之一。四周物体和自己的相对位置比如方向、距离、运动方向、运动速度、运动加速度等信息,对于机器人在空间中判断自身位置以及和周围物体互动十分重要。

我们如果想让机器人从点A到点B,机器人首先要确定什么是点A,什么是点B,如何从点A走到点B,如何规划初始路径,中间遇到障碍该如何动态调整路径……完成这些任务都需要机器人具有几何解算能力,而3D深度计算是几何解算的基础任务之一。

双目立体视觉、结构光、飞行时间传感器(ToF)、激光雷达这些诸多技术路线都是为了解决3D深度信息获取问题而生,每一种技术路线都由信号获取(传感器)和信号处理(计算)两部分组成。

双目立体视觉

双目立体视觉是计算机视觉的一个经典领域,其技术路线具有信息量大、不受阳光干扰、距离范围从近到远、无多径干扰问题、传感器成本低等诸多优点,颇受学术界和工业界青睐;其代表应用为斯巴鲁汽车的Eyesight高级辅助驾驶系统、无人机的飞行避障系统、火星车的视觉模块、波士顿动力的机器人的视觉系统;但立体视觉需要消耗大量的计算力来处理,因此在传统观点来看代价十分高昂。

结构光、飞行时间传感器(ToF)、激光雷达这些技术主要是利用主动发射特定信息,然后让接收器选择性接收这些信息的原理,本质上是通过增加传感器的复杂度来降低对计算的要求,达到在算力不足的情况下获取深度信息的目的,在各自领域有着诸多应用。

随着应用日益复杂,工程师往往在通过传感器获取到这些原始信息之后,需要在后端计算引擎上面做降噪、增强、融合等各种进一步加工,这需要有充足算力的芯片来处理。

肇观电子推出了D163A芯片,具有包括深度计算几何引擎和AI计算引擎在内的一系列加速器,将计算机视觉领域的应用推进了一大步。

D163A是一个完整的SoC主控芯片,其具有CPUDSP、ISP、Codec、CV加速引擎、MCU、AI计算引擎和丰富的接口等在内的一系列组件,支持LinuxRTOS操作系统,是一款适合作为信号处理的核心芯片。

D163A有着业界领先的数字信号处理能力,支持200余种通用数学计算算子,例如三角函数、对数、快速傅里叶变换、HoG、SVM、RANSAC,等等。

除了强大的3D深度计算能力和数字信号处理能力,D163A有着业界领先的AI计算加速能力包括领先的每TOPs处理帧数,实时数据流处理能力,支持高精度FP16神经网络模型无损部署以及高性能的INT8网络支持能力。

D163A搭配肇观电子推出的“5分钟部署”的AI应用开发平台Infer Studio,助力AI算法快速商用;

可支持双目立体视觉、结构光、飞行时间传感器(ToF)、激光雷达等各种传感器的信号处理,包括采集、降噪、增强、融合等后处理算法的加速;其高性能低功耗、适用于端侧应用;

接口丰富,支持千兆以太网USB3.0,支持各种操作系统,既可用作主控芯片也可用作协处理器芯片。

D163A在机器人自主避障、车与车之间的距离测算、活体检测、手势识别、空间定位、工业相机、AR/VR等各个方面具有广泛的应用,搭载D163A的模组和系统已经在包括智能叉车、可穿戴设备、无人机、工业检测等多个领域批量商用。

让智能设备具有人一样的视觉感知和理解能力,在复杂的环境中完成复杂的工作,帮助到人们的工作和生活的方方面面,是肇观电子始终不变的追求目标。肇观电子此次发布3D深度计算+AI加速芯片D163A,是公司发展的又一项里程碑式事件,将助力打造机器人的“视觉系统”,推动智能机器人时代的加速到来。

原文标题:肇观电子发布3D深度计算+AI加速芯片D163A,打造机器人的“视觉系统”

文章出处:【微信公众号:你好张江】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    453

    文章

    50384

    浏览量

    421739
  • 3D
    3D
    +关注

    关注

    9

    文章

    2861

    浏览量

    107314
  • AI
    AI
    +关注

    关注

    87

    文章

    30098

    浏览量

    268380

原文标题:肇观电子发布3D深度计算+AI加速芯片D163A,打造机器人的“视觉系统”

文章出处:【微信号:zjpark,微信公众号:你好张江】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    2.5D/3D封装技术升级,拉高AI芯片性能天花板

    2.5D/3D封装和Chiplet等得到了广泛应用。   根据研究机构的调研,到2028年,2.5D3D封装将成为仅次于晶圆级封装的第二大先进封装形式。这一技术不仅能够提高
    的头像 发表于 07-11 01:12 6375次阅读

    中兴通讯携手中国移动推出AI裸眼3D创新产品

    全球领先的通讯科技企业中兴通讯携手中国移动,在2024MWC上海展上联合发布两款全球首创的AI裸眼3D创新产品:千元普惠的中兴远航3D手机和第二代裸眼
    的头像 发表于 10-15 10:05 569次阅读

    中兴通讯全场景AI终端应用与裸眼3D新品亮相

    次展会上,中兴通讯还与中国移动联合发布千元普惠的AI裸眼3D手机——中兴远航3D,以及全球首款5G+AI裸眼
    的头像 发表于 10-15 10:00 696次阅读

    NEO推出3D X-AI芯片AI性能飙升百倍

    近日,半导体行业的创新先锋NEO Semiconductor震撼发布了一项革命性技术——3D X-AI芯片,这项技术旨在彻底颠覆人工智能处理领域的能效与性能边界。
    的头像 发表于 08-21 15:45 594次阅读

    3D DRAM内嵌AI芯片AI计算性能暴增

    电子发烧友网报道(文/黄晶晶)尽管当前AI训练主要采用GPU+HBM的方案,不过一些新的技术仍然希望进一步打破存储数据传输带来的瓶颈问题。最近,NEO半导体宣布开发其3D X-AI
    的头像 发表于 08-16 00:08 3122次阅读
    <b class='flag-5'>3D</b> DRAM内嵌<b class='flag-5'>AI</b><b class='flag-5'>芯片</b>,<b class='flag-5'>AI</b><b class='flag-5'>计算</b>性能暴增

    紫光展锐助力全球首款AI裸眼3D手机发布

    1.4亿台,展示了该技术巨大的市场潜力和增长空间。近日,全球首款AI裸眼3D手机——中兴远航3D重磅上市。凭借微米级3D光栅技术、Neovision
    的头像 发表于 07-15 16:00 635次阅读

    中兴通讯与中国移动发布全球首创AI裸眼3D新品,引领3D科技新浪潮

    在科技飞速发展的今天,裸眼3D技术以其独特的沉浸式体验,正逐渐成为科技领域的新宠。近日,全球领先的通讯科技企业中兴通讯携手中国移动,在备受瞩目的2024MWC上海展上,发布了两款全球首创的AI裸眼
    的头像 发表于 06-28 15:32 961次阅读

    银牛微电子:集3D视觉感知、AI及SLAM为一体的3D空间计算

    有限责任公司研发副总裁周凡在论坛上介绍了“集3D视觉感知、AI及SLAM为一体的3D空间计算芯片NU4500”。   合肥银牛微
    的头像 发表于 05-17 10:18 823次阅读
    银牛微<b class='flag-5'>电子</b>:集<b class='flag-5'>3D</b>视觉感知、<b class='flag-5'>AI</b>及SLAM为一体的<b class='flag-5'>3D</b>空间<b class='flag-5'>计算</b>芯

    NVIDIA生成式AI研究实现在1秒内生成3D形状

    NVIDIA 研究人员使 LATTE3D (一款最新文本转 3D 生成式 AI 模型)实现双倍加速
    的头像 发表于 03-27 10:28 464次阅读
    NVIDIA生成式<b class='flag-5'>AI</b>研究实现在1秒内生成<b class='flag-5'>3D</b>形状

    Stability AI推出全新Stable Video 3D模型

    近日,Stability AI 推出了全新的 Stable Video 3D 模型,该模型以其独特的功能吸引了众多关注。此模型具备从单张图像中生成多视图3D视频的能力,为视频制作领域带来了革命性的突破。
    的头像 发表于 03-22 10:30 783次阅读

    中兴努比亚发布全球首款5G+AI裸眼3D平板

    此平板采用Neovison 3D Anytime科技将2D画面即时转换为3D效果,增强影及音乐娱乐体验的真实感。较前代产品而言,新设备在分辨率、亮度和色相等
    的头像 发表于 02-27 14:51 654次阅读

    2.5D3D封装的差异和应用

    2.5D3D 半导体封装技术对于电子设备性能至关重要。这两种解决方案都不同程度地增强了性能、减小了尺寸并提高了能效。2.5D 封装有利于组合各种组件并减少占地面积。它适合高性能
    的头像 发表于 01-07 09:42 1773次阅读
    2.5<b class='flag-5'>D</b>和<b class='flag-5'>3D</b>封装的差异和应用

    一文了解3D视觉和2D视觉的区别

    一文了解3D视觉和2D视觉的区别 3D视觉和2D视觉是两种不同的视觉模式,其区别主要体现在立体感、深度感和逼真度上。本文将详细阐述这些区别,
    的头像 发表于 12-25 11:15 2868次阅读

    阿迪达斯与 Covision Media 使用 AI 和 NVIDIA RTX 创建逼真的 3D 内容

    Covision 的基于 AI3D 技术可帮助企业扫描数千种产品,为网站和移动应用创建逼真的 3D 图像、视频和 AR 体验。 将实体产品扫描成 3D 模型是一项十分耗时的工作。
    的头像 发表于 11-28 18:45 626次阅读
    阿迪达斯与 Covision Media 使用 <b class='flag-5'>AI</b> 和 NVIDIA RTX 创建逼真的 <b class='flag-5'>3D</b> 内容

    aikit 2023 3D与机械臂结合!

    引言 今天我们主要了解3D摄像头是如何跟机械臂应用相结合的。我们最近准备推出一款新的机械臂套装AI Kit 2023 3D,熟悉我们的老用户应该知道,我们之前的AI Kit 2023套
    的头像 发表于 11-28 10:38 950次阅读
    aikit 2023 <b class='flag-5'>3D</b>与机械臂结合!