0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于自动驾驶视觉芯片的DNN之争

高工智能汽车 来源:cg 2019-02-05 10:16 次阅读

近日,日本科技巨头东芝公司宣布开发了一款新的硬件平台,采用了深度神经网络(DNN)技术,用于改进先进的驾驶员辅助系统(ADAS)的图像处理。

该公司将把DNN硬件与传统的图像处理技术结合起来,从2019年9月开始,这款名为Visconti 5图像识别处理器的样品将出货。

东芝的DNN技术使用了一种模拟人类大脑神经网络的算法,官方宣称其识别处理将与人类大脑一样准确,甚至更好。该算法将允许系统识别不同的道路交通状况和各种障碍和道路标记,从各个方向和接近实时处理。

深度学习的实质,是通过构建具有很多隐层的机器学习模型和海量的训练数据,来学习更有用的特征,从而最终提升分类或预测的准确性。

作为机器学习的一个细分领域,其动机在于建立、模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据,例如图像,声音和文本。

与基于传统机器学习的图像识别相比,DNN在采集更多信息的同时,能够对更大范围的目标提供更准确的检测和识别。

特斯拉为例,第一代基于Mobileye的芯片,就是首个使用了DNN技术算法的案例。不过当时,ADAS和半自动驾驶的主要部分是由Mobileye的芯片和算法处理的。

上图所示的过程是特斯拉当时自动驾驶系统工作原理的高级图。其中包括一些算法函数,如运动分割、自我运动、摄像机求解等,但真正有趣的部分是基于DNN的函数,涉及到可行驶区域空间像素标记、全局路径规划、通用对象检测和信号检测。

在Mobileye的基础之上,特斯拉对道路上的车辆进行了三维建模,通过DNN进行不同侧面、前后两侧的训练,直到能够检测到合理的精度,从而构建出相同的三维模型。

不过有消息称,当时特斯拉很多基于DNN的功能都处于休眠状态,直到特斯拉认为它们可以启动为止。从采用第二代计算平台英伟达到如今特斯拉宣布自研芯片即将投产,背后是芯片处理能力、DNN算法之间的协同。

众所周知,自动驾驶汽车对芯片计算能力的要求比传统早期汽车芯片提高了100倍。这包括需要处理来自汽车周围多个摄像头、雷达和激光雷达传感器的输入,分析数据,并使用这些数据做出驾驶决策。

东芝在声明中指出,“这种趋势将增加对更先进和更有能力的系统的需求。”例如,欧盟支持的安全标准,2020年版的欧洲新车评估计划(Euro NCAP)增加了避免交叉路口碰撞的测试。深度学习被用来解决许多传统编程方法无法解决的复杂问题。

马斯克透露特斯拉自研AI芯片的筹备已有两三年时间,通过自行设计芯片,公司能够专注于自己的需求,进而保证算法开发和落地效率。

特斯拉正在研发的名为“Hardware 3”硬件版本的核心就是这颗芯片,将用于Model S、Model X以及Model 3,性能将大幅超越目前其采用的英伟达芯片。

目前,在高等级自动驾驶系统方面,深度学习为图像中的目标识别提供了一种不错的解决方案。但背后需要芯片的支持。

芯片制造商英伟达(Nvidia)去年10月发布了一份有关自动驾驶芯片计算能力的报告。一辆装有10个高分辨率摄像头的汽车每秒产生2 Gigapixels的数据,每秒处理这些数据需要250万亿次操作。

三年前,东芝与日本汽车零部件供应商Denso合作,共同开发了一种名为深度神经网络专利(DNN - IP)的人工智能技术,以帮助开发ADAS技术。

近年来,不断有新的AI视觉芯片公司涌现,就是看到了图像传感器和摄像头将在自动驾驶汽车的发展中发挥关键作用。

东芝目前已经提供了TMPV75和TMPV76系列的图像识别处理器,它们集成了RISC类型的媒体处理引擎(MPEs),以提高图像数据处理性能。该处理器能够实时处理1到4台摄像机的输入图像,并允许最多连接8台摄像机。

ARM等其他芯片制造巨头也在加大进军自动驾驶汽车领域。今年9月,ARM推出了Cortex-A76AE (Automotive Enhanced),这是ARM专门为自动驾驶汽车设计的CPU架构。

对于Cortex-A76AE, ARM对A76平台进行了显著的重新设计,增加了一种名为Split-Lock的功能,从而增加了安全性。简单地说,split - lock允许两个CPU内核以锁定步进(都执行相同的任务)或分割模式(执行不同的任务和应用程序)进行操作。

视觉处理芯片是自动驾驶芯片阵列中重要的一环,由于可以同雷达等传感器形成互补,基于深度学习的视觉识别处理,在道路、交通标志、障碍物、行人等识别中重要性愈发凸显。

而在刚刚开幕的2019年CES上,大陆集团和采埃孚就宣布了基于NVIDIA DRIVE的Level 2+自动驾驶解决方案,将于2020年开始生产。

作为一个L2+级自动驾驶解决方案,集成了高性能NVIDIA Xavier™系统级芯片(SoC)处理器和最新的NVIDIA驱动软件来处理深层神经网络(款)感知以及完成环视相机传感器、座舱内视觉数据的处理。

因此各大厂商也都在争相占领高地,NVIDIA和英特尔旗下的Mobileye目前是市场翘楚,占据了较大的份额,二者在汽车芯片领域,都是新生。其它传统汽车芯片厂商,正在迎头赶上。

不过,自动驾驶视觉处理芯片的赛跑,才刚刚开始,领头羊、传统势力、新入局者各自的节奏都不一样的,但市场一致——我们目力所及的汽车,ADAS还远未普及。

谁能掌握真正的话语权,在于占领足够大的市场,而这些故事,将会在接下来的5-10年完成。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 自动驾驶
    +关注

    关注

    783

    文章

    13701

    浏览量

    166196
  • dnn
    dnn
    +关注

    关注

    0

    文章

    59

    浏览量

    9044

原文标题:自动驾驶视觉芯片的DNN之争 | GGAI视角

文章出处:【微信号:ilove-ev,微信公众号:高工智能汽车】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    自动驾驶汽车安全吗?

    随着未来汽车变得更加互联,汽车逐渐变得更加依赖技术,并且逐渐变得更加自动化——最终实现自动驾驶,了解自动驾驶汽车的安全问题变得非常重要,这样你才能回答“自动驾驶汽车安全吗”和“
    的头像 发表于 10-29 13:42 454次阅读
    <b class='flag-5'>自动驾驶</b>汽车安全吗?

    自动驾驶HiL测试方案案例分析--ADS HiL测试系统#ADAS #自动驾驶 #VTHiL

    自动驾驶
    北汇信息POLELINK
    发布于 :2024年10月22日 15:20:19

    自动驾驶技术的典型应用 自动驾驶技术涉及到哪些技术

    自动驾驶技术的典型应用 自动驾驶技术是一种依赖计算机、无人驾驶设备以及各种传感器,实现汽车自主行驶的技术。它通过使用人工智能、视觉计算、雷达、监控装置和全球定位系统等技术,使
    的头像 发表于 10-18 17:31 546次阅读

    自动驾驶HiL测试方案介绍#ADAS #自动驾驶 #VTHiL

    自动驾驶
    北汇信息POLELINK
    发布于 :2024年10月12日 18:02:07

    激光雷达与纯视觉方案,哪个才是自动驾驶最优选?

    主要分为两大类:激光雷达与视觉感知。激光雷达因其能够提供精确的距离和形状信息,在自动驾驶技术早期的开发中被广泛应用。然而,随着计算机视觉技术的飞速进步,基于摄像头的纯视觉感知方案逐渐崭
    的头像 发表于 09-29 10:47 406次阅读

    FPGA在自动驾驶领域有哪些优势?

    FPGA(Field-Programmable Gate Array,现场可编程门阵列)在自动驾驶领域具有显著的优势,这些优势使得FPGA成为自动驾驶技术中不可或缺的一部分。以下是FPGA在自动驾驶
    发表于 07-29 17:11

    FPGA在自动驾驶领域有哪些应用?

    控制。在视觉算法方面,FPGA利用自身并行处理和高速存储器的特点,极大地加快了算法的执行速度,提高了运算效率。 五、未来发展趋势随着自动驾驶技术的不断发展,FPGA在自动驾驶领域的应用将会更加广泛
    发表于 07-29 17:09

    自动驾驶雷达15W高导热绝缘片

    历史不成熟的经验表明:技术路线的收敛,往往是新技术大规模落地的标志。按照这种经验审视自动驾驶技术,会遗憾地得出自动驾驶落地还遥遥无期的悲观结论,毕竟自动驾驶一是不缺自信、二不缺技术路线之争
    的头像 发表于 07-21 08:11 340次阅读
    <b class='flag-5'>自动驾驶</b>雷达15W高导热绝缘片

    华为小米自动驾驶Occupancy Network对决

    2023年6月计算机视觉学术圈CVPR举办两场自动驾驶研讨会,一个是端到端自动驾驶研讨会 (End-to-End Autonomous Driving Workshop),另一个是视觉
    的头像 发表于 04-28 14:35 978次阅读
    华为小米<b class='flag-5'>自动驾驶</b>Occupancy Network对决

    自动驾驶激光雷达及非硅15W高导热绝缘氮化硼材料介绍

    来源|十一号组织历史不成熟的经验表明:技术路线的收敛,往往是新技术大规模落地的标志。按照这种经验审视自动驾驶技术,会遗憾地得出自动驾驶落地还遥遥无期的悲观结论,毕竟自动驾驶一是不缺自信、二不缺技术
    的头像 发表于 04-24 10:00 520次阅读
    <b class='flag-5'>自动驾驶</b>激光雷达及非硅15W高导热绝缘氮化硼材料介绍

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器融合方案就好像一双比人眼更敏锐的眼睛,可以为自动驾驶系统提供更丰富更精准的视觉语言——
    发表于 04-11 10:26

    大众汽车和Mobileye加强自动驾驶合作

    美国智能驾驶芯片巨头Mobileye与大众汽车集团近日宣布,在自动驾驶领域深化合作,共同推动全新自动驾驶功能在大众旗下量产车型的应用。Mobileye依托其领先的Mobileye
    的头像 发表于 03-22 11:46 886次阅读

    高通自动驾驶靠软件开发革新力压英伟达自动驾驶芯片

    抛开价格不谈,英伟达自动驾驶芯片毫无疑问是最强的,设计范围在2019年底确定的Orin至今仍是量产最强的自动驾驶芯片,但除了奔驰外的欧美大厂更倾向于选择高通平台
    的头像 发表于 02-20 13:50 1451次阅读
    高通<b class='flag-5'>自动驾驶</b>靠软件开发革新力压英伟达<b class='flag-5'>自动驾驶</b><b class='flag-5'>芯片</b>

    华为自动驾驶技术怎么样?

    强大,主要体现在以下几个方面: 强大的研发团队:华为拥有一支专业的研发团队,专注于自动驾驶技术的研发和创新。这支团队汇聚了众多顶尖的技术专家和工程师,具备丰富的研发经验和技术积累。 领先的技术储备:华为在通信、芯片、人
    的头像 发表于 02-02 16:58 1681次阅读

    LabVIEW开发自动驾驶的双目测距系统

    LabVIEW开发自动驾驶的双目测距系统 随着车辆驾驶技术的不断发展,自动驾驶技术正日益成为现实。从L2级别的辅助驾驶技术到L3级别的受条件约束的
    发表于 12-19 18:02