360全景集成ADAS，汽车产业整合加速挑战不断

2016年是无人驾驶技术飞速发展的一年，360全景以及ADAS中的图像处理都取得了各自的成绩并逐渐走向融合。360全景的方案上加上ADAS，如LDWS车道保持警告系统，能够实时的侦测车辆周边的状况，从而避免交通意外的发生，减少生命和财产的损失，驾驶者可以更加享受驾驶的乐趣。360全景的应用已经在国内外某些车厂成为覆盖高中低端车型的标配，在基于360全景的系统中， ADAS相关的功能应用正不断的增加和提升。


 

瑞萨电子中国 应用技术中心 汽车电子部 资深工程师应毅辰

由于360全景的逐渐普及，多图像融合也加速了产业链的整合速度，巨头纷纷通过收购图像处理公司等方式来增强自身业务范围，缩短产品周期。但360全景需要将安装在车辆前后左右的四个摄像头的图像进行处理，拼接并且显示出来，这需要图像处理的各种算法来实现摄像头采集的画面进行无缝拼接，如何调试不同的摄像头参数让整个全景的画面显示达到一致的效果，移动中的车辆，360全景的画面会不会丢失等等问题都需要在360全景+ADAS图像算法技术融合来解决。

因此，对SoC芯片的图像处理能力和速度要求会越来越高，对半导体厂商也带来更多的商机。瑞萨电子R-Car产品系列在ADAS图像融合的应用中也推出各种产品和方案，尤其针对360全景，R-Car的产品可以支持4~8路的高清摄像头输入，为了让客户可以更快把产品开发出来，瑞萨电子也提供一系列360全景和ADAS应用的开发套件。

在360全景展现时，二维图像处理不到位会造成司机理解困难，因此逐渐向3D过渡；而要实现相关的ADAS功能，图像的清晰度很重要。由于30万像素的模拟摄像头采集回来的图像信息不够清晰，360全景的标清方案能够加上ADAS的功能并不多。用上百万像素摄像头的高清方案，可以实现2D和3D的360全景高清图像。瑞萨R-Car产品集成了专用的2D，3D的图像处理器，在ADAS方面有专用的图像纠正（IMR）和识别（IMP）应用的处理器，并且提供相关的软件库方便客户进行算法和应用的开发。

在芯片方面，随着多图像处理技术的发展，图像处理逐渐从专用芯片向SoC多芯片集成方向发展，瑞萨电子SoC产品R-Car系列已经集成各种图像处理器，如新一代的R-Car产品采用了16nm的工艺，R-Car H3带有8个ARM核，它已经被广泛用于ADAS相关的项目开发，产品具有高性能的2D/3D图型处理器，内置了摄像头变形矫正IMR处理器，以及专用于ADAS图像识别的IMP第5代处理器，可以支持最多8路摄像头输入和3路视频输出，还会满足功能安全ISO26262的ASIL B等级要求，产品具有性能高功耗低的优势。

在最近举办的慕尼黑电子展中，瑞萨电子也带来了基于其R-Car车载SoC与符合汽车ISO26262 ASIL-D功能安全标准的RH850 P1x芯片搭建的云端联合自动泊车系统。该系统通过网络连接到云端的实时停车管理系统以获取信息，并综合摄像头和传感器等信息，确认车辆周边环境，利用多核芯片进行实时处理，阻隔外部数据的威胁，实现安全的自动泊车，可很好应对大城市陌生地点停车的难题。该方案中还充分利用了R-Car H3 全景环视系统及Ethernet和CAN-FD车载网络新技术。

汽车产业链各环节均在积极备战无人驾驶技术，视觉提供给汽车的功能也越来越多，在小体积化的要求下，除360全景和ADAS集成外，其他图像处理也将汇集一处，瑞萨电子推出的R-Car产品具有驾驶舱（Cockpits）应用的概念，系统除360全景和ADAS集成外，虚拟图形仪表，导航多媒体信息娱乐也汇集在内。视觉是无人驾驶技术重要的一部分，行人，车辆，车道线和交通标志检测都是需要图像芯片和算法进行处理。芯片对越来越复杂的图像进行处理，压缩，解码和传输速度，算法实现的运行速度等等要求会越来越快，瑞萨电子将持续研发和推出R-Car产品来满足汽车无人驾驶技术的要求。