商汤绝影“亮剑”慕尼黑车展，首秀智能座舱大模型产品体系

世界五大车展之一, 也是欧洲规模最大的国际性车展之一“IAA MOBILITY 2023”德国国际汽车及智慧出行博览会，在慕尼黑盛大开幕！

博览会上，商汤绝影基于以座舱大脑为核心的全新智能座舱架构，首次全方位展示了智能座舱大模型产品体系，将安全舒适、极简交互以及个性懂你的智能座舱体验带到全球消费者面前。IAA MOBILITY 2023商汤绝影展台（展位号：A2馆D30）商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚作为中国汽车供应链杰出代表，受邀参加IAA首次举办的中国媒体沟通会，同时还在车展期间带来《通用人工智能时代下的智能汽车》的主题演讲。

王晓刚表示：“商汤绝影自诞生起就蕴含着国际化的基因，在多年的创新与实践中逐步发展成为驾、舱、云三位一体的架构体系，如今走向全球恰逢其时。此次车展可以说是AGI时代一个令人兴奋的新起点，我们期待将长期沉淀的大模型技术能力和量产经验带给全球客户，让智能座舱变成暖心懂你的好管家，让智能驾驶变成安全可靠的老司机，共同开启人机共驾的新体验。”

自2016年与本田合作以来，7年来商汤绝影已与超过30家国内外新势力车企、传统车企和合资车企强强联合，累计前装定点数量已超3600万台。

▎大模型加持座舱大脑，打造“懂你”的管家式体验

传统智能座舱大多只能提供预设功能，决策和控制均基于规则，难以进行差异化的服务，也无法随着用户的使用而进化。

大模型强大的认知理解、逻辑思维能力配合绝影团队打造的专属记忆模块，可以将离散的单点功能串联在一起，把“懂你”的管家式体验带进现实。

在今年4月上海车展期间，商汤绝影首次展示了“大模型上车”的人性化体验。不到半年，商汤绝影完成了以座舱大脑为核心的架构升级，并将智能座舱大模型产品体系带到博览会现场。

商汤绝影智能座舱大模型产品体系以车端多模态感知和云端大模型服务作为基础，以车舱大脑作为核心，结合安全、娱乐、教育、效率等用户可感知场景设计，并通过数字人作为用户交互窗口，打造“更懂你、有思想、有逻辑”的车载管家。

比如：

• 健康问诊：利用车内的视觉健康检测技术，结合医疗垂域模型，快速处理车上应急情况；

• 旅游攻略：通过自然语言准确理解用户意图，进行旅游推荐和规划，并完成地图、酒店等服务的生态打通，让旅游更省心；

• 儿童模式：可为不同年龄段的孩子们提供有趣的故事伴读和互动问答，还能和孩子们共读古诗词、共创故事，引导和开发儿童想象力，让全家出游充满温馨氛围；

• AI说明书：“AI说明书”可借助大模型的长文本理解等能力，让用户只需通过自然语言与系统交流，就能方便获取车辆使用说明；

• 疲劳缓解：DMS系统感知到用户疲劳以后，大模型可以根据用户的使用习惯和当前环境推荐不同的系统操作来缓解，比如推荐音乐或者聊些用户感兴趣的话题；

• 新闻概要：系统可以自动搜索和总结用户感兴趣的新闻，在用户上车场景做快速的介绍；

• 角色切换：大模型可以模拟不同的用户角色与车内用户进行交流，或严肃或活泼，非常适合儿童的童趣对话；

• 隔空作画：结合座舱视觉感知系统捕捉手部位置，生成绘画草图，利用大模型能力根据草图直接生成符合用户意图的画作。

除了智能化场景的持续拓展，商汤绝影还在大模型的加持下，成功突破多种长尾场景和工程化难题：

• 与国内车企紧密合作，将各种遮挡、眼睛反光、头姿视线不一致、不同坐姿、小眼睛大角度等长尾问题的误报率降至万分之一，到达行业领先水平。

• 通过欧盟DDAW（驾驶员嗜睡和注意力警告）认证，且测试结果远高于DDAW的法规要求，并达到Euro NCAP（欧洲新车安全评鉴协会）法规标准，为合作车型在欧洲上市保驾护航。

商汤绝影智能座舱大模型产品体系将针对各类刚需场景做到日日更新，打造安全性、便利性和娱乐性兼具的“第三生活空间”。

▎全球之旅率先启程，助力蔚来、高合等车企进军国际市场作为具有国际化基因的智能汽车时代通用人工智能核心供应商，商汤绝影的欧洲之旅已先于本次博览会启程。

目前，商汤绝影的定点车型中有近20款海外车型，已助力蔚来、高合等国内知名汽车品牌进军国际市场。

蔚来在欧洲售卖的全系5款车型已全部搭载商汤绝影的多项AI技术。比如，商汤绝影Face ID技术可以在用户落座后，一步到位将各项个性化设置调整为用户的个人偏好。当感知到舱内乘员时，系统还会自动调节空调风向，营造更智能舒适的舱内环境。儿童关怀&儿童遗忘检测系统还可在感知到儿童意外留置车内时，及时反馈给NOMI语音助手，暖心守护家人安全。

高合HiPhi X豪华超跑SUV可通过B柱验证驾驶员身份，让用户无感上车，解放双手。 高合HiPhi Z豪华纯电超跑GT则同时搭载了DMS驾驶员感知系统与OMS乘员感知系统，不仅可及时预警驾驶员疲劳分心状态，还可智能感知乘员手势进行美颜拍照，一路守护驾乘安全的同时丰富车载娱乐体验。除了智能座舱，商汤绝影作为国内第一批率先激活L2++级别自动驾驶量产的服务商，也在大模型的加持下，实现了核心技术的再度突破。商汤联合团队提出的UniAD（Unified Autonomous Driving）自动驾驶通用算法框架获得2023年度CVPR最佳论文，首次将检测、跟踪、建图、预测及规划整合到一个基于 Transformer 的端到端网络框架下，实现多目标追踪准确率提升20%、车道线预测准确率提升30%、目标轨迹预测误差下降38%、规划误差下降28%。新算法的量产预计将于2023年四季度准备就绪，进一步提高绝影自动驾驶产品的行业竞争力。

今年上半年，商汤绝影成绩亮眼，量产业务同比增长5.7倍，量产交付数量达到39万台车，新增定点数量达500多万台，累计定点车型160多款。

德国是现代汽车的发祥地，商汤绝影将以IAA MOBILITY为舞台，推动大模型“脱虚向实”，与全球车企一同打开智能汽车的无尽想象空间，推动驾乘体验跃迁升级。

相关阅读，戳这里

《商汤绝影智能汽车事业群总裁王晓刚：通用人工智能下的智能汽车》

《商汤绝影与深圳前海管理局、巴士集团达成战略合作》

---

原文标题：商汤绝影“亮剑”慕尼黑车展，首秀智能座舱大模型产品体系

文章出处：【微信公众号：商汤科技SenseTime】欢迎添加关注！文章转载请注明出处。