商汤绝影，用大模型为智能座舱带来“蝶变”_风闻

出品 | 探客出行

作者 | 石磊

编辑 | 方芳

美编 | 倩倩

审核 | 颂文

汽车行业内有个论断——智能座舱将成为下一代车企的核心竞争力。

为什么这么说呢？之前的座舱虽然也有交互，但是带来的驾乘体验，都是单点的。而真正的智能座舱，是一个知你懂你的智能系统，让车辆使用场景生活化、丰富化。

有业内人士做了这样一个比喻，智能座舱成为市场主流，不是从黑白电视演变到了彩色电视，而是从黑白电视进化到了智能电视，未来座舱就是你除了家、办公室之外的“第三生活空间”。

例如你过年要开800公里回老家，它能帮你出行规划、陪孩子唱歌、智能推送路况和周边值得一玩的风景区、检测你是否疲劳、呵护你的安全等等，这时候你不需要再点屏幕，说许多口令，通过一个口令输出，这一路你的座舱就能很懂你。

最近，在慕尼黑举办的世界五大车展之一“IAA MOBILITY 2023”德国国际汽车及智慧出行博览会上，智能汽车时代的通用人工智能核心供应商——商汤绝影就首次全方位地对全球展示了智能座舱大模型产品体系，把智能座舱4.0时代的体验和商汤绝影打造的“第三生活空间”带到全球消费者面前。

1、绝影，给座舱配备一个“懂你”的管家智能座舱的变革之下，购车人非常关注驾驶场景的丰富度与拓展性。就像是我们曾经拿的是诺基亚，有个拍照功能、玩个贪吃蛇就行。但现在，智能座舱已经包含了休闲娱乐、办公场景以及智能座舱和智能驾驶相融合的场景，给用户带来出行之外的价值以及协同性的交互。这是为汽车行业带来了跃迁时刻。所有的用户都在慢慢接受，驾驶期间车内外部整体打通生活场景，“车”开始和手机、家具、办公设施、城市能源系统充分融合。

今年4月上海车展期间，商汤已经将商量大语言模型和商汤秒画文生图模型与智能座舱场景结合，首次展示了“大模型上车”的魅力，实现了不少“第三生活空间”的交互需求。不到半年时间，商汤绝影便以高效的速度，进一步完成了以“座舱大脑”为核心的架构升级。

绝影打造的“座舱大脑”具体分为四个层次：

底层支撑分为车端、云端，车端包括了摄像头和各种感知硬件，它们能够全面感知包括娱乐在内的各种车内状态，也包括各种长短记忆模块；在云端，则依托强大的AIDC基础设施以及日日新大模型的加持。

在系统层，基于车舱大脑充分的信息融合，发挥它决策和推理的能力，协同调动车内各种资源，去控制车内各个部分及APP，产生输出强大丰富的内容，能够生成车内智能化的操作系统。

最后在应用层，绝影从安全、娱乐、教育、效率等4个场景出发，打造出10+项应用，解决了目前座舱中单线交互、交互不智能、交互时驾驶时安全保障程度低的痛点，还可以带来“驾驶的爽感”。

我们来看看几个绝影在座舱中的真实应用场景，你就知道为什么商汤绝影会在德国慕尼黑车展和上海车展上都被围观了：

当一个妈妈独自带孩子出门，路上没人陪孩子时，孩子可以和商汤绝影的儿童模式展开互动，绝影不仅能为不同年龄段的孩子们提供有趣的故事伴读和互动问答，还能和孩子们共读古诗词、共创故事，这是绝影车舱开发的“儿童伴读”功能。

此外，绝影也可以利用车内的视觉健康检测技术，结合医疗垂域模型，快速处理车上应急情况，这是健康问诊功能；另外，绝影也能通过自然语言准确理解用户意图，进行旅游推荐和规划，并完成地图、酒店等服务的生态打通，这是“旅游攻略”功能。

车评人对「探客出行」表示，他认为会被同行广泛参考的功能，是绝影的“AI说明书”，每辆车出厂时都会配备一本厚厚的说明书，但能认真阅读的车主并不多，真正出了故障有时根据说明书调整，车主可能需要大几百。在绝影迭代中，你会拥有一个维修AI助手，任何关于“车”不会的问题都可以问绝影，就算需要维修，绝影的预处理也做到了省钱也省心。

另外，对汽车来说，最重要的就是安全，绝影的疲劳缓解DMS系统，在感知到用户疲劳以后，大模型能根据用户的使用习惯和当前环境推荐不同的系统操作来缓解，比如推荐音乐或者聊些用户感兴趣的话题等让你缓解疲劳。而且商汤绝影与国内车企们展开了紧密合作，把各种遮挡、眼睛反光、头姿视线不一致、不同坐姿、小眼睛、大角度等长尾问题的误报率大幅降低，现在客诉率降至万分之一，达到行业领先水平。

可以这样理解，绝影上车，就是让智能座舱“拟人化”，先通过“大脑”多模态感知能力进行判断，同时还有“眼睛、耳朵、嘴巴”，替用户看安全、听需求、讲交互。

这些场景的应用，恰恰说明有了商汤绝影在人、车、机之间，把曾经的“驾驶关系”发展到“陪伴关系”，在我们的座舱中配备了一个“懂你”的管家。

**2、座舱的跃迁时刻，如何被造就？**有业内人士表示，上一次汽车行业的弯道超车是新能源，下一次的革新便是智能汽车时代，为了吃到时代的糖，在慕尼黑车展上大家除了围观绝影的能力外，行业内也在讨论，座舱领域的跃迁时刻，究竟是如何被商汤造就的？

**首先是日日新大模型体系+大装置，让绝影有了底层支持。**座舱智能交互是千人千时千面的，要求车端必须有大算力支撑，仅靠调用云端算力较难满足实际需求。

如果把之前的单线交互，看作是一件件独立存在的工具，那么“大模型+大算力”就像是“工具箱”，实现了功能的聚合价值，能基于一个大模型解决各类复杂的场景问题。这也是绝影可以在嘈杂的环境下，解决复杂座舱需求的原因。

尤其是一些长尾场景是很容易被人忽略的环节，例如一个6座车上有孩子、有狗、有老人、还说方言，驾驶员带着一大家子出来旅游没休息好还分心，这种情况虽然发生的频次低，以前缺少大数据支撑去做训练，可一旦出现问题产生的后果非常严重且难以解决，而基于“大模型+大算力”，绝影可以分辨声音、读唇语、看手势、看驾驶员的表情等等来保驾护航。

**其次，在智能座舱上，绝影具有更加强大的推理、决策、规划能力。**真正意义上的“智能座舱”应该是包含感知、思考、行动在内的一个完整的自动化系统。绝影把以往离散的、单点的功能串联起来，并打破原有的基于规则的限制，具备强大的逻辑推理能力。在智能驾驶上，则可以实现端到端一体化，让智能驾驶体验更像“老司机”。特别是当现在核心功能的差距不明显时，谁能够去解决去思考、推理，谁的智能驾舱更聪明，谁就能获得消费者“真金白银的投票”。

最重要的是商汤的技术底蕴、技术优势。技术说起来太生涩，我们举个例子，在近期的CVPR2023（世界最高级别的计算机视觉领域会议）中，商汤及联合实验室首个提出感知决策一体化的自动驾驶通用大模型UniAD，斩获最佳论文奖。

（图 / 商汤及联合实验室获CVPR 2023最佳论文奖）

要知道本届CVPR论文投稿总量达9155篇，最终共有2369篇论文被接收。最佳论文候选为12篇，接收率仅为0.13%，比清北的平均录取率都低不少，而最佳论文仅两篇，可谓优中选最优。这也是近十年来，CVPR会议上第一篇以中国机构作为第一单位的最佳论文，足以说明商汤是领域内的“优等生”。

有意思的是，在今年CVPR上，特斯拉也披露了自己的大模型和大计算相关进展，可见商汤绝影不仅在技术上是优等生，还是行业的“前瞻者”。

**3、预装定点3600万台汽车，绝影凭什么？**对于智能汽车行业来说，量产交付也是衡量产品技术是否有价值的重要标准，早在2022年，搭载商汤绝影技术的车型便已在欧洲上市。

在落地上，今年上半年，商汤绝影量产业务实现5.7倍同比增长，量产交付数量达到39万台车，新增定点数量达500多万台，累计定点车型160多款。现在国内的奇瑞捷途X50、比亚迪汉/唐、广汽传祺影速/影酷/GS8换代/M8/E9、长安逸达、极氪X、东风猛士917等车型都有商汤绝影的身影。

而根据国内知名调研机构最新发布的2023年第一季度中国市场乘用车智能座舱软件供应商前装市场份额榜单，绝影排名第一。

另外，商汤绝影的定点车型中也有近20款海外车型，公开资料显示，绝影正在助力蔚来、高合等国内一流汽车品牌出海。

目前，蔚来在欧洲售卖的全系5款车型已全部搭载商汤绝影的多项AI技术。商汤绝影Face ID技术可以在用户落座后，一步到位将各项个性化设置调整为用户的个人偏好。当感知到舱内乘员时，系统还会自动调节空调风向，营造更智能舒适的舱内环境等等。

商汤绝影与高合汽车的合作，同样将智能温馨的体验带给广大欧洲用户。高合HiPhi X豪华超跑SUV可通过B柱验证驾驶员身份，让用户无感上车，解放双手；高合HiPhi Z豪华纯电超跑GT则同时搭载了DMS驾驶员感知系统与OMS乘员感知系统，不仅可及时预警驾驶员疲劳分心状态，还可智能感知乘员手势进行美颜拍照。

另有公开资料显示，商汤绝影还通过了欧盟DDAW（驾驶员嗜睡和注意力警告）认证，且测试结果远高于DDAW的法规要求，并达到EuroNCAP（欧洲新车安全评鉴协会）高分评价标准。与绝影合作的车型在欧洲上市，也不用费心费力选欧洲供应商了，选择商汤绝影即可。

其实，由座舱开始，绝影主攻的是“舱、驾、云”三位一体的解决方案。在这次慕尼黑车展上，商汤首席科学家、绝影智能汽车事业群总裁王晓刚说：“商汤绝影自诞生起就蕴含着国际化的基因，在多年的创新与实践中逐步发展成为驾、舱、云三位一体的架构体系，如今走向全球恰逢其时。此次车展可以说是AGI时代一个新起点，我们期待将长期沉淀的大模型技术能力和量产经验带给全球客户。”

之前，市场声音都说，在大模型时代，商汤是一家被严重低估的公司。那么在智能驾驶时代商汤的汽车业务，也是被低估的业务。毕竟对岸的小马哥已经斩钉截铁地表示了，未来特斯拉将零利润售车，其利润将全部来源于基于汽车的软件服务。

作为智能汽车时代通用人工智能核心供应商的商汤绝影，正在把大模型落地在数千万的汽车上，它也正处于商业效应大规模爆发的黎明。