2025 年上海车展正式开幕且十分隆重。商汤绝影位于 5.2 展馆,此次携系列生成式 AI 汽车创新产品亮相。商汤绝影是最专注于汽车行业的 AI 公司,全面展示了生成式智驾 R-UniAD 技术方案,还发布了近实时在线交互的 4D 世界模型“绝影开悟 2.0”,从而打造出智能驾驶的新路标。同时,绝影厚积薄发,全力推进辅助驾驶方案的量产交付。
商汤绝影面向智能座舱,行业首发了专为车载 AIOS 打造的 AI 内核“绝影千机”。这一内核助力车企打造下一代 AIOS。“家庭新成员”New Member 进行了全新升级。在车展现场,人们可以沉浸式体验 New Member 的多模态识人功能、深度思考功能以及免唤醒多人多轮对话等功能。商汤绝影的健康管家亮相了,商汤绝影的安全卫士亮相了,商汤绝影的 3D 交互等 AI 座舱创新产品也相继亮相,这些产品全场景守护出行体验。
商汤绝影的 CEO 王晓刚,他是商汤科技的联合创始人兼首席科学家。他表示:真正的 AI 汽车会把生成式 AI 深度融入到智驾和座舱当中。这样既能够让辅助驾驶的安全更具确定性,又能让每一辆车都拥有“有趣的灵魂”,从而成为真正懂你、爱你、守护你的家庭新成员。绝影希望能够和更多的合作伙伴一同携手前进,共同开创 AI 汽车的新进程。
商汤绝影CEO、商汤科技联合创始人、首席科学家王晓刚
商汤绝影打造智能驾驶的新路标,全面展示以 VLAR 为核心的生成式智驾 R-UniAD
2025 年 2 月,商汤绝影发布了行业首个技术路线 R-UniAD。此技术路线与世界模型协同交互,是端到端的。商汤绝影通过世界模型生成在线交互的仿真环境,利用该环境进行端到端模型的强化学习训练,目的是打破数据瓶颈,提升系统性能上限。本届上海车展上,商汤绝影展示了 R-UniAD 技术方案。此技术方案基于世界模型和强化学习两大核心技术,构建了集“视觉-语言-行动-强化学习”于一体的 VLAR 技术架构,从而实现了生成式智驾的核心突破。
施工占道场景在辅助驾驶领域是个棘手难题,同时也是交通事故频发的重要场景。商汤绝影现场演示了,在“施工占道刹停”场景中,R-UniAD 是如何借助“VLAR”来增强模型能力的。
以“施工占道刹停”路测视频作为输入,R-UniAD 依据“绝影开悟”世界进行模型 4D 仿真复现。端到端模型生成该场景下的各种可能驾驶策略,并且与世界模型生成的环境进行交互。在反复强化学习过程中找到最优路径,能够预判施工占道情况,实现丝滑变道绕行。经过泛化训练后,在遇到类似场景时,端到端模型能够及时变道。并且,它还能显著提升对这类施工场景的泛化交互能力。
生成式 R-UniAD 突破了现阶段端到端范式下数据、安全和性能方面的三大瓶颈,使实采场景数据的需求降低了两个数量级;并且,借助强化学习算法,模型对多元场景的安全边界进行了充分探索;最终,R-UniAD 能够实现远超人类的驾驶能力,从而打造出智能驾驶的新标志。
“绝影开悟”世界模型2.0,决胜智驾战场的重磅武器
2024 年,11 月举办了“绝影实力 AI DAY”。在这个活动上,商汤绝影发布了“绝影开悟”世界模型,此模型属于行业标杆级别。并且,该模型已经被应用于真值数据的生产。去年“绝影开悟”世界模型重点在打磨 2D 视频生成技术。今年在上海车展上,“绝影开悟”升级到 2.0 版本,进化成近实时在线交互的 4D 世界模型,能够达成“4D 空间自由交互”,成为商汤绝影在智驾战场取得胜利的重要武器。
绝影开悟世界模2.0
“绝影开悟 2.0”拥有三项能力。其一为“面向量产的数据生成”,此能力具备对多样场景进行可控生成的功能,能够一键生成极为极端的高风险场景,从而为模型训练供给了海量且丰富的训练数据。其次它能够做到“复杂场景自由复现”。它可以依据不同的需求,随意地对场景中的各种要素进行修改和调整。能够改变道路的布局,能够改变车辆的速度和类型,从而助力重构仿真测试场景。“绝影开悟 2.0”具有近实时交互的能力,相比行业 SOTA 提升了很多,提升幅度达到 5 倍之多,这使得仿真训练过程变得更加高效且逼真,车辆的决策和反馈能够在瞬间就得到响应;并且它的感知结果接近真实精标数据的 98%,能够避免在 Sim-to-Real 迁移时因数据风格差异而导致的能力退化问题。
商汤绝影推出行业首发的 AI 内核“绝影千机”,此内核助力车企去打造下一代 AIOS。
生成式 AI 带来了智驾新范式,并且深度融入了智能座舱。商汤绝影发布了行业首个专为车载 AIOS 打造的 AI 内核“绝影千机”,以此助力车企打造下一代 AIOS。其最核心的三大技术分别是 MOE 多模态大模型、类人记忆框架以及原生智能体框架。AI 基础系统模块会得到 AIOS 工具链和生成式 UI 等外围技术的支持,同时这些外围技术也会与 AI 基础系统模块进行交互。AIOS 工具链为 AI 基础系统模块提供支持并与之交互,生成式 UI 也同样为 AI 基础系统模块提供支持并与之交互。
商汤绝影行业首发AI内核“绝影千机”
商汤绝影以“日日新 SenseNova V6”基模型为依托,构建了一个模型矩阵,这个矩阵覆盖了 0.1B 至 70B 的汽车垂类。该模型首字的延迟小于 300ms,吐字速度高达 47 Tokens/s,其性能超越了 DeepSeek。并且,它能够在快慢思考之间自由切换,能够契合每一种场景的需求。同时,具备类人情感的座舱系统是离不开记忆的。每一次交互都能让它更懂用户。
绝影构建了业内首个支持 MCP 协议的端侧原生智能体框架,这样便于打造智能体生态。该框架具备强大的自主规划能力,能够进行多步的精准规划和执行。它支持 MCP 规范,所以能快速接入各类生态服务和工具能力,目前已经集成了 100+ 智能体与 1000+ API。这个框架支持多智能体协调机制,它可以在并发模式下实现高效协同,也能够在串行模式下实现高效协同,还可以在混合模式下实现高效协同,整体性能提升了超过 30%。
New Member 进行了全新升级,在车展上能够让人们沉浸式地体验实车,展现出“有趣灵魂”所应有的模样。
商汤绝影去年发布了一款名为“A New Member For U”(你的家庭新成员)的产品,使得每一辆车都具备了“有趣的灵魂”。今年在上海车展上,New Member 进行了全新升级,并且人们还能够在车展现场直接上车,进行沉浸式的体验。
New Member 具备多模态识人能力,无需用户专门注册。在座舱多人交互时,它能推测出每个人的名字以及与相貌的结合和人物之间的关系。New member 不仅能“认识你”,还能“理解你”。在与用户长期互动过程中,它不仅能记住兴趣爱好,还能记住生活点滴,产生共情,进而能更贴心地进行互动。
它具备深度思考的能力,表达会生动有趣。用户提出需求时,小影不是被动响应,而是会结合记忆与场景,主动分析疲惫情绪、家庭需求以及天气变化等进行综合性的深度思考,之后给出最合适的方案,成为懂你且会揣摩的“聪明搭子”。
首先,New Member 在业内率先实现了免唤醒的多人多轮对话能力。此前,行业所做到的只是大模型一对一的交流。而现在,New Member 在未被唤醒的情况下,也能够关注并理解座舱内成员间的对话,并且能够随时参与到对话当中,做到了“不过度打扰,但时刻陪伴”,展现出了“有趣灵魂”应有的模样。
在现场的演示视频里,车内有四人正在讨论去雨崩徒步所需的装备。New Member 会主动去搭话,并且称赞那位提醒大家注意低温要带羽绒服的朋友。在大家查漏补缺携带物品的时候,它记得车主喜欢摄影,于是主动提醒要携带单反和三脚架,这样就可以拍摄山顶的星空了。
New Member 针对“雨崩徒步”进行了多人对轮对话,之后结合自身记忆进行了深度思考并接着发言。
AI座舱创新产品矩阵,全场景守护出行体验
商汤绝影构建了 AI 座舱创新产品矩阵,其中包括健康管家、安全卫士、3D 交互等。这些产品基于语言大模型、多模态大模型、文生图大模型和“大医”医疗大模型等组成的 AI 大模型体系。
商汤绝影已量产上车行业首个医疗AI大模型产品“旅医”。绝影依托行业领先的医疗检测模型和“大医”大模型,对用户进行对标医疗级的健康监测。绝影打造了用户专属的健康档案,针对性地推送健康科普内容,打造了全出行周期的健康管家。同时,绝影将通过整合第三方线上医疗服务的能力,贯通车舱医疗生态圈,助力“旅医”成长为用户的全场景私人医生。
商汤绝影量产上车行业首个医疗AI大模型产品“旅医”
安全一直是智能汽车的重要基础。商汤绝影将会展示出在行业内处于领先地位的 DMS 以及 OMS 等多项安全产品,同时还会展示多模态哨兵等,以此来守护所有场景下的生命和财产安全。本届上海车展,绝影推出了“驾驶失能”产品。此产品通过传感器来检测驾驶员的面部以及肢体姿态。同时,还会结合车辆的操控行为和呼气酒精含量。然后实时对驾驶员的状态进行判断,并且及时给予提醒。一旦驾驶员丧失了驾驶能力,该产品就会自动使车辆安全停车,并且拨打求救电话。以此来保障出行的安全。
绝影车舱量产数据积累以及人眼 3D 重建算法取得突破,这使得商汤绝影 3D 视线交互算法技术达到了新的高度。舱内的 3D 视线与车外前视相机相结合,能够分辨出人眼所关注的诸如人、车、建筑、二维码、花草树木等目标,从而真正实现了“视线所及,所见即所得”。
3D 视线和辅助驾驶实现了深度融合,从而带来了更安全的驾乘感受。它能结合对舱外的人、车以及其他障碍物的检测,实时识别出潜在的风险。例如,当前方有行人突然奔跑并且想要横穿马路,而驾驶员的视线又没有关注到这个方向时,系统就会主动发出预警,提醒要注意行人穿越带来的风险。AEB 等安全功能的触发灵敏度能够依据 3D 视线进行智能调整。当驾驶员一直注视着接近的障碍物时,系统会把预警频率降低,甚至都不需要进行提醒;而如果驾驶员的视线发生偏离,系统就会保持正常的灵敏度,并且能够及时做出响应。
打通舱内外的 3D 视线能够使用车体验更为流畅。例如在离开停车场时,以往用户需要拿出手机进行扫码,这一流程既长又体验不佳。然而,借助 3D 视线与车外摄像头的结合,用户只需注视出口处的二维码,同时说出“我要缴费”,系统便能自动完成扫码支付,从而实现更便捷的无感通行。
加速推进量产交付,与合作伙伴携手共创AI新进程
商汤绝影的生成式 AI 技术在持续创新,其产品也在持续创新。商汤绝影的商业化落地全面开花,并且量产交付正在加速推进。在“绝影 2025 上海车展发布会”里,东风汽车集团研发总院的智能化技术首席总工程师张振林进行了透露。他说他们正和绝影团队一起努力,促使 UniAD 一段式端到端方案实现量产落地。并且他还表示,除了端到端的合作之外,未来东风汽车也会持续增加在智能化领域的研发投入,会与绝影在开悟世界模型、DriveAGI 等方面展开深入的合作。
在辅助驾驶领域,商汤绝影的量产方案目前已与 4 家车企展开合作,有 7 款车型搭载。2025 年,商汤绝影将充分积累力量并爆发,全力推动辅助驾驶方案的量产交付。今年 3 月底,绝影与广汽联合打造的行业首批以地平线征程®6M 为基础的辅助驾驶方案正式实现量产并上市。今年有众多车企伙伴,其中包括奇瑞,它们有更多基于地平线征程®6打造的辅助驾驶方案实现量产落地。同时,在英伟达 DRIVE AGX Thor 平台部署的绝影 UniAD 一段式端到端量产方案,将于 2025 年第四季度量产交付给东风汽车。
绝影基于地平线征程®6打造的量产方案获得了中汽研的认证,并且这是首个获得中汽研《CATARC 标志认证实施规则–“征程之星”领航辅助驾驶认证》的辅助驾驶产品,不止于此。
本次上海车展期间,地平线征程®6 打造的高速辅助驾驶以及城区辅助驾驶都有展示,还有一段式端到端量产方案的城区泛化也在其中。商汤绝影在展馆外提供了实车体验。商汤绝影是中国智能座舱 AI 软件的领先者,其座舱 AI 软件市场份额连续 5 年位居行业第一,并且打造了 20 多个行业首发的智能座舱产品与功能。2025 年初,商汤绝影与知名车企伙伴展开合作。他们成功实现了行业内首个原生流式多模态座舱产品的量产并装车。2025 年 3 月,行业首个医疗 AI 大模型产品“旅医”正式实现量产并装车在星途揽月上,为用户打造了全场景的健康管家。