为了让车看懂道路,小鹏给AI造了个“原生大脑”,但仍有两大短板需要补齐

车东西(公众号:chedongxi) 作者 | 郭月 编辑 | 志豪
2025年11月5日,原生大脑小鹏集团董事长兼CEO何小鹏正式宣布公司全面向物理AI转型,为让并将2026年定义为“物理AI全面量产元年”。懂道但仍大短从这一战略官宣至今,有两历时约8个月(247天),板需补齐小鹏不仅加速产品迭代,原生大脑更持续披露其底层技术架构。为让
在小鹏的懂道但仍大短物理AI版图中,VLA(视觉语言动作模型)2.0被视为核心基座,有两它不仅支撑自动驾驶,板需补齐更是原生大脑未来人形机器人、飞行汽车等具身智能产品的为让通用底层能力。近期,懂道但仍大短小鹏在此基础上发布了X-Mind,有两旨在为自动驾驶赋予一个能“预见未来”的板需补齐大脑,解决了车端算力受限下难以清晰表达“思考过程”的痛点。X-Mind与X-World、X-Foresight共同构成了小鹏物理AI基座模型的研发谱系。
这究竟是一次技术革新,还是营销噱头?车东西将通过系列文章拆解小鹏VLA 2.0。本文为首篇,结合小鹏预测世界模型(Predictive World Model, PWM)团队发布的论文,深入剖析X-Mind的技术原理、实测表现及现存短板。
一、传统VLA的困境:直觉驾驶与“捷径学习”
小鹏团队在论文中指出,当前主流VLA模型存在本质缺陷:传统端到端VLA本质上是一套纯反应式映射系统。

▲小鹏发布论文《X-Mind:面向端到端自动驾驶、基于预测世界模型的高效视觉思维链》
简而言之,这类模型遵循“感知→动作”的直接映射逻辑:摄像头捕捉画面,模型直接输出转向或加减速指令。它缺乏主动思考操作后果的能力,没有对交通时序变化的显式推演环节。
这种机制的短板主要体现在两方面:
1. 缺失前瞻物理推理能力:驾驶策略仅基于瞬时观测,缺乏对环境动态演变的完整理解。
2. 易陷入“捷径学习”:模型倾向于记忆数据表层的“画面-动作”匹配关系,而非深入理解道路物理因果逻辑。
在简单场景下,这种映射尚可应付;但在长尾场景(如货车遮挡、雨天打滑)中,由于无法自主推导风险,决策极易失效。
业内早已意识到预判的重要性,并尝试将预测世界模型(PWM)整合进智驾系统,但主流路线均遭遇瓶颈:
* 级联式方案:将预判与规划拆分为独立模块。逻辑清晰但运算量巨大,推理延迟严重,难以满足车载实时性要求。
* 末端附加联合训练方案:将路况重建作为辅助任务叠加在网络末端。由于信号难以有效回传至大模型深层,模型仍易陷入捷径学习,无法建立真正的物理推理能力。
简言之,一条“跑不动”,一条“学不透”。X-Mind正是为了解决这一矛盾而生。
二、X-Mind的核心逻辑:内化“视觉思维链”,先“脑补”再驾驶
X-Mind的核心创新在于:不将PWM作为外部模块接入,而是将其内化为“视觉思维链”(Visual CoT),使其成为模型内部推理流程的一部分。

▲X-Mind的整体架构
X-Mind让VLA在生成驾驶动作前,执行显式的时空推演,确保规划路径充分考虑未来交通流变化,再基于此输出轨迹。
推演什么?推演多远?
论文给出的答案是:抽象草图 + 12帧。
* 内容:抽象草图(而非高清画面)。
* 范围:未来12帧。
为何选择“草图”而非“高清画面”?
小鹏官方实验显示,若输入原始高清图像,虽能小幅降低预测误差,但代价巨大:
* Token激增:新增3584个Token。
* 算力暴增:内存占用与计算压力剧增。
* 延迟严重:推理耗时是基础模型的22倍。
X-Mind采取轻量化策略,仅“脑补”一张包含关键信息的鸟瞰示意图。该草图保留以下核心要素:
* 物理实体:自车、周边动态障碍物(车辆/非机动车)、车道线、边界及路面轮廓。
* 状态信息:动态交通灯状态、导航意图、合规车速。

▲结构化思维草图的可视化
模型推演的不是未来的高清视频,而是一张随时间连续变化12帧的俯视草图序列,形成完整的未来场景演变逻辑。
三、为何是12帧?长时序推演实现误差最小化
预测时长直接影响驾驶安全性。小鹏团队通过三组对照实验验证了预测时长的选择:
1. 仅重建当前帧
2. 仅预测未来1帧
3. 预测连续12帧
评估指标:
* FID:生成草图与真实BEV草图的相似度(越低越好)。
* ADE:规划轨迹与最优轨迹的偏差(越低越好,代表驾驶越稳)。

▲时序预测目标消融实验
实验结论:
* 仅当前帧:FID最低(画面最清晰),但ADE最高(轨迹误差最大)。说明单纯识别当前画面无法学习动态变化,对预判无益。
* 仅未来1帧:画面清晰度微降,但ADE显著降低。即使只预判1帧,也能捕捉车流与时序信息,优于静态复刻。
* 连续12帧:画面轻微模糊,但ADE横向/纵向误差均为最低。
论文认为,连续12帧的推演强制模型学习多车交互、障碍物持续移动及长线导航约束。即便画面模糊,AI也能从中提炼出“变道”或“刹停”的动态逻辑,从而精准捕捉交通流演变趋势。
四、突破算力瓶颈:两大核心技术实现车载落地
在车端算力受限的背景下,X-Mind通过两项关键技术解决落地难题:
1. 超级压缩包:DC-AE深度压缩自编码器
连续12帧草图数据量依然庞大。X-Mind引入深度压缩自编码器(DC-AE),将12帧连续未来抽象草图压缩至96个Token。
* 功能:仅保留道路拓扑、交通灯状态、导航意图等核心语义先验。
* 效果:过滤无关纹理干扰,解决长上下文带来的计算瓶颈。
2. 单层直通引擎:递归块扩散机制(RBD)
传统去噪扩散模型需数十轮迭代采样,推理延迟极高,不适合车载实时场景。
X-Mind设计了递归块扩散机制(Recurrent Block Diffusion, RBD):
* 原理:将降噪流程嵌入驾驶大模型的每一层网络。
* 优势:仅需单次前向传播即可输出12帧完整的长时序推演画面。

▲递归块扩散机制整体架构
研发团队对比了三组方案:
1. 基础模型(Base)
2. 单步去噪扩散(Base+Sketch Single Step)
3. 递归块扩散RBD(Base+Sketch RBD)

▲不同架构范式下性能与推理效率对比
数据表现:
* 图像质量(FID):RBD(9.59)显著优于单步去噪(67.30)。
* 推理延迟:两者基本持平。

▲白天和夜间场景下RBD的未来空间推演结果
RBD机制成功打通了高精度时序推理与车载实时落地之间的壁垒,在保留高质量推演能力的同时,克服了传统扩散模型延迟过高的缺陷。
五、实战效果对比:X-Mind性能最优且轻量
论文对比了四种场景表征方案:
1. Base:无世界模型的传统VLA。
2. Base+Image:传统VLA叠加原始图像。
3. Base+3DGS:传统VLA叠加3D高斯溅射。
4. Base+Sketch:传统VLA叠加结构化BEV思维草图(即X-Mind方案)。

▲不同场景表征方案的性能与推理效率对比
结果分析:
* Base:轨迹误差最高,预判精度最差。
* Base+Image:误差小幅降低,但需新增3584个Token,内存与计算负担巨大。
* Base+3DGS:Token开销极高,规划精度提升有限。
* X-Mind (Base+Sketch):
* 精度最高:ADE横向/纵向轨迹预测误差全部最低。
* 效率最高:仅需96个额外Token。
* 延迟极低:推理耗时仅为传统VLA的1.1倍(仅增加10%运算延迟),完全满足车载实时要求。
六、现存短板:从“串行”到“并行”,从“监督”到“自监督”
尽管数据表现优异,X-Mind当前架构仍存在两大局限,这也是小鹏团队正在攻关的方向:
1. 推理模式:从“先想后做”到“边想边做”
- 现状:串行执行。先完成未来世界推演,再基于草图求解最优轨迹。
- 改进方向:研究路况草图与车辆控制动作的联合同步采样生成。让决策与“脑补”同步进行,进一步提升复杂场景下的响应速度。
2. 训练范式:从“监督学习”到“自监督学习”
- 现状:依赖人工标注生成结构化草图真值(GT)。标注成本高,成为模型持续扩容迭代的瓶颈。
- 改进方向:引入自监督表征学习范式,利用近乎无限的原始行车录像,大幅降低标注成本。旨在让模型习得更底层、更深刻的物理环境规律,强化端到端系统的认知推理能力。
一旦突破这两点,VLA的进化速度将呈指数级增长。
结语:X-Mind改变了什么?
从技术架构看,X-Mind的价值在于将预测世界模型内化而非外挂:
1. 思维链化:将“预判”转化为模型内部的视觉思维链,在输出动作前完成显式推演。
2. 极致压缩:用抽象草图替代高清画面,将12帧推演压缩至96个Token,使长时序预测成本降至车端可承受范围。
3. 单次传播:通过递归块扩散机制,在单次前向传播中完成推演,兼顾质量与实时性。
这篇论文提供了一条轻量化的可行路径:仅靠单次前向传播、仅增加10%推理延迟、新增96个Token,即可实现预测未来。
然而,论文未回答的问题同样关键:
* 该机制在泛化至未见场景时是否依然可靠?
* 自监督学习突破后,模型学到的是真实物理因果,还是更复杂的统计相关性?
* 在量产车极端工况下,这10%的延迟增量是否会成为隐患?
这些问题的答案,需要真实道路上的每一公里来验证。

(责任编辑:百科)
-
7月15日,网信中国公众号发布最新公告,披露了7款通过备案的手机端侧生成式人工智能服务信息。其中,苹果技术开发上海)有限公司的“Apple 智能”大模型已于2026年7月8日完成备案,明确适用于苹果手 ...[详细]
-
2026.07.15本文字数:2923,阅读时长大约5分钟作者 | 第一财经 黄思瑜封图 | AI生成随着长鑫科技发行价尘埃落定,其管理层、持股员工及外部股东的财富版图正式浮出水面。根据7月14日晚间
...[详细]
-
美加墨世界杯半决赛的焦点之战——阿根廷对阵英格兰,定于15日正式打响。赛前,阿根廷副总统维多利亚·比利亚鲁埃尔在社交媒体上公开发声,言辞激烈地称对手为“掠夺海岛的海盗”,并强调这绝非一场普通的竞技较量
...[详细]
-
随着转会窗口的开启,格林伍德在社交媒体上发布长文,正式向马赛俱乐部及全体球迷表达谢意,回顾了在法甲的这段难忘旅程。格林伍德在文中深情写道:“当我在马赛的这段旅程画上句号时,千言万语汇成一句:谢谢。能过
...[详细]
-
7月15日追剧日历,11部长剧和5部短剧更新,7部新剧待播或待定档
【今日追剧速览】今日共有 11部长剧和 5部短剧迎来更新,另有 7部新剧处于待播或待定档状态。想要第一时间掌握最新剧集动态?请持续关注本栏目~《种墨园》播出平台:央视一套 & 腾讯视频 &am
...[详细]
-
随着新能源消费主力军向年轻化倾斜,用户的选车逻辑正经历深刻变革。汽车已不再仅仅是代步工具,更是个人审美品味与生活方式的延伸。基于易车研究院2026年年轻购车用户消费洞察及D.Power年度车辆魅力调研
...[详细]
-
在世界杯半决赛中,英格兰队以1-2的比分遭阿根廷队逆转,遗憾无缘决赛。队长哈里·凯恩在赛后坦诚地表示,球队在取得领先后未能有效维持比赛势头,最终错失良机。战术反思与局势失控凯恩在赛后采访中坦言,这场失
...[详细]
-
海牛官方:图费格季奇右肩锁关节完全脱位,预计伤缺5-7周左右
北京时间7月15日,青岛海牛足球俱乐部发布最新伤情通报,确认球队新援图费格季奇在昨日比赛中遭遇右肩锁关节完全脱位,预计将缺席赛场5至7周。图费格季奇的加盟历程可谓“悲喜交加”。昨日上午,俱乐部刚刚官宣
...[详细]
-
孙鹏首次在镜头前哭了,承认狄莺没教育好儿子,每个家庭都有问题
7月14日,在《网红与善的距离》第六集“超时空快递”的录制现场,孙鹏担任评审嘉宾。面对媒体镜头,他罕见地首次公开谈及儿子孙安佐被刑拘一事,情绪失控,当场哽咽落泪。这一举动不仅让外界看到了这位父亲内心的
...[详细]
-
单部2.7亿!短剧榜单快被AI吃完了:《咱家剑宗团宠小师妹》《疯娘逆袭,穿越宠崽!》《垂钓三国,别人求生我享乐!》霸榜TOP3
数据不会撒谎:AI短剧正在全面接管流量高地据7月中旬云合数据显示,AI短剧已彻底告别“边缘试水”阶段,正式成为榜单的绝对主力:全网数据霸屏榜):在近期周榜TOP10中,AI短剧强势占据5席;而在日榜前
...[详细]
