未经许可,不得转载或者引用。
投资要点
投资要点:
模仿学习的能力上限在数字AI与物理AI之间存在结构性分野。大语言模型预训练本质上是对互联网级人类知识的规模化模仿,学习对象覆盖公开语料中的多领域知识,广度上限高于单一专家,因此可形成较高能力底座;自动驾驶端到端模型主要学习人类驾驶轨迹,而L4安全目标要求显著超越平均人类表现,模仿学习天花板约束更强。
闭环驾驶会放大模仿学习的结构性缺陷。行为克隆在训练分布内表现稳定,但一旦进入示范数据未覆盖状态,模型输出偏差会推动车辆进入新的状态分布,形成协变量漂移;长尾、危险和事故场景也难以依靠真实道路主动采集。强化学习因而不只是后训练补强,而是驾驶模型突破模仿边界的重要环节。
强化学习与世界模型在物理AI中形成双向共生。真实道路无法承担反复试错、失败重置和危险事件注入,世界模型因此成为策略训练、奖励设计与安全验证的闭环试错场;同时,真实数据回流与策略训练也会暴露仿真偏差,推动世界模型持续校准。
产业实践正在向“端到端+世界模型仿真+强化学习后训练”收敛,但具体路线仍有分化。特斯拉、小鹏、理想、Momenta、地平线、千里科技、卓驭、元戎启行等均已公开将强化学习纳入训练链路;小鹏、理想、元戎、千里更偏向VLA或多模态路线,华为、Momenta、地平线相对弱化语言中介,更强调世界模型构建与强化学习闭环。
L4 Robotaxi路线更关注大规模闭环仿真、安全冗余和超越人类驾驶水平。小马智行PonyWorld等公开表述突出强化学习范式和世界模型仿真,Waymo、文远知行则更多强调基础模型、大规模仿真和端到端能力建设。行业共性是以仿真环境承载闭环训练,差异集中在语言中介、强化学习披露程度和量产辅助驾驶/L4运营定位
我们认为,数字AI底座模型发展路径已逐渐清晰、价值在于确定性,但其难以实现物理世界的建模闭环;我们认为物理AI将成为物理世界的AI解决方案,从而在AI的当前发展阶段成为增量更大的方向,智能驾驶作为最先跑通闭环的代表场景,我们认为应重点关注。
风险提示:技术迭代不及预期的风险;大模型厂商 ARR 增速放缓的风险;云服务商资本开支不及预期的风险;智能驾驶及机器人商业化落地不及预期的风险。
1
强化学习成为高物理闭环任务关键环节
数字AI与物理AI均以模仿作为重要训练范式,但模仿对象差异决定了强化学习在两类系统中的角色分化。理解这一分化,是判断强化学习为何在自动驾驶中由后训练工具走向关键环节的前提。
1.1
数字AI:互联网级知识语料抬高模仿学习上限
大语言模型的预训练在机制上可视为一种模仿。其训练目标是预测下一个token,学习对象是经过筛选的互联网级人类文本语料。由于相关语料汇集了大量人类在不同领域的知识与表达,预训练可使模型在知识覆盖广度上显著高于单一个体,模仿由此可以支撑较高能力底座。
强化学习在大语言模型中更多承担事后对齐与推理增强的角色。基于人类反馈的强化学习用于让模型输出更符合人类偏好,而面向可验证任务的强化学习则用于提升推理能力。DeepSeek团队2025年发表于《自然》的研究显示,在不使用监督微调的前提下,纯强化学习可以诱发自我反思、验证与策略调整等推理行为,并在数学、编程等可验证任务上超过以人类示范做监督学习的同类模型。这一结果说明,在数字AI中强化学习能够在模仿底座之上进一步突破,但模仿本身已提供了足够高的起点。
1.2
物理AI:人类驾驶演示约束模仿学习上限
自动驾驶端到端模型的主流训练方式同样具有模仿属性,但模仿对象主要是人类驾驶演示数据。Momenta在阐述其技术路线时,将模仿学习概括为模型从人类司机驾驶行为中学习,其能力上限更容易受到示范数据质量、覆盖范围与人类驾驶分布约束;同时,人类驾驶并不完美,复杂低频场景样本稀缺,模型可学习空间因此受到约束。卓驭科技AI负责人陈晓智的表述与之相近,其认为预训练阶段本质上是模仿学习,可将系统能力推升至约80分水平,而从80分提升至95分则需要强化学习。
驾驶任务对能力上限的要求与模仿学习所能提供的上限之间存在落差。L4自动驾驶的目标是在安全性上超越人类,而非趋近人类平均水平。小马智行联合创始人楼天城在阐述PonyWorld世界模型时表示,即使完美复刻人类顶尖司机的驾驶行为,也无法满足L4级自动驾驶对安全性的苛刻要求,因为机器需要理解“为什么”,而不仅是“怎么做”。地平线创始人余凯亦认为,用户行为数据价值有限,行业头部玩家不应仅依赖司机数据学习,未来在仿真平台中通过强化学习训练可能成为关键增量。
1.3
模仿学习的结构性缺陷在闭环驾驶中被放大
行为克隆式模仿学习在闭环控制中存在协变量漂移问题。学术界对此已有长期讨论,Ross等人在2011年提出的DAgger及后续研究指出,策略在执行早期产生的微小动作偏差会使车辆进入训练分布之外的状态,误差随时间累积放大,最终导致策略在新状态下失效。该问题在自动驾驶闭环场景中尤为关键,因为驾驶是动作影响后续观测的序贯决策过程,而非单步预测。
模仿学习从人类数据中习得的行为并非天然最优。端到端模型可能同时学习有效驾驶行为与低质量驾驶行为,强化学习则可通过奖励设置保留安全、高效、舒适的动作,并抑制不良驾驶行为。由此可见,模仿范式的另一局限在于难以自发区分被模仿行为的优劣,而强化学习可通过奖惩信号提供行为筛选机制。
特斯拉公开口径提供了量化参照。关键干预间隔里程在FSD v12.5较前代改善约100倍,并预期v13改善约1000倍。该数据为公司口径,v13为预期目标,属前瞻信息,存在不确定性。即使最终兑现程度仍待验证,目标量级仍反映行业对“远超人类干预频率”的安全目标诉求,而这一目标难以仅依赖模仿平均人类司机达成。
1.4
强化学习在驾驶中的定位由事后增强转向关键环节
强化学习在自动驾驶中的定位不同于大语言模型。在大语言模型中,强化学习主要服务于后训练、偏好对齐与可验证推理增强;在自动驾驶中,模仿底座受人类演示数据和协变量漂移制约,若要达到超越人类的安全目标,强化学习在高物理闭环、高安全约束场景中更接近突破上限的关键环节。
2
强化学习与世界模型:高物理闭环下的工程共生
强化学习要在驾驶中发挥作用,离不开可反复试错的训练环境,而真实道路难以承担这一角色。世界模型的意义在于提供可控、可重置、可注入危险事件的闭环环境,从而支撑策略训练、安全验证和模型迭代。
2.1
强化学习需要可试错的环境,真实道路无法承担这一角色
强化学习的核心机制是在与环境交互中通过奖惩信号优化策略,这要求环境能够反复复现、注入危险事件,并在失败后重置。真实道路不满足上述条件,碰撞类数据在真实道路上极难且不应主动获取,危险场景也无法随意复现。相关驾驶模仿学习研究已将世界模型作为神经模拟器,用于在训练中生成新状态,从而在降低对额外真实道路主动采集依赖的同时缓解协变量漂移,并为强化学习提供可行试错载体。
物理AI对交互环境真实度的要求高于传统游戏引擎式仿真。已有研究和产业实践显示,过去基于3D游戏引擎的尝试存在场景真实度不足、规模较小等问题,模型也可能利用仿真与真实世界之间的偏差形成不可迁移策略,导致训练结果在真实场景中失效。该问题在驾驶中体现为奖励钻空,即策略利用仿真环境的失真之处获得高奖励,却无法迁移到真实道路。
2.2
世界模型为强化学习提供高保真的闭环试错场
世界模型被多家厂商定位为强化学习的训练场。理想汽车在阐述MindVLA时表示,强化学习若要避免奖励钻空,必须与足够逼真的世界模型交互;其采用的“重建+生成”统一世界模型,将三维场景重建与新视角生成结合,构建接近真实世界的仿真环境,并在其上开展大规模闭环强化学习。据理想汽车公开表述,相关重建与生成方法中有四篇论文入选CVPR2025,并将3D高斯渲染训练速度提升至七倍以上;该类数据仍需按公司口径处理。在下一代MindVLA-o1框架中,世界模型被命名为MindSim,并与数据引擎、VLA模型、强化学习基础设施共同构成闭环。
华为乾崑的世界引擎亦承担类似训练场职能。其ADS4采用世界引擎与世界行为模型的双层架构,云端世界引擎利用难例扩散模型生成高质量场景,难例场景密度可达真实世界的约1000倍,用以训练车端模型。华为相关负责人将VLM与VLA定位为能力增益项,同时强调能力提升核心仍在强化学习,即将端到端大模型置于由海量真实数据构建的仿真环境中探索。据Momenta公开表述,其R7世界模型将这一逻辑分为三层,即世界模型预训练、世界模型仿真、以及在世界模型中进行强化学习,并将前两层构建的虚拟世界作为强化学习训练场。
2.3
真实数据与强化学习反过来校准世界模型的保真度
世界模型的保真度依赖真实数据持续校准,由此形成双向共生。理想汽车相关表述指出,重建式方法基于真实数据重建,符合物理约束但新视角泛化受限;生成式方法泛化能力较强,但物理约束不足。两者结合,才有望得到既符合物理规律又具备泛化能力的世界模型。这一结合本身依赖真实路采数据为重建提供素材、为生成提供约束,世界模型并非脱离真实数据的纯生成系统。
Momenta对世界模型的解释呼应了大语言模型的预测范式。其首席执行官曹旭东在发布R7时表示,预测是智能进化的核心基石,大语言模型通过预测下一个词来压缩数字世界的常识,世界模型则通过预测物理世界未来状态来理解物体属性与因果关系。我们认为,这一表述指向世界模型与强化学习绑定的深层原因:世界模型先通过对真实数据的预测学习物理规律,再以此为基础充当强化学习环境;真实数据质量直接决定环境保真度,进而影响强化学习有效性。
2.4
生成式与重建式世界模型的结合是当前主流工程取向
世界模型作为基础设施的工程化趋势,在国际前沿实验室中同样较为明确。Wayve自2023年起发布GAIA系列生成式世界模型,GAIA-1为早期版本,GAIA-2为多视角可控的潜在扩散世界模型,可生成包含突然加塞、行人异常行为、极端天气等安全关键场景的合成数据;2025年12月发布的GAIA-3参数规模约150亿,定位转向自动驾驶系统的评估与验证。英伟达于2025年初发布Cosmos世界基础模型平台,面向自动驾驶与机器人等物理AI系统,Wayve为其早期合作方之一。因此,无论量产车企还是研究机构,均在将高保真世界模型作为支撑数据生成、仿真训练与闭环评估的共用基础设施。
3
厂商实践:端到端之上叠加强化学习后训练
代表性厂商的强化学习实践主要围绕量产辅助驾驶与L4 Robotaxi两类场景展开。
3.1
量产乘用车辅助驾驶:端到端之上的强化学习后训练正在收敛为共识
特斯拉路线被多家厂商作为参照。FSD自v12起强化端到端神经网络路线,后续公开技术分享进一步强调世界模拟器、车队回流难例和强化学习在训练链路中的作用,训练目标包括避免碰撞、减少急刹、保持合理车距等安全相关结果。Elluswamy在2025年ICCV主旨演讲中介绍了一个学习型世界模拟器,可同时合成8路相机画面、注入行人或加塞等对抗事件,并重放历史失败案例用于训练与强化学习。
小鹏与理想是偏向视觉-语言-动作的量产路线代表。小鹏建设“云端模型工厂”,在云端训练参数规模约720亿的世界基座模型,并通过后训练、强化学习和模型蒸馏生产车端模型XVLA后部署上车;用于训练的视频数据已达2000万clips并计划增至2亿,云端算力约10EFLOPS。理想的MindVLA以“重建+生成”世界模型作为强化学习训练场,下一代MindVLA-o1进一步将世界模型、数据引擎、VLA模型与强化学习基础设施构成闭环,并称将显著降低渲染成本与训练成本。两者均采用“云端训练大模型、蒸馏部署至车端”的路径,强化学习主要位于后训练环节。
Momenta与地平线代表相对弱化语言中介的量产路线。Momenta的一段式端到端于2024年落地,2025年在端到端基础上引入强化学习,推出R6飞轮大模型;公开披露显示,该模型基于约30亿公里实战里程提炼出的约7000万条数据,在仿真环境中通过奖惩机制开展闭环训练,首搭于别克至境L7,并被称为国内首个在端到端基础上量产落地的强化学习大模型。地平线HSD采用“一段式端到端+强化学习”架构,并以“端到端世界模型+交互博弈”为核心,通过仿真平台中的强化学习提升长尾场景处理能力,首搭于星途星纪元E05。
千里科技、卓驭与元戎启行呈现更明显的路线分化。千里科技与阶跃星辰联合研发千里智驾RLM强化学习多模态大模型,分为基础大模型训练、智驾数据特训、强化学习三段,强化学习阶段通过设置奖励模型降低对数据分布的强依赖、抑制不良驾驶行为、降低兜底规则接管频率;其与吉利联合的千里浩瀚G-ASD引入基于VLA框架的世界行为模型,公开披露算力约23.5EFLOPS。千里科技董事长印奇对相关名词持审慎态度,认为VLA与世界模型即便在大模型领域也尚未成熟,在智驾中的应用成熟度仍需验证。卓驭科技将强化学习定位为把系统从约80分提升至95分的环节。
华为乾崑路线具有一定独立性。ADS4的WEWA架构由云端世界引擎与车端世界行为模型组成,世界引擎以难例扩散模型生成高密度难例场景,实现“用AI训练AI”;车端世界行为模型融合全模态感知与混合专家能力。华为相关负责人将VLA定位为能力增益项,并把强化学习与世界引擎中的探索作为能力提升核心。ADS4云端AI算力约45EFLOPS,高质量训练数据约10亿公里。我们认为,华为与小鹏、理想的差异主要在于是否以语言为中介,而非是否使用强化学习与世界模型。
3.2
L4 Robotaxi:以世界模型驱动的闭环仿真,安全冗余优先
Waymo公开口径侧重基础模型与大规模仿真。其2024年发布的端到端多模态研究模型EMMA基于Gemini,将导航指令、车辆状态等非传感输入与轨迹、三维位置等输出统一表示为自然语言文本,在运动规划等任务上取得领先结果;Waymo公开口径将其视为探索多模态基础模型在自动驾驶中的应用,并强调大语言模型与视觉语言模型的运用。
小马智行对“超越而非复刻人类”的判断表述较为明确。第七代Robotaxi方案采用多传感器冗余配置,并以影子模式持续优化算法;PonyWorld世界模型基于强化学习范式,具备生成场景与传感器数据、高保真仿真、驾驶行为多维评估三项能力;据公开口径,其世界模型可按周生成超百亿级别的仿真测试里程与高风险场景变体,具体单位与统计口径需以公司披露为准。
文远知行公开口径侧重端到端与大规模仿真。文远知行自研端到端AI模型突破传统模块化框架,并以神经网络与博弈论实现类人驾驶行为规划,嵌入WeRide One平台形成持续学习与优化的飞轮效应;其云端模拟器每日可运行数万公里仿真里程。文远知行与博世合作推出一段式端到端方案WePilot AiDrive并计划量产。
3.3
不同路线的共性与分歧
无论量产车企还是Robotaxi厂商,代表性厂商均在不同程度上围绕“端到端模型、世界模型仿真、强化学习/仿真训练”构建提升长尾安全性的技术组合;其中,明确披露强化学习的厂商普遍需要以世界模型或仿真环境承载闭环训练。分歧主要体现在三个方面:一是是否以语言为中介,小鹏、理想、元戎、千里浩瀚G-ASD偏向VLA,华为、地平线、Momenta相对弱化语言中介;二是强化学习披露的明确程度,特斯拉、小鹏、理想、Momenta、地平线、千里、小马已明确披露强化学习环节,Waymo与文远知行的公开口径相对侧重端到端与仿真;三是落地形态,量产辅助驾驶更强调车端部署与成本约束,L4 Robotaxi更强调安全冗余与超越人类。
4
结论:强化学习从可选增强走向关键环节
我们认为,强化学习从可选增强走向关键环节,核心源于模仿学习在物理闭环任务中的能力边界。第一,模仿学习的能力上限在数字AI与物理AI之间存在结构性分野。大语言模型因模仿对象是互联网级人类知识而具备较高能力底座;自动驾驶因模仿对象趋近平均人类司机,且受协变量漂移制约,模仿天花板更低、约束更强。这使强化学习在驾驶等高物理闭环任务中,由可选的事后增强转向突破上限的关键环节。
第二,在物理AI中,强化学习与世界模型的绑定更多源于工程约束。真实道路难以承担反复试错的角色,世界模型被用作高保真闭环试错场以降低奖励钻空风险;世界模型的保真度又依赖真实数据与实车强化结果持续校准,二者由此形成双向共生。这一绑定已在国内量产车企与国际前沿实验室同时出现,世界模型正成为数据生成、仿真训练与闭环评估的共用基础设施。
第三,产业落地呈现收敛中有分化的格局。多数厂商正在围绕“端到端+世界模型仿真+强化学习/仿真训练”方向演进,但在是否以语言为中介、强化学习披露明确程度,以及面向量产辅助驾驶还是L4运营等方面仍存在分化。需要强调的是,相关概念的产业成熟度仍有争议,部分厂商对VLA与世界模型等名词持审慎态度;算力与数据规模多为公司口径,性能改善与量产时间多为前瞻信息,宜结合后续披露持续跟踪。上述判断为技术综述,不构成投资建议。
5
风险提示
技术迭代不及预期的风险:数字 AI、物理 AI 技术进展低于预期,任务或应用场景拓宽速度低于预期。
大模型厂商 ARR 增速放缓的风险:若客户增长、续费率或客单价不及预期,模型厂商 ARR 增速可能放缓。
云服务商资本开支不及预期的风险:若自由现金流承压,或 AI 算力需求及投资回报低于预期,云服务商可能下调资本开支。
智能驾驶及机器人商业化落地不及预期的风险:若产品可靠性、成本下降或用户需求低于预期,相关产品商业化进程可能放缓。
最新代表报告
《【AI系列深度21期】物理AI如何从架构借鉴走向模型迁移?》20260808
《【AI系列深度22期】智能驾驶VLA模型的架构范式与厂商路线》20260808
《【AI系列深度23期】智能驾驶的表征演进》20260808
东吴汽车团队介绍
团队荣誉
2025年证券时报(新财富)最佳分析师汽车行业第一名;
2024年证券时报(新财富)最佳分析师汽车行业第一名;
第二十一届新财富最佳分析师汽车和汽车零部件板块第二;
第二十届新财富最佳分析师汽车和汽车零部件板块第二;
第十九届新财富最佳分析师汽车和汽车零部件板块第三;
第十五届卖方分析师水晶球汽车及零部件板块第二;
第五届新浪财经金麒麟最佳分析师汽车行业第二;
第四届新浪财经金麒麟最佳分析师汽车行业第二;
第三届新浪财经金麒麟最佳分析师汽车行业第三;
Wind第十二届金牌分析师汽车板块第一;
Wind第十一届金牌分析师汽车板块第一;
Wind第十届金牌分析师汽车板块第一;
Wind第九届金牌分析师汽车板块第二;
上海证券报最佳分析师汽车板块第一;
黄细里 团队负责人
华中科技大学企业管理学士,上海交通大学企业管理硕士;
负责投资策略+汽车智能化主线,曾任职长江证券汽车分析师等,13年汽车行业研究工作经验
工作邮箱:huangxl@dwzq.com.cn
孟璐 团队成员
同济大学金融本硕;
聚焦全球化乘用车,5年汽车行业研究经验
工作邮箱:mengl@dwzq.com.cn
郭雨蒙 团队成员
中国海洋大学本科,北京航空航天大学硕士
聚焦零部件+机器人,2025年加入东吴证券,此前就职于民生证券、天风证券,5年汽车行业研究经验
工作邮箱:guoym@dwzq.com.cn
孙仁昊 团队成员
同济大学本科,香港中文大学(深圳)硕士
聚焦智能化零部件+客车,4年汽车行业研究经验
工作邮箱:sunrh@dwzq.com.cn
童明祺 团队成员
上海财经大学金融本硕
聚焦智能化乘用车,2025年加入东吴证券
工作邮箱:tongmq@dwzq.com.cn
公众号| 东吴汽车黄细里团队
请扫关注我们
免责声明:
本公众订阅号(微信号:东吴汽车黄细里团队)由东吴证券研究所汽车团队设立,系本研究团队研究成果发布的唯一订阅号。
本公众号所载的信息仅面向专业投资机构,仅供在新媒体背景下研究观点的及时交流。
本订阅号不是东吴证券研究所汽车团队研究报告的发布平台,所载内容均来自于东吴证券研究所已正式发布的研究报告或对已发布报告进行的跟踪与解读,如需了解详细的报告内容或研究信息,请具体参见东吴证券研究所已发布的完整报告。
本订阅号所载内容不构成对具体证券在具体价位、具体时点、具体市场表现的判断或投资建议,不能够等同于指导具体投资的操作性意见。本订阅号所载内容仅供参考之用,接收人不应单纯依靠本资料的信息而取代自身的独立判断,应自主做出投资决策并自行承担风险。东吴证券研究所及本研究团队不对任何因使用本订阅号所载任何内容所引致或可能引致的损失承担任何责任。
本订阅号对所载内容保留一切法律权利。订阅人对本订阅号发布的所有内容(包括文字、图片、影像等)未经书面许可,禁止复制、转载;经授权进行复制、转载的,需注明出处为“东吴证券研究所”,且不得对本订阅号所截内容进行任何有悖原意的引用、删节或修改。
特别声明:《证券期货投资者适当性管理办法》、《证券经营机构投资者适当性管理实施指引(试行)》于2017年7月1日起正式实施。通过新媒体形式制作的本订阅号推送信息仅面向东吴证券客户中的专业投资者,请勿在未经授权前进行任何形式的转发。若您非东吴证券客户中的专业投资者,为保证服务质量、控制投资风险,请取消关注本订阅号,请勿订阅、接收或使用本订阅号中的任何推送信息。因本订阅号难以设置访问权限,若给您造成不便,烦请谅解!感谢您给予的理解和配合。
股票
板块
用户
资讯
评论 (0)