版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
世界模型定义:同名异义背后的共同问题 4概念溯源:三条相互独立的脉络 4认知科学脉络:内部现实模型 4控制论/系统动力学脉络:全球系统动力学仿真 4强化学习/AI脉络:环境动态预测模型 4口径辨析:“谁第一个提出”与“谁让它流行” 4各方图谱:世界模型在数字AI与物理AI中同时升温 5数字AI领域 5物理AI领域:自动驾驶 6物理AI领域:机器人与具身智能 6学术界 6世界模型四类用法与分歧根源 7本质分歧:在哪预测、预测什么、如何接动作 8本质框架:世界模型解决的共同问题 8分歧环节一:生成观测结果还是预测抽象状态 9分歧环节二:视觉真实还是物理一致——渲染器与模拟器 分歧环节三:如何与动作结合——兼谈世界模型与VLA的关系 12分歧环节四:产业落地进度——理论与产业的落差 13小结:共同问题、路径分化与收敛趋势 14落地视角:自动驾驶闭环最深,机器人仍处早期 15落地总览:三大场景的要求与进展 15自动驾驶:落地最深、闭环最完整 16小结:落地次序与共同瓶颈 17风险提示 18图1:世界模型的本质与四个分歧环节 9图2:自动驾驶世界模型的数据飞轮闭环 17表1:世界模型概念三条脉络对照 5表2:世界模型四大流派归纳 7表3:生成式vs非生成式逐项对比 10表4:生成式内部两条实现路径:自回归vs扩散 表5:物理AI里世界模型与“动作”的三种结合方式 13表6:核心公司的世界模型路线坐标 15表7:三大场景对世界模型的要求与落地深度 16世界模型定义:同名异义背后的共同问题LLMVLMVLAAIAI概念溯源:三条相互独立的脉络KennethJCraikTheNatureofExplanation(small-scaleCraiksmall-scalemodelofreality/mentalmodel,并未使用worldmodelEdwardC.CognitiveMapsinRatsandenThechoogclRev,194(conveaworldmodel控制论MITJayWrightForresterDynamics1971为Donella&DennisMeadows(TheLimitstoGrowth,worldmodel语境下的worldmodelAIworldmodel强化学习/AI术语在AIJürgenSchmidhuber1990Münchencontrollerworldmodel两个rolloutDavidHa与JürgenSchmidhuber2018Models架worldmodel口径辨析:“谁第一个提出”与“谁让它流行”mentalmodelworldmodel、深度学习的worldmodel三者在用简化内部模型表征与预测外部现实这一抽象层面相AISchmidhuber在1990Ha&Schmidhuber201820251990表1:世界模型概念三条脉络对照维度 思想源头Craik1943
“worldmodel”一词早期出处
现代AI含义提出 现代AI含义流行推手Ha&Schmidhuber在代表人物
1948年
Forrester在1971年 Schmidhuber在1990
2018年用语所指对象
mentalmodel/现实模型/认知地图认知系统内部的现实表征
orldmdel型,全球人口-资源-污染系统动力学仿真
worldmodel,RNN预测环境的内部模型,神经网络对环境动态的预测性内部模型
orldmdel境,同左《Dynamics》,《Models》等其文献 整理各方图谱:世界模型在数字AI与物理AI中同时升温数字AI领域国际主体方面:OpenAISora技术报告标题为《generationmodelsasworldsimulatorsworld,并将3DGoogleDeepMindGenie3ageneralpurposeworldmodel,可实24fps、720pDeepMindAGILabs3D的前沿世界模型,定位为空间智能公司,首款产品Marble生成可漫游3D世界。RunwayGeneralModelsAI12GWM-1Meta2MicrosoftMuse/WHAMworldmodelNatureDecartOdyssey等以3D3D世界模型Matrix2.0称Motus/PixVerseR1称全球首个支持1080P的通用实时世界模型。物理AI领域:自动驾驶生成式世界模型,用于合成稀有和安全攸关场景。NVIDIACosmosFoundation20262ModelDeepMindGenie3型EMMAworldmodelAIneuralworldsimulator,worldmodel多见于第三方或LeCun语境。comma.ai称世界模型是数据驱动的模拟器,已用于openpilot。+为乾崑ADS4+1000NWM0.1秒内推演216DriveDreamer物理AI领域:机器人与具身智能Cosmos官方定义为机器人基座/VLACosmosDeepMindGenie2Meta2用于zero-shot1XModel2026年1allinonworldmodels。Labs中国主体:自变量机器人称全球首个世界统一模型。星动纪元ERA-42/VPPUnifoLM-WMA-0/。(entityworldmodel)RynnVLA-002VLAGR-2学术界Model-basedRL+David《ModelsDanijarHafner(Dreamer/DreamerV3)DreamerDreamerV3发表于Nature2025LeCunAPathAutonomousMachineIntelligence/Choi强BengioSystem2Fei-FeiLi3D几何Next-StatePrediction/MotusAILab,开源Aether,4D+动作+世界模型四类用法与分歧根源综合数字AIOpenAISora、DeepMindGenie、GAIANVIDIACosmosSchmidhuber/Ha/Hafner、Meta/3D3D/4DLabsLeCun、Tenenbaum/Bengio表2:世界模型四大流派归纳流派 核心主张 代表主体生成式世界模拟器预测-空间智能/3D持久世界物理世界基础模型/认知派
世界模型=能生成可交互虚拟世界/视频的生成式模型,但视频生成不自动等同于安全闭环世界模型世界模型=智能体内部预测“动作→未来状态”、服务规划与控制的模型强调几何一致、可漫游、可导出引擎的持久3D/4D世界世界模型上升为与LLM并列的物理世界基础模型,或类人结构化心智模型
OpenAISora、DeepMindGenie、Runway、腾讯混元3D、GAIA、NVIDIACosmos、商汤开悟Schmidhuber/Ha/Hafner、Meta、华WorldLabs、Odyssey、昆仑Matrix-3D自变量LeCun、Tenenbaum/Bengio认知脉络《Videogenerationmodelsasworldsimulators》《Models》等其他文献 整理LeCun-表示学习与自主智能;其三,世界模型是系统模块还是基础模型,是服务现有VLA、LLM本质分歧:在哪预测、预测什么、如何接动作本质框架:世界模型解决的共同问题从Craik1943Schmidhuber1990Ha2018LeCun图1:世界模型的本质与四个分歧环节《Models,《APathTowardsAutonomousMachineIntelligence》等其文献 绘制分歧环节一:生成观测结果还是预测抽象状态LeCun公开-OpenAISoraOpeAIaeepndGenie、英伟达LeCun及Meta2025月离开MetaAMI310.3tokentokenTransformer的Transformer,SoraTransformer式与LeCun1)表3:生成式vs非生成式JEPA逐项对比对比维度 生成式,显式生成未来观测 非生成式在抽象层面预测预测对象 未来的画面/观测,像素、视频、3D, 未来的抽象状态表征能否直接看到 能,直接生成可观察画面 不能,只在表征空间、不还原画内容生成数据合成仿真以及融合后用于决典型用途
策OpenAISoraDeepMindGenieCosmos、小鹏、特斯拉等,产业侧主流路线已出现量产与商业化样本,但物理一致性与能力上限仍受质疑
表征学习、为规划提供预测LeCun/AMILabs、MetaV-JEPAMILabs暂无产品《Videogenerationmodelsasworldsimulators》,《APathTowardsAutonomousMachineIntelligence》等其他文献,整理GenieSora、小鹏X-Cache2.7倍,Cosmos表4:生成式内部两条实现路径:自回归vs扩散对比维度自回归,预测下一个token,扩散,整体去噪,生成方式按时间顺序逐个生成视觉token整段加噪后迭代去噪,一次性生成强项实时、可交互、可无限延续整体一致性与画质高,天然处理多种可能的未来弱项长序列误差累积迭代去噪推理慢、算力负担重代表DeepMindGenie、Cosmos自回归家族OpenAISora、小鹏X-World、Cosmos扩散家族典型场景可交互世界、实时推演高质量视频、离线造数据《Videogenerationmodelsasworldsimulators》《CosmosFoundationModelPlatformforPhysicalAI》其他文献 整理分歧环节二:视觉真实还是物理一致——渲染器与模拟器Labs将常Sora这Labs3D20265MilaLeCunstable-worldmodel50.8%12%22%6%分歧环节三:如何与动作结合——兼谈世界模型与VLA的关系AIAIAIAICosmosGR00T用GAIAMindVLA、华为X-Foresight(其原话是在统一token空间里联合预测未来多视角画面与自车动作)以及阿里达摩院RynnVLA-002(VLA与世界模型统一架构)世界模型与VLAVLA(视觉--)PhysicalIntelligence的πGO-1VLACVPR2026VLA表5:物理AI里世界模型与“动作”的三种结合方式结合方式 做法 代表公司松耦合:世界模型作为数据工厂/仿真器训练级融合:世界模型作为闭环训练环境架构级融合:一个模型同时
世界模型造场景/独立策略策略在世界模型生成的环境里做闭环强化学习
英伟达Cosmos→GR00T、Wayve、特斯拉神经世界模拟器、1X,评测,MindVLAX-World输出画面与动作
统一架构联合预测未来画面与动作 小鹏X-Foresight、阿里RynnVLA-002型
当前画面+预测未来
PhysicalIntelligence,π、智元GO-1、银河通用GraspVLA《CosmosFoundationModelPlatformforPhysicalAI》,《GAIA-1:AGenerativeModelforAutonomousDriving》等其他文献,英伟、特斯拉、理想、小鹏、华为等公司官方网站 整理在VLASystem2System1System2LeCunSystem2token的分歧环节四:产业落地进度——理论与产业的落差非生成式MetaLeCunAMILabs产业侧较少跟随Atoken/2100OpenAI20263AMILabs小结:共同问题、路径分化与收敛趋势VLALeCun表6:核心公司的世界模型路线坐标①预测空公司间OpenAI(Sora/机器
②保真度 ③与动作结合 ④落地Sora应用2026年关停;转向人)谷歌
生成式 偏渲染器 数字侧停在生成机器人方向新渲染器→可交
机器人GenieWorldLabs(李飞
生成式互
训练/评测具身智能体 研究/产品化中生成式 偏模拟器(3D)暂以“造世界”为主 早期产品Marble飞)Meta/LeCun非生成式 不生成画面 进决策回路做规划 研究;LeCun转AMILabs模拟器/数据工英伟达Cosmos 生成式厂
松耦合(造数据)+CosmosPolicy已落地(数据/仿真)特斯拉 生成式 模拟器(仿真)松耦合:世界模拟器+端到端网络已量产FSD二代VLA已推送;联合预测小鹏 生成式 渲染+物理仿真 架构级融合X-Foresight
升级预计年内理想 生成式 模拟器(闭环)训练级融合MindVLA 已落地模拟器(世界引华为 生成式擎)
训练级融合已落地ADS4阿里达摩院 生成式 — 架构级融合RynnVLA-002 开源/研究1X生成式模拟器(评测)松耦合,评测/仿真落地中星动纪元生成式预测未来画面融合,VPP视频预测策略,落地中《Videogenerationmodelsasworldsimulators,《APathAutonomousMachineIntelligence》其他文献,OpenAI、谷歌DeepMind、WorldLabs、英伟达、特拉、小鹏、理想、华为等公司官方网站 整理落地视角:自动驾驶闭环最深,机
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 跨境数字芯片低K介质中跨国介电常数线上检测互认标准-基于国际半导体技术路线图低K介质检测方法及各国材料规格差异实证
- 跨境数字碳中和数据中心中跨国锂离子电池储能消防碳排-基于国际储能消防碳核算标准与数据中心备用储能消防事故碳排放评估规范分析
- DB44-T+2859-2026城镇燃气厂站电气防爆技术标准
- DB34T2171-2026江淮地区芝麻高产轻简化栽培技术规程
- 2026年江苏南通市启东市中考二模生物地理试卷-初中地理
- 中小学体育教学工作基本规范要求
- 2026年智能制造技术转移模式创新与应用
- 2025年4月全国翻译专业资格CATTI三级笔译综合试题与答案
- 2026年宪法学基础知识测试题库
- 2026年江西省人教版高中数学选修三第三章数列测试题
- 中国融通资源开发集团有限公司物资接收、仓储人员专项招聘87人笔试备考试题及答案详解
- 2026年出入境辅警理论考试试卷(含答案)
- 2026江苏徐州市市级机关印刷厂有限公司招聘工作人员2人笔试题库附答案详解(基础题)
- 2025年教师选调教育综合知识真题及答案
- 2025-2030年智能农业灌溉系统行业跨境出海战略分析研究报告
- 第一轮-【黄磷企业检查表】-检查表
- 电动汽车动力性能计算表
- 乔木支撑专项施工方案(3篇)
- 数字化解决方案设计师职业资格认定考试复习题库(附答案)
- 商务数据分析师知识考试复习题库(附答案)
- 2026中国电子签名法律效力与行业发展报告
评论
0/150
提交评论