2021年,张一鸣在离职信中写道:“虚拟现实、生命科学、科学计算对人类生活的影响已显露出曙光,这需要我们突破业务惯性去探索。”

2021年6月,《财新》报道指出,张一鸣曾亲赴潍坊洽谈收购Pico,会面时就表达了收购意图。这笔交易后来成为这一轮元宇宙投资热潮的标志性事件,但《财新》在报道中特别提到,双方当时并未透露“进军元宇宙”的打算。

五年后,到2026年6月,字节跳动世界模型被曝光。爆料称,世界模型是字节2026年AI四大重点之一,目标是在年底前至少发布一个版本,对标Genie 3。

该项目基于Seedance,用户通过Pico头戴设备作为入口,说一句话或做一个动作,云端便会生成一个随之变化的世界。

张一鸣提到的“虚拟现实”并非指元宇宙,而是更宏大的世界模型。他的离职信,实际上也可以看作是一封预告信。

2026年9月,又有爆料称,已成为中国首富的张一鸣,仍在亲自督导字节跳动的实时空间视频模型,协调不同业务部门,将AI资源和算力向该项目倾斜。可见他对世界模型的重视程度。

不清楚字节对Genie 3的研究进展如何,但谷歌率先行动,于10月28日发布了世界模型Genie 4。这无疑给张一鸣带来了一些压力。

相比前代,Genie 4的最大特点是用户可以持续“干预”世界。在谷歌的演示中,你可以进入Genie 4的世界,让天下雨,调整镜头,让一个人出现在街角。风有声音,角色会回应。

参与测试的人表示,Genie 4的设定不再只是一个镜头,你可以给它安排一件即将发生的事,Genie 4会根据这件事自动生成所有相关内容。

Genie 4是什么?

与其说Genie 4是一个世界模型,不如说它是一个游戏。

过去的世界模型本质上是一种视频模型,它将未来可能看到的画面提前生成并展示给你,而Genie 4则根据你的动作生成下一个画面。

你让视频中的主角向左转,传统视频模型能做的,是重新生成一段他向左转的视频。

但在Genie 4中,你按下WASD,人物就会跟随你的操作移动并转向,此时模型需要判断镜头、人物、物体和空间关系接下来如何变化,然后将结果即时呈现给你。

前者生成一段内容,后者模拟动作的后果。

谷歌在这条路上已经走了几代。

2024年的Genie 1,从无动作标注的互联网视频中学习潜在动作,让人逐帧控制生成环境。它的重要性不在于画面有多精细,而在于模型开始从视频中学习“动作”与“变化”的关系。

同年的Genie 2,将一张图片转化为可由人或AI用键鼠操作的3D空间,开始展现物体交互、角色动画、重力和光照,以及重新渲染视野外场景的能力。

到2025年的Genie 3,世界推进到720p、24fps,并能保持数分钟的内容一致性。用户除了导航,还能通过提示词改变天气、添加人物和物体。视频先变得可控,再变得可进入,最后变得可以持续干预。

Genie 4的主要提升,是让这个世界变得更值得“玩”。

你可以用自然语言实时改变天气、移动镜头、引入一个人或一个物体。Gemini会结合当前场景理解你的指令,而不是每次都把世界推倒重来。

在你两次输入之间,它也会继续监测和引导场景,让世界保持推进。

谷歌强调,Genie 4包含空气动力、碰撞等物理模拟,以及人物更自然的动作和对环境的反应。

此外,Genie 4也是Genie系列第一个有声音的模型,可以配合画面同时生成风声、海浪声以及背景音乐。

以前是人不断告诉世界“接下来发生什么”。现在,Genie 4开始理解“这件事要怎样一步步发生”。

Gemini 3.8 Flash在环内观察Genie 4生成的画面,将复杂目标拆解成步骤,检查每一步是否完成,并在世界变化或用户干预后调整计划。

当然,世界模型并非只有“让人进去玩游戏”这一条路线。

例如,英伟达的Cosmos,是使用世界基础模型进行模拟、推理和数据生成,为机器人、自动驾驶和工业视觉提供训练。

自动驾驶需要用极端天气、复杂光照等罕见交通场景进行训练。

在现实中模拟这些场景,不仅成本高,也不适合主动制造。如果模拟世界能生成这些情况,机器就可以先在其中训练、测试和验证。

机器人也需要理解动作后果。比如抓起一个杯子,它会不会滑落?手掌碰撞杯子后,物体如何移动?如果杯子换一个位置,原来的策略是否还能继续生效?

这条路线需要的不仅是逼真画面,还包括可控合成数据、物理交互、动作后果和反复验证。

谷歌也在探索Genie 4与Gemini Robotics的结合,但这一代的特点仍偏向娱乐,强调沉浸感和互动性。

Genie 4归根结底只是预览版。谷歌表示,它只能在短时会话中保持一致性。运行时间过长或多次复杂修改后,视觉细节和物体恒存仍可能漂移。同时,模型的复杂物理、实时音频、空间精度和长期一致性等问题也尚未解决。

字节早有布局

字节的世界模型与谷歌有异曲同工之处。

2024年,通义大模型技术负责人周畅从阿里加入字节后,负责世界模型相关研究。

不过,当时字节内部判断,世界模型的技术路线和商业化场景都不够清晰,更重要的是先打好视频模型这一仗。

到2025年,字节开始小范围组建VLA研究组。字节AI Lab负责人李航团队主要基于仿真数据训练,Seed多模态研究员王文千团队主要基于自然数据训练。

2026年春节后,Seed又新设了一支3D仿真世界模型组,由前Meta FAIR研究员范浩奇负责,向周畅汇报;原来的两个VLA组合并,也统一向周畅汇报。

由此形成两条路线:VLA面向具身智能,追求真实动作与环境响应;3D仿真面向娱乐和游戏。

字节为世界模型准备的训练数据预算达到数千万元,覆盖VLA、长视频和3D等模态。一名数据供应商称,投入能达到其他厂商的3至4倍。

然而,钱花了,人也找了,但成绩却出不来。据报道,2026年初,字节内部评测显示,其世界模型的综合性能距离当时的全球SOTA仍有约10%的差距。

与谷歌一样,字节做世界模型也有技术支撑。

Seedance 2.5单次可生成最长30秒的视频内容,还能通过多轮提示词延续故事,输出完整短片。

它可以参考多种素材生成视频,还能按时间戳修改,人物姿态、运动轨迹和运镜,也能先用白模搭建,再根据白模生成视频。

过去的视频模型本质上是抽卡,提示词发出后,模型输出的结果有好有坏。Seedance 2.5则是一种AI视频生成与AI剪辑的组合,输出质量也更稳定。

世界模型不仅需要连续的画面,还需要其中的物体是三维的,以便从不同角度观察。

因此有了Seed3D。它可以将一张图片转化为带几何、纹理和PBR材质的3D模型,导入Isaac Sim后,还能用于物理仿真和机器人训练。

也就是说,Seed3D生成的素材是符合物理规则、可用于动作测试的3D资产。

最后是原生音视频全双工大模型SeedRealtime。它是单体架构、端到端建模音+视频+文本+时序流的实时交互模型。

一个世界即使画面再漂亮,如果听不懂人在说什么,不知道何时该接话,它仍然只是一段视频。

10月11日,影视飓风的Tim展示了一段视频:用户先用一句话生成一个微缩视角的房间,再用键鼠骑上纸飞机,在场景中自由飞行。

想要一把勺子,世界就生成一把勺子,甚至可以顺着勺子攀爬。再画出一扇“任意门”,原本毫不相干的房间和外太空,就被连接到了一起。

虽然字节没有正式公布这个世界模型的具体信息,但这让外界第一次看到了字节世界模型的雏形。它强调空间探索,也强调随时修改和交互。

10月27日发布的2026胡润百富榜中,张一鸣成为中国首富,财富为6700亿元人民币。

然而据报道,在世界模型这个项目上,张一鸣亲自协调公司不同业务部门,为项目调配AI资源和算力。

张一鸣希望这个模型能连接四样东西:AI模型、云计算、内容平台和Pico硬件。最终,他希望世界模型成为字节的新飞轮。

Seed负责生成世界,火山引擎提供云端算力,剪映和即梦降低创作门槛,抖音、直播和短剧负责分发体验,Pico则提供空间入口。

Pico的优势在于轻便、便宜。

传统XR设备需要将大量计算塞进头显,导致头显又重又贵,比如苹果的Vision Pro。张一鸣希望将复杂的计算生成放到云端,让头显只负责感知、传输和显示。

成本并未消失,只是从头显转移到了数据中心。

因此,用户越多,并发计算的成本越高。网络稍有波动,延迟就会直接破坏沉浸感。

目前,字节世界模型的生成指标约为20fps,称不上流畅,顶多只能算“不卡顿”。

从“推荐下一条”到“生成下一秒”

不是只有张一鸣才能做世界模型。李飞飞、杨立昆、DeepMind、英伟达,以及大量机器人与自动驾驶团队,都在从不同方向做世界模型。

他们个个都是技术大牛,但世界模型从实验室走向大众,需要的不仅是技术。它还需要低摩擦交互、创作者生态、内容分发等。

张一鸣最擅长的,不是发明每一项底层技术,而是技术落地。

例如,字节起家的推荐算法,显然不是张一鸣发明的,但他将这项技术与字节已有的产品组织在一起,把“找到下一条内容”这件事,压缩成了一次滑动。

你动动大拇指,下一个你可能喜欢的内容就来了。

用户不需要理解什么是推荐系统,也不需要学习一套操作方法。滑一下,不喜欢,就再滑一下。

世界模型同样需要这样一个落地方式。

难道指望用户进入世界模型前,先学会三维引擎、镜头参数、动作空间和提示词格式?如果真是这样,那就算字节的世界模型再先进,也只能当个摆设。

张一鸣缩短了人与内容之间的距离,世界模型所生成的世界,也不过是一个内容而已。

同样,组织创作、分发和反馈,也是张一鸣擅长的。

一个冷知识:无限生成世界,不等于无限生成好体验。

随机不等于丰富,逼真不等于好玩,可交互也不等于用户愿意交互。一个可以无限延伸的空间,如果没有目标、人物、冲突和节奏,终究只是个空间。

因此,新“世界”需要创作者,需要大量创作者。他们需要创作初始设定、人物关系、规则,以及一片允许用户探索和交互的场景。

生成一旦不再稀缺,“什么值得生成”就会变得稀缺。

字节已有的创作者、工具和分发体系,有可能让“世界模型设计师”像AIGC创作者一样成为一种职业。这些人负责让世界成立,再根据用户行为不断修改。

更深一层的变化,是从“推荐下一条”到“生成下一秒”。

推荐系统面对的是一个已经存在的内容库。

你刚看完一条视频,系统根据你的偏好和用户画像,预测你接下来最可能看什么,再从库里挑出下一条。

世界模型面对的,则是一个尚未完全发生的下一秒。

你向前一步,向左转身,说一句话,或拿起一个物体,模型需要预测你的行动之后环境如何变化,并将这一刻即时生成出来。

在抖音上,字节根据行为分发已生产的内容。在世界模型里,字节就能根据每一次行为,即时生产内容本身。

广义上说,这还是一种“推荐”,因为它们都在预测什么东西应该出现在你眼前。唯一的不同在于,过去推荐的是别人已做好的内容,将来推荐的则是一个此前不存在的结果。

这也是为什么张一鸣在元宇宙时期留下的资产,今天仍然值得重新审视。

世界等待张一鸣。可我只想说,快点把世界模型端上来吧,我快等不及了。

本文来自微信公众号“字母AI”,作者:苗正,36氪经授权发布。

2条评论
管理员
2026年9月15日 14:00

欢迎收听本期胜负彩开奖结果深度解析。我是主持人王磊,今天我们将围绕近期十四场开奖结果,分析对阵走势与冷门场次,帮助大家更好地理解结果背后的赛事逻辑。

陈雪琳
2026年9月15日 14:25

很高兴参加这期节目。近期胜负彩开奖结果中冷门频出,我们正好可以结合具体场次来聊聊如何解读数据。

2条评论
近期文章
2026年8月20日
胜负彩开奖结果查询:快速定位历史期次
2026年8月20日
对阵结果与赛事背景对照说明
分类
  • 建设 (2)
  • 建筑施工 (2)
  • 室内设计 (3)
  • 屋顶工程 (2)