分享好友 资讯首页 资讯分类 切换频道

全球报道:首款可交互音视频世界模型HelixWorld 1.0发布了!

2026-08-17 14:088.2万0

全球资源网科技频道讯:近日,Noiz AI联合来自香港科技大学、清华大学、卡内基梅隆大学(CMU)、Google DeepMind等机构的研究人员,发布可交互音视频世界模型HelixWorld 1.0。该模型可根据图片和提示词持续生成动态场景,并同步生成与画面匹配的声音,进一步推动世界模型从“生成视频”向“生成可持续交互环境”演进。

过去几年,视频生成模型在分辨率、画面质量、生成时长和稳定性方面快速提升,但多数产品仍以一次性生成固定视频为主。用户虽然可以通过Prompt设定内容,却难以在生成过程中实时改变剧情、调整视角,或让场景持续响应新的行为。

世界模型则试图突破这一限制。与传统视频生成不同,世界模型强调对环境状态的持续建模和实时生成,用户可以在生成的场景中移动、探索和交互。目前,Google DeepMind的Genie 3、腾讯WorldPlay、蚂蚁LingBot-World等均在推进相关技术。

HelixWorld 1.0此次重点补足了声音维度。按照团队介绍,该模型采用统一的原生Transformer架构生成音频与视频,并非先生成视频后再单独配音,因此能够让环境声音、人物动作和场景变化保持更紧密的同步关系。

这也意味着,世界模型正在从“可看的动态画面”进一步走向“可听、可交互、可持续运行的数字环境”。

不过,真正意义上的世界模型仍面临多项挑战。首先是多智能体交互。未来虚拟世界中可能同时存在大量拥有独立身份、目标和记忆的智能体,角色之间的合作、冲突和关系变化都需要模型持续理解和生成。

其次是多人实时交互。当多个用户和智能体同时进入同一场景后,模型不仅需要识别对话内容,还要判断说话者、交流对象、声音方位,以及停顿、抢话、表情等复杂信息。

更大的难题则是长期一致性。如果一个生成世界持续运行数小时甚至数天,角色身份、空间状态、历史事件和因果关系都需要长期保持一致。此前发生的一次对话、一次选择甚至一扇被打开的门,都需要在后续世界中继续产生影响。

进一步看,世界模型的终极方向可能是“自主运行”。即使没有新的Prompt输入、用户暂时离开,数字世界仍可以根据自身规则继续变化,角色关系、环境状态和事件进程持续演化。

一旦实时音视频生成、多智能体、长期记忆和自主运行能力逐渐成熟,世界模型有望率先影响游戏、互动影视、教育培训和虚拟仿真等领域。

从生成图片,到生成视频,再到持续生成可交互世界,生成式AI正在从“内容生成”向“环境生成”进一步延伸。未来,AI生成的或许不再只是一段预设好的视频,而是一个能够持续运行、回应用户并不断变化的数字世界。


点赞 0
举报
收藏 0
评论 0
分享 1
2027上海国际人形机器人展览会(长三角机器人展)

02026-08-0385

2027上海国际具身智能产业博览会(长三角具身智能展)

02026-07-30116

2027北京国际消费电子展览会(6月亦庄展)

02026-07-24123

2027LINK FASHION服装展会(上海)

02026-07-24164

2027北京·世亚智博会,亚洲人工智能产业展览会(6月亦庄展)

02026-07-02185

2027深圳电子展·中国(深圳)国际电子信息博览会

02026-06-25211

2026第45届西安国际美业博览会(秋季展)暨西部医美及抗衰老/中医药健康养生产业博览会

02026-06-25213

2026年香港秋季电子产品展览会/香港秋季电子展会

02026-06-24228

2026年第57届韩国首尔电子展Korea Electronics Show

02026-06-24265

2027第七届中国跨境电商交易会

02026-06-20218

2027世亚智博会·北京人工智能产业展览会(3月春季展)

02026-06-18193

2027第36届中国国际健康产业博览会|北京健康展

02026-06-16226

2026广州国际时尚与生活采购展

02026-06-01324

2027第十五届深圳国际机器人产业链展览会

02026-05-27292

2027第十五届深圳国际人工智能展览会

02026-05-25295

2026越南(北宁)国际金属及冶金钢铁展览会

02026-05-25318

2026越南(北宁)国际金属加工及焊接切割展览会

02026-05-25287

2026越南(北宁)国际表面处理及电镀涂装展览会

02026-05-25296

2026越南(北宁)国际润滑油及应用技术展览会

02026-05-25294

2026越南(北宁)国际机器人及自动化设备展览会

02026-05-25297