终于!世界模型进入“有声时代”:24FPS画面+48kHz立体声实时生成
2026.08.17 · 产品 · 开源项目 · 媒体报道
Noiz AI等机构联合发布HelixWorld 1.0,实现画面与声音的实时原生交互。
Noiz AI联合多所高校及研究机构发布实时可交互音视频世界模型HelixWorld 1.0。该模型支持24 FPS实时生成画面与48kHz双声道音频,通过原生Transformer架构让画面与声音由同一套世界建模共同响应动作,且计划在未来几周完全开源模型权重和代码。
- HelixWorld 1.0实现世界模型有声化,支持24 FPS画面与48kHz
- 采用原生Transformer架构,让画面和声音从生成之初就绑定在一起。
- 构建百万量级带空间和动作的音画训练数据,确保声画对齐。
- 模型计划在接下来几周完全开源权重和代码。
为什么值得看
世界模型首次补齐声音短板,实现声画同步的实时交互与开源。
适合谁关注
AI研究员、世界模型开发者及数字娱乐行业从业者。