世界模型

JST-2

JST-2 是 Viggle 的物理原生世界基础模型,将场景、角色和运动统一到共享的 3D 世界中,以交互速度生成和扩展 3D 场景。

JST-2
机构/作者Viggle
版本JST-2
公开日期2026-10-19
验证环境未说明

验证条件与证据

官方页面报告 JST-2 在 NVIDIA B200 上约 1 秒生成一个 3D 场景,单次推理成本低于 0.01 美元;并通过盲测与 Meshy 7.1、Tripo H3.1、Cartwheel Swing、HY-Motion-1.0、Cartwheel Comic 4、DeepMotion Animate 3D 对比,角色与动作生成偏好胜出。未报告真实机器人或标准化仿真环境验证。

核心能力

  • 约 1 秒生成 3D 场景,单次推理成本低于 0.01 美元。
  • 最多支持 64 个输入视图作为空间上下文窗口。
  • 从单张图像生成可动画的 3D 角色,无需单独绑定。
  • 从文本或视频生成全身 3D 动作,可直接用于 JST-2 角色。
  • 从稀疏真实观测重建完整 3D 环境。

能力局限

  • 场景碰撞和物体交互仍依赖基于规则的物理,JST-3 才计划引入学习动力学。
  • 即将发布的版本将改善复杂衣物变形和头发运动。
  • 页面未披露代码、权重、训练数据与硬件接入方式,开源状态未知。

技术资料

输入
多模态提示(文本/图像);单张角色图像或文本;动作文本或视频;最多 64 个输入视图;真实环境稀疏观测。
输出
可在浏览器本地渲染的 3D 高斯泼溅场景;带运动动力学的 3D 角色;由文本或视频生成的全身 3D 动作;图像输出。
适用任务
3D 场景生成与扩展、单图/文本角色生成、文本/视频全身 3D 动作生成、从稀疏真实观测重建 3D 环境。
适用平台/硬件
Physics-Native Token、JST encoder/generator/decoder、3D Gaussian splat 解码、物理原生数据合成与训练管线
技术栈与依赖
Joint Space-and-Time (JST) 架构;Physics-Native Tokens;3D Gaussian splats;NVIDIA B200 推理

公开范围与许可证

代码
未核对
权重
未核对
数据
未核对
硬件
未核对

资料介绍

JST-2 是 Viggle 的物理原生世界基础模型,采用联合空间 - 时间架构,用 Physics-Native Token 在 3D 空间中表示持久原子,并通过同一世界表示生成或重建场景、角色和全身动作。

它可在约 1 秒内生成一个 3D 场景,单次推理成本低于 0.01 美元,并支持最多 64 个输入视图作为空间上下文窗口。生成结果解码为 3D 高斯泼溅,可在浏览器中本地渲染和反复探索。

在角色生成方面,JST-2 可从单张图像或文本生成带运动动力学的 3D 角色,无需单独绑定和蒙皮。在动作生成方面,它可从文本或视频生成全身 3D 动作,并可直接应用到 JST-2 角色。

官方盲测显示,JST-2 在角色生成上领先 Meshy 7.1 和 Tripo H3.1,在文本到动作与视频到动作任务上领先多个基线。官方还计划在 JST-3 中将基于规则的场景碰撞与物体交互替换为学习动力学,目标是为物理 AI 构建经验引擎。

使用与复现资料

  • 访问 JST-2 体验页,选择示例世界进入 3D 场景。
  • 拖拽摄像机或推动物体查看多视角生成与扩展。
  • 使用文本、单张图像或视频生成角色和全身动作。
  • 通过 API 构建应用。

资料来源

内容合作 · 项目交流

欢迎开发者、团队与我们联系,一起推动 AI 与机器人领域的优质内容创作与交流。