4DWorldBench
4DWorldBench(中科大,联合浙大与北京中关村学院;CVPR 2026)评的是 3D/4D 世界生成器——图像转 3D/4D、视频转 4D、文本转 3D/4D——把各种条件模态映射到同一评测空间。四个轴汇总为 four_d_worldbench_average:
- 感知质量 — CLIP-IQA、CLIP-aesthetic、FastVQA。
- Condition-4D 对齐 — Keye-VL 是/否 judge 覆盖属性 / 关系 / 运动 / 事件 / 场景控制,外加 DROID-SLAM 相机误差(原始误差越低越好,再反向归一化)。
- 物理真实感 — LLM 辅助物理推理。
- 4D 一致性 — DROID-SLAM 重投影、VFIMamba 插帧、运动 QA、VGG 风格。
论文:4DWorldBench。项目:yeppp27.github.io/4DWorldBench.github.io。代码:yeppp27/4dworldbench_code。
WorldFoundry 仓内托管官方 runtime(run_four_d_worldbench_official_runner.py),按官方 schema 的数据集 JSON 一次评一个 --dimension。官方数据集下载尚未发布;需自行提供 JSON 与生成视频。

评测维度
- 感知质量类型轴
CLIP-IQA、CLIP-aesthetic、FastVQA。
- Condition-4D 对齐类型轴
属性、关系、运动、事件、场景与相机误差控制。
- 物理真实感类型轴
LLM 辅助的物理推理。
- 4D 一致性类型轴
视角、运动平滑、运动问答与风格一致性。
数据组成
- 规模
调用方提供的 Condition-to-4D JSON 与生成视频。官方数据集下载尚未发布。四个轴:感知质量、Condition-4D 对齐、物理真实感、4D 一致性。
- 来源
github.com
- 模态
text · image · video · generated-video
- 说明
WorldFoundry 托管官方 runtime,一次评一个维度。不编造 4DWorldBench 榜单。
指标
指标
- 方向越高越好
perceptual_clip_iqa_metrics官方 4DWorldBench 帧级 CLIP-IQA 感知质量得分。
- 方向越高越好
perceptual_clip_aesthetic_metrics官方 4DWorldBench CLIP-aesthetic 感知质量得分。
- 方向越高越好
perceptual_fastvqa官方 4DWorldBench 时序视频质量得分。
- 方向越高越好
alignment_attribute_controlKeye-VL 是/否 judge:动态属性控制。
- 方向越高越好
alignment_relationship_controlKeye-VL 是/否 judge:动态空间关系控制。
- 方向越高越好
alignment_motion_controlKeye-VL 是/否 judge:运动顺序对齐。
- 方向越高越好
alignment_event_controlKeye-VL 是/否 judge:复杂情节/事件对齐。
- 方向越高越好
alignment_scene_controlKeye-VL 是/否 judge:复杂景观/场景对齐。
- 方向越低越好
alignment_camera_error_metrics用于相机控制对齐的 DROID-SLAM 相机轨迹误差;原始误差越低越好,反向归一化。
- 方向越高越好
physics_realism官方 LLM 辅助物理推理得分。
- 方向越低越好
consistency_viewpoint用于多视角一致性的 DROID-SLAM 重投影误差;原始误差越低越好,反向归一化。
- 方向越高越好
consistency_motion_smoothnessVFIMamba 插帧一致性得分。
- 方向越高越好
consistency_motion_qaKeye-VL 是/否 judge:运动一致性问题。
- 方向越高越好
consistency_styleVGG Gram 矩阵风格一致性得分。
- 方向越高越好
perceptual_quality归一化感知质量组件均值。
- 方向越高越好
condition_4d_alignment归一化 Condition-4D 对齐组件均值。
- 方向越高越好
physical_realism_score归一化物理真实感组件。
- 方向越高越好
four_d_consistency归一化 4D 一致性组件均值。
- 方向越高越好
four_d_worldbench_average可用 4DWorldBench 组件的归一化均分。
主指标4DWorldBench Average
Leaderboard
官方实时榜,嵌在本页。不是 WorldFoundry 跑分。 yeppp27.github.io/4DWorldBench.
如何运行
${WORLDFOUNDRY_UNIFIED_PYTHON} \
worldfoundry/evaluation/tasks/execution/runners/four_d_worldbench/run_four_d_worldbench_official_runner.py \
--run-official \
--dataset-json <dataset.json> \
--model-name <model_name> \
--dimension perceptual_clip_iqa_metrics \
--generated-video-dir <generated_artifacts> \
--output-dir tmp/4dworldbench/official \
--json依赖模型的维度会解析 WORLDFOUNDRY_4DWORLDBENCH_KEYE_MODEL、WORLDFOUNDRY_4DWORLDBENCH_DROID_CKPT、OPENAI_API_KEY。像素级维度不需要它们。共享栈:keye_vl、droid_slam、vfimamba、fastvqa。默认导入路径:WORLDFOUNDRY_4DWORLDBENCH_RESULTS_PATH。
仓内指针:worldfoundry/data/benchmarks/tasks/external/4dworldbench.yaml,worldfoundry/evaluation/tasks/execution/runners/four_d_worldbench。
产物包括 scorecard.json(主键 four_d_worldbench_average)与 raw_metric_table.jsonl。
