Visual Chronometer

Visual Chronometer（德州农工 TACO Group）预测 物理帧率（PhyFPS）——视觉运动暗示的时间尺度——忽略容器元数据。训练用受控时间重采样与物理增强（运动模糊、卷帘快门）。作为 WorldFoundry benchmark，它给 任意视频目录 打分（不是固定 prompt 套件）：平均 PhyFPS 加上视频内 / 视频间变异系数。越低表示时间行为越稳。

生成侧审计见 PhyFPS-Bench-Gen（100 prompt 的 Meta-vs-PhyFPS）。

代码：taco-group/Visual_Chronometer。权重：xiangbog/Visual_Chronometer（vc_common_10_60fps.ckpt，10–60 FPS）。

WorldFoundry 通过与 PhyFPS-Bench-Gen 共享的封装在进程内跑 predict.py，或导入 results.csv。运行时 / 归一化表面存在；不声称已做发布级完整官方运行。

评测维度

• PhyFPS 预测

  类型轴

  滑动窗口上由视觉运动暗示的物理帧率。一致性指标全部越低越好。

数据组成

• 规模

  TACO 的任意视频 PhyFPS 预测器（不是固定 prompt 套件）。发布的 VC-Common 权重覆盖 10–60 FPS。与 PhyFPS-Bench-Gen 共用 runtime。

• 来源

  github.com

• 模态

  video

• 说明

  运行时/归一化表面存在；不声称已做发布级完整官方运行。Mock 后端只是接线。

指标

指标

• mean_phyfps

  方向越低越好

  受评视频的平均 PhyFPS 均值。

• inter_video_cv

  方向越低越好

  逐视频平均 PhyFPS 的跨视频变异系数。

• intra_video_cv

  方向越低越好

  滑动窗口片段上视频内变异系数的均值。

• visual_chronometer_average

  方向越低越好

  可用 Visual Chronometer 一致性得分族的均值。

  主指标Visual Chronometer Average

Leaderboard

论文报告结果（非实时榜；不是 WorldFoundry 跑分）。 表 2 预测器精度，不是生成模型排名。视频输入的 VLM 行。 The Pulse of Motion: Measuring Physical Frame Rate from Visual Dynamics (2026).

模型	PhyFPS-Bench-Real 上的 MAE（越低越好）
VC-Commonours	3.46
VC-Wideours	7.76
Seed-1.6-Flashvideo VLM	20.00
Seed-1.6video VLM	20.40
Gemini-3.1-Provideo VLM	21.67
Gemini-3-Flashvideo VLM	23.40

如何运行

worldfoundry-eval zoo benchmark-run \
  --benchmark-id visual-chronometer \
  --mode official-validation \
  --official-results-path <results.csv> \
  --generated-artifact-dir <generated_videos> \
  --output-dir tmp/visual-chronometer/official-validation \
  --json

--generated-artifact-dir 加 WORLDFOUNDRY_VISUAL_CHRONOMETER_PREDICT_BACKEND 选择本地预测。环境变量：WORLDFOUNDRY_VISUAL_CHRONOMETER_RESULTS_PATH、WORLDFOUNDRY_VISUAL_CHRONOMETER_ROOT。

仓内指针：worldfoundry/data/benchmarks/tasks/external/visual-chronometer.yaml，worldfoundry/evaluation/tasks/execution/runners/phyfps_bench_gen/runtime/visual_chronometer。

产物包括 scorecard.json（主键 visual_chronometer_average）与 results.csv。

← 返回 Benchmark Hub