Kairos Sensenova

Kairos Sensenova（SenseTime (SenseNova)）：文生视频、图生视频；已验证; 独立环境 `kairos-sensenova`。

最后更新: 2026年10月7日

Kairos Sensenova 是商汤的具身世界模型视频生成器：4B 模型覆盖文生、图生与文+图生视频，并有面向机器人的蒸馏配方。本 catalog 中集成与 runner 均已验证——默认的 robot 4B 480P DMD 文生视频配方经树内 Apache-2.0 torchrun 运行时以 8 rank 运行。

论文官方 Teaser：Kairos Sensenova 的交互世界模型论文配图。

记录论文为arXiv 2606.16533。

代码：kairos-agi/kairos-sensenova。

构建运行命令

推理 Pipeline

KairosPipelineworldfoundry.pipelines.kairos.pipeline_kairos

变体

任务Default default

环境kairos-sensenova

设备CUDA 12.8

Runnerworldfoundry.pipeline

加载方式from_pretrained

调用方式native_or_standard_invocation

worldfoundry-eval run \
  kairos-sensenova \
  --pipeline.task-profile default \
  --json

用来做什么

kairos-sensenova 是记录的交互世界线。要用动作推进世界时从这里起步。

默认可运行 variant 遵循官方 robot 4B 480P 蒸馏配方（kairos_4b_config_DMD.py）：81 帧、 480x640、cfg_scale 5、分块 VAE 解码、无 CFG 并行。记录的 checkpoint 覆盖 robot 480P 蒸馏、480P 预训练与 720P 三个 variant；配置布局要求 Kairos、Qwen 与 Wan2.1-T2V-14B 子目录。该模型由商汤科技（日日新 SenseNova）发布。

catalog 记录的任务包括文生视频、图生视频、text-image-to-video、具身世界模型。别名包括 Kairos、Kairos Sensenova、kairos-4b、kairos-sensenova-4b。模态上，它接受文本、图像，输出视频。

记录的评测入口包括VBench（文/图生视频输出的质量评测）、EWMBench（具身世界模型预测质量）。

运行时契约

可选 prompt、negative_prompt、frames、height、width；产物 kairos-sensenova.mp4。

CLI task profile：default。绑定的 pipeline 类是 KairosPipeline。

系列状态：已验证。

default 记录默认值：frames=81, height=480, width=640, seed=0。

将 WORLDFOUNDRY_KAIROS_MODELS_ROOT（或 models_root）指向符合官方配置布局的目录。 720P 与非蒸馏 variant 需要对应的 checkpoint 路径与配置覆盖。

在 WorldFoundry 中运行

启动 worldfoundry-eval run kairos-sensenova --pipeline.task-profile default 推进世界。上方命令构建器按已记录任务切换 --pipeline.task-profile，发出的仍是 worldfoundry-eval run。

记录的权重仓库包括 kairos-agi/kairos-sensenova-robot-4B-480P-distilled、kairos-agi/kairos-sensenova-4B-480P-pretrained、kairos-agi/kairos-sensenova-4B-720P。准备环境并检查本地资产：bash scripts/inference/prepare_model_infer.sh kairos-sensenova；下载缺失的公开权重时加 --download。

状态：已验证。

Kairos Sensenova

用来做什么

运行时契约

在 WorldFoundry 中运行

相关模型