Bernini-R 1.3B

论文方法总览:MLLM 语义规划器加上 DiT 渲染器,并在统一多模态序列上使用片段感知 3D RoPE。

Bernini-R 1.3B(ByteDance):文生图、图像编辑;Runner 一致性待确认; 独立环境 `worldfoundry-bernini-cu124`。

Bernini-R 1.3B 是字节 Bernini 系列中的小型「仅渲染器」成员——由 Wan2.1 1.3B 微调而来的 1.3B 渲染 checkpoint,覆盖与大模型相同的六类任务。它是单卡体验 Bernini 任务面的实用选择。WorldFoundry 树内内置渲染器推理代码,加载 ByteDance/Bernini-R-1.3B-Diffusers。

论文方法总览:MLLM 语义规划器加上 DiT 渲染器,并在统一多模态序列上使用片段感知 3D RoPE。
论文方法总览:MLLM 语义规划器加上 DiT 渲染器,并在统一多模态序列上使用片段感知 3D RoPE。

记录论文为Bernini: Latent Semantic Planning for Video Diffusion(2026)。

项目页:bernini-ai.github.io。代码:bytedance/Bernini。

这不是规划+渲染的 Bernini,也不是 Bernini-R 14B。

同一篇论文:Bernini: Latent Semantic Planning for Video Diffusion。项目页:bernini-ai.github.io。权重:ByteDance/Bernini-R-1.3B-Diffusers(apache-2.0)。GPU 产物一致性待验证。状态:Runner 一致性待验证。

构建运行命令

推理 Pipeline
BerniniWorldFoundryPipelineworldfoundry.pipelines.bernini.pipeline_bernini
任务
环境worldfoundry-bernini-cu124
设备CUDA 12.4
Runnerworldfoundry.pipeline
加载方式from_pretrained
调用方式native_or_standard_invocation
worldfoundry-eval run \
  bernini-r-1.3b \
  --pipeline.task-profile t2v \
  --json

用来做什么

需要本系列的文生视频时选 bernini-r-1.3b:prompt 进、生成视频出。它是 catalog 上的 T2V 起步线,不是编辑器,也不是世界模型步进器。

manifest 明确记录:这是一个由 Wan2.1 1.3B 扩散 Transformer 基座微调而来的 1.3B 纯渲染 checkpoint;完整 Bernini 设计中的 7B 规划阶段不包含在内。

catalog 记录的任务包括 文生图、图像编辑、文生视频、视频到视频。别名包括 bernini-r-1p3b、bernini-r-1.3b-diffusers。模态上,它接受文本、图像、视频,输出图像、视频。

记录的评测入口包括VBench(小渲染器的快速质量标尺)。

运行时契约

可选 prompt、task_type、neg_prompt、num_frames、height;产物 generated_image、generated_video、bernini-r-1.3b.mp4。

CLI task profile:t2v、t2i、i2i、v2v、r2v、rv2v。绑定的 pipeline 类是 BerniniWorldFoundryPipeline。

系列状态:Runner 一致性待确认。

通过 task_type 选择任务;checkpoint 为 apache-2.0,需在本地就位。

1.3B 容量使保真度低于 14B 渲染器与完整规划+渲染流程。

在 WorldFoundry 中运行

catalog 启动命令是 worldfoundry-eval run bernini-r-1.3b --pipeline.task-profile t2v。上方命令构建器按已记录任务切换 --pipeline.task-profile,发出的仍是 worldfoundry-eval run。

运行环境是独立 profile worldfoundry-bernini-cu124(Python 3.11,CUDA 12.4,torch==2.5.1+cu124)。

记录的权重仓库包括 ByteDance/Bernini-R-1.3B-Diffusers、ByteDance/Bernini-R-1.3B-Diffusers。准备环境并检查本地资产:bash scripts/inference/prepare_model_infer.sh bernini-r-1.3b;下载缺失的公开权重时加 --download。

记录 license 为 apache-2.0;状态:Runner 一致性待确认。