3DStability图生视频开源 多模态模型

Stable Video 3D SV3D

Stable Video 3D系列 · Stability AI · 2024-03发布

开源支持本地部署多模态国内可直连有免费额度

模型介绍

Stable Video 3D 从单张图生成 3D 环绕视频(novel view synthesis),为 3D 重建与摄影测量提供素材。

模型基础信息

模型系列Stable Video 3D系列
开发机构Stability AI
发布时间2024-03
参数规模~2B
上下文窗口图生 3D 视频
模型类型图生 3D 视频
中文能力一般
使用方式网页体验 / API调用 / 本地部署

免费额度与收费政策

开源免费

免费规则详情

开源可商用(遵守许可)。

收费标准简介

本地零成本。

模型能力介绍

✅ 核心优势

  • 单图 3D 环绕
  • 重建友好
  • 开源
  • 高质量

⚠️ 短板与局限

  • 非网格输出
  • 显存中高
  • 生态小

🎯 适用场景

  • 3D 重建
  • 摄影测量
  • 研究
  • 视觉特效

模型使用教程

本章节整理 Stable Video 3D 的在线体验、API调用、本地部署全套入门教程,快速上手使用该模型。

输入提示词或参考图生成视频。

提示词示例:「一只鹰展翅翱翔于山巅,夕阳逆光,电影级质感」

注册 Stability AI 账号,创建 API Key。

export API_KEY=sk-xxxx

提交生成任务,返回视频链接或文件。示例见 Stability AI 官方文档。

SV3D 基于 Stable Video Diffusion 的摄像头轨迹,生成 3D 环绕视频,需约 16-20GB 显存。

  1. 克隆仓库:git clone https://github.com/Stability-AI/stability-ai-sv3d && cd stability-ai-sv3d
  2. 安装依赖:pip install -r requirements.txt(PyTorch + SVD 依赖)。
  3. 下载权重:sv3d_base.safetensors(hf-mirror 可下,约 6GB)放入 checkpoints。
  4. 单图生成 3D 环绕视频:

python sv3d_standalone.py --input input.jpg --output sv3d.mp4

  1. 也可用 ComfyUI 的 SVD 节点直接出环绕视频,再配合 Tripo/InstantMesh 生成网格。

Tips:输入图建议主体居中、背景干净;输出为多视角视频,需后处理生成网格。

💡 使用小技巧

配 NeRF/Gaussian 流程用。

❓ 常见问题 FAQ

Q1:SV3D 用途?\nA1:生成 3D 环绕视频。

访问备注与注意事项