Open-Sora Plan:打造开源Sora视频生成模型

构建一个高性能、可扩展的开源视频生成库

直达下载
返回上一页
描述
加入Open-Sora Plan,一起打造和提升开源Sora视频生成模型。
介绍

Open-Sora Plan是一个致力于复现和改进Sora视频生成模型的开源项目,由北大兔展AIGC联合实验室主导。该项目目标是通过社区的力量,提升视频生成的质量和文本控制能力,支持更高分辨率和更长视频的生成。

home_open_OpenSora_Plan_1

1. 项目概述

Open-Sora Plan通过以下几个阶段实现其目标:

  • 基础建设:建立代码库,训练一个无条件模型以及提高模型分辨率和视频时长的模型。
  • 扩展实验:在风景视频数据集上进行文本到视频的实验,控制模型的更多条件,如文本、图像和分辨率。

2. 安装与使用

安装步骤

  1. 克隆仓库并导航至Open-Sora-Plan文件夹:

        
    git clone https://github.com/PKU-YuanGroup/Open-Sora-Plan
    cd Open-Sora-Plan
    
  2. 安装所需包:

        
    conda create -n opensora python=3.8 -y
    conda activate opensora
    pip install -e .
    

使用示例

  • 使用Gradio Web UI体验在线演示:

        
    python -m opensora.serve.gradio_web_server
    
  • CLI推理命令:

        
    sh scripts/text_condition/sample_video.sh
    

从安装到实际操作的过程中,所有步骤都被设计得非常简洁明了,即便是对AI和机器学习不太熟悉的用户也能相对容易地上手。使用过程中,尤其是通过Gradio Web UI进行的在线演示,给了我直观的体验感受。

AI工具教程
免费领取AI学习资料 进AI副业交流群
礼物
AI工具教程
免费领取AI学习资料 进AI副业交流群