AniSora

AniSora是什么?

AniSora（全称Index-AniSora）是专注于动画视频生成的AI动画视频生成开源模型，聚焦Sora时代动画视频生成前沿技术，以开源、透明、社区为原则，基于先进的时空建模技术，为用户提供简单方便的AI动画视频制作能力，开放全量代码助力技术研究和二次开发，适合个人创作者、动画制作人等各种动画制作的需求。

AniSora主要功能

• 图生动画视频生成:支持用户上传图片，输入自然语言文字，一键生成生动的动画视频。能对用户预设的用户动作、场景动作、镜头、机位等完全匹配，精确还原画面中人物、场景特征的场景内容描述，从而零编程就可以生成动画。
• 时空维度精准控制:融合当前先进的时间建模、空间控制技术，能够实现关键帧平滑的插值控制，保证长视频中角色动作及场景画面元素空间一致性的要求，适应复杂动作场景动画制作的通用性，解决 AI 动画视频经常出现的画面崩塌、姿态变形、动作卡顿等行业痛点。据业内专家使用体验，精确的时空控制能力可以将整个动画流程创作时间减少50%，提升动画画面一致性及动画角色动作表现质量 65%，动作表现流畅度比同类型方案提升60%。
• 多风格动画适配创作:可生成多动漫风格的动画，内置风格保护算法，保证每一帧画面风格一致，适应条漫转动画、日系动画、国风动画等多种风格需求，最大程度保护原动画艺术性不流失，可减少70%的制作人工后期调整量。
• 高画质动画内容输出:支持4K画质的动画视频生产，具备帧插值能力和大范围光线模拟能力，可生产视频质感的动画内容；复杂光线型的渲染效率高于常规，既保证良好的画质，也保证制作效率，可满足专业内容的制作需求。
• 开源开放与生态兼容:采用Apache 2.0开源协议，全量代码开源开放，个人用户、企业用户均可免费使用、修改，可用于商业项目。模型无缝接入当前市面流行的动画制作软件，支持专业动画制作的工作管线，同时支持全球开发者参与社区共建，推动模型能力迭代。

适用场景

• 专业动画制作团队与职业动画师:可用于动画Demo快速制作、动画分镜动态化、正片内容制作、动画视效特效等全流程工作，缩短动画制作周期，降低劳动成本，提高角色动作和画面的一致性，适合工业化动画工作流程。
• 漫画、条漫创作者:可以将静态的漫画、条漫动态化，在风格一致性作用下保证风格一致，低人力成本完成漫画、条漫的动画改写内容制作，扩展内容的表现形式和传播渠道。
• AI技术研发人员与开源技术爱好者:可以从开源模型上开展模型再开发、算法改进、研究等工作，也可以参与开源社区建群，并为AI动画生成开源模型做出贡献。
• 短视频与自媒体创作者:可以快速制作动漫风格的短视频、动态插画、剧情动画等短视频、适应各大内容平台内容的创作和传播需求，大幅降低制作动画内容的工作门槛和时间成本。
• 影视与视效制作从业者:可以用于制作角色动态预演、建模灯光预演、动画特效等环节，提升视效的制作效率，生产出影视级别的动画质感内容，适应影视工业化的需求。 

AniSora怎么使用?

一,官方开源模型本地部署使用

前置环境要求

推荐NVIDIA显卡（显存≥8GB，4K 生成推荐≥24GB），已安装Python 3.10、Anaconda、Git、CUDA Toolkit，系统优先 Linux/macOS，Windows 可兼容运行。

分步操作

1. 克隆官方项目仓库：打开一个终端，执行克隆 GitHub 官方项目仓库的命令，然后进入到项目仓库下。

git clone https://github.com/bilibili/Index-anisora.git
cd Index-anisora

2. 配置Python运行环境：用Anaconda创建一个新环境，激活环境安装需用的Python软件包。

conda create -n anisora python=3.10
conda activate anisora
pip install -r requirements.txt

3. 下载预训练模型权重：从 HuggingFace/ModelScope 下载 text_encoder、VAE 和 5B 的模型权重，分别放到项目的 ./pretrained_models/、./ckpt/ 目录下。

4. 配置生成参数：修改 demo.py 和相应的 config 配置文件，配置视频分辨率、时长、提示词、参考图像路径、硬件加速选项等信息，多卡环境下可以配置 offload 参数调整显存占用。
5. 执行动画生成：在终端运行推理脚本，启动 AI 动画生成任务，等待程序运行完成

python demo.py –base configs/cogvideox/cogvideox_5b_720_169_2.yaml

6. 查看与导出作品：生成好了之后，在项目的输出文件夹查看成品视频；直接观看或上传导出即可。

二,ComfyUI 可视化界面使用 

1. 安装 ComfyUI 主程序：克隆 ComfyUI 官方仓库，完成基础环境与依赖安装，确保主程序可正常启动。

2. 安装 AniSora 插件：进入 ComfyUI 的custom_nodes目录，克隆插件仓库，安装对应依赖。

git clone https://github.com/Yuan-ManX/ComfyUI-AniSora.git
pip install -r requirements.txt

3. 放置模型权重：将下载好的 AniSora 预训练权重，放入 ComfyUI 对应的models文件夹中。

4. 启动可视化界面：运行 ComfyUI 启动脚本，打开网页端界面，在节点列表中找到 AniSora 相关功能节点。

5. 搭建创作工作流：按需求连接功能节点，上传参考图片、输入正反提示词，设置视频分辨率、时长、风格等核心参数。

6. 运行生成与导出：点击执行按钮，等待 AI 完成动画生成，结束后可在界面直接预览，或导出视频文件到本地。

通过上面新媒派分享的两种操作方法,你就可以把这个工具很好的用起来!