AnimateDiff

一句话简介

AnimateDiff是一款开源的AI动画生成框架，能够将Stable Diffusion等静态文生图模型无缝转化为高质量的动态视频生成器。

网站介绍

AnimateDiff是由上海人工智能实验室、香港中文大学和斯坦福大学的研究团队联合推出的开源AI动画生成项目。它的核心作用是为现有的个性化文本到图像（Text-to-Image）模型注入运动建模模块，从而让静态图片“动”起来，生成流畅的GIF或视频动画。

该项目主要面向AI绘画爱好者、数字艺术家、视频创作者以及AI开发者。用户无需对原有的文生图模型进行复杂的重新训练或微调，即可直接利用AnimateDiff将想象力转化为具有动态效果的高质量视觉内容。

核心功能/栏目

1. 文本生成动画（Text-to-Video）：用户只需输入文本提示词，即可直接生成符合描述的动态动画序列。

2. 图像生成动画（Image-to-Video）：支持将现有的静态图片作为起始帧，结合提示词生成连贯的动态视频。

3. 运动模块（Motion Module）支持：提供多种预训练的运动模型，用于控制动画的运动幅度和流畅度。

4. 镜头运动控制（Motion LoRA）：配合专属的LoRA模型，可实现平移、旋转、缩放、推拉等专业摄像机镜头运动效果。

5. 多格式输出：支持将生成的动画导出为GIF、MP4、WEBP等多种常用视频和动图格式。

6. 闭环循环生成：提供多种闭环选项，使动画的最后一帧与第一帧无缝衔接，实现无限循环播放效果。

推荐优势/特点

1. 即插即用，无需微调：AnimateDiff的核心优势在于“一次训练，普遍适用”。它可以直接与现有的Stable Diffusion模型及各类个性化模型集成，无需针对特定模型进行额外训练。

2. 保持原有风格特性：在生成动画的过程中，能够完美保留基础文生图模型原有的画风、细节和领域特性，确保动画内容与用户定制的风格高度一致。

3. 开源免费且生态丰富：作为完全开源的项目，用户可以免费获取源码和模型。同时，它已深度融入Stable Diffusion WebUI和ComfyUI等主流AI绘画生态，社区支持强大。

4. 画面稳定流畅：通过引入时间维度的注意力机制和大规模视频数据训练，生成的动画帧与帧之间过渡平滑，有效减少了传统AI视频常见的画面闪烁和形变问题。

使用方法/入口指引

1. 访问官网与获取资源：用户可通过浏览器访问AnimateDiff官方项目主页（animatediff.github.io）了解技术细节，或前往其GitHub仓库下载源代码和预训练模型。

2. 环境准备：本地部署需要一台配备NVIDIA显卡的电脑（建议显存8GB及以上），并提前安装好Stable Diffusion WebUI或ComfyUI环境。

3. 插件安装：在Stable Diffusion WebUI的扩展页面，通过GitHub链接安装AnimateDiff插件；或在ComfyUI中安装对应的AnimateDiff节点。

4. 模型配置：将下载好的运动模型（如mm_sd_v15_v2.ckpt）放入插件指定的model文件夹中，并根据需要下载对应的Motion LoRA。

5. 生成动画：在WebUI的文生图或图生图界面启用AnimateDiff插件，设置帧数、帧率（FPS）和输出格式，输入提示词后点击生成，即可在输出目录中获取动画文件。

同类/相关网站推荐

1. Stable Diffusion（Stability AI）：全球最流行的开源AI图像生成模型，也是AnimateDiff的核心基础平台，提供强大的文生图和图生图能力。

2. ComfyUI：一款基于节点式架构的Stable Diffusion图形用户界面，适合需要高度定制化工作流和精准控制动画生成过程的高级用户。

3. Runway：一款知名的商业级AI视频生成平台，提供网页端直接使用的文本或图像生成视频服务，适合不想进行本地部署的普通用户。

4. Pika Labs：另一款热门的AI视频生成工具，支持通过网页端快速将文本和图片转化为具有动态效果的短视频。

5. Deforum：Stable Diffusion生态中另一款经典的动画生成插件，主要通过关键帧和摄像机运动参数来生成具有强烈视觉冲击力的运镜动画。