首页 每日新资讯 Deforum是AI视频生成工具,如何用它制作动画短片

Deforum是AI视频生成工具,如何用它制作动画短片

作者:每日新资讯
发布时间: 浏览量:1 0

Deforum信息介绍

Deforum是基于Stable Diffusion的开源AI视频生成工具,最初由社区开发者推出,专为生成连贯的动画和视频序列设计,它不像传统视频软件需要逐帧绘制,而是通过文本提示、图像输入结合算法生成动态画面,有点像给AI一个“动画剧本”,让它自动填充每一帧的细节,我第一次接触它是去年想做一段概念动画,朋友推荐说“试试Deforum,开源还免费,调参数就能出片”,当时还不信,结果上手后发现确实能省不少事。

Deforum核心功能有哪些

Deforum的核心功能里,文本驱动生成最让我惊喜,只要输入描述性文字,清晨的森林,阳光透过树叶洒在草地上,雾气慢慢散开”,它就能根据文字生成对应的动态场景,连光影变化都能模拟,关键帧动画功能也很实用,可以在时间轴上设置不同时间点的画面状态,比如第0秒是“平静的湖面”,第5秒是“湖面泛起涟漪”,第10秒是“一条鱼跃出水面”,AI会自动计算中间帧的过渡,比手动K帧轻松太多。

还有风格迁移功能,支持把现实视频或图像转换成特定艺术风格,我试过把一段城市街拍视频导入Deforum,选择“赛博朋克”风格,调整强度参数到0.8,生成的视频里建筑边缘泛着霓虹光,行人轮廓变成了色块拼接,效果比单纯用滤镜软件自然得多,参数自定义方面也很灵活,帧率、分辨率、采样步数、模型版本都能调,甚至可以选择不同的扩散模型,比如用SD 1.5还是SDXL,满足不同画质需求。

Deforum的产品定价

Deforum作为开源项目,目前官方暂无明确的定价,它的代码托管在GitHub上,用户可以免费下载安装,不需要支付软件使用费用,不过使用过程中会产生硬件成本,比如需要高性能GPU支持,我用的RTX 3060 12G显存,生成10秒1080P视频大概需要20分钟,如果显存不够,可能会出现卡顿或生成失败,如果没有本地硬件,也可以用云服务器部署,按小时付费,具体成本看服务器配置,这部分得自己算。

Deforum的适用场景有哪些

创作者制作短视频时用Deforum很合适,比如小红书博主想做“奇幻场景开箱”内容,不用实景拍摄,输入“漂浮的书本,魔法粒子围绕”,生成30秒视频配解说,轻松出片,动画师快速原型设计也离不开它,之前帮一个独立动画师朋友测试,他需要一个“机器人变形”的概念动画,用Deforum设置关键帧,2小时就生成了3个不同版本的原型,比手绘分镜效率高太多。

Deforum是AI视频生成工具,如何用它制作动画短片

教育领域也能用,生物老师讲“细胞分裂”时,用Deforum输入“细胞核分裂,染色体分离”,生成动画片段,学生看得更直观,游戏开发者做场景动画也方便,比如设计一个“废弃工厂”的环境动画,输入“生锈的管道,蒸汽缓慢喷出,灯光闪烁”,调整循环参数,就能得到可重复播放的背景动画,直接导入游戏引擎测试。

Deforum使用注意事项

用Deforum时,硬件配置得跟上,我之前用笔记本的GTX 1650试了一次,生成5秒720P视频花了1小时,还经常崩溃,后来换了台式机的RTX 4070,速度快了十倍,所以建议显存至少8G以上,GPU性能越强越好,参数调试要耐心,新手容易犯的错是提示词太简单,比如只写“太空”,生成的画面会很模糊,得加细节,深蓝色太空背景,分布着发光的恒星,远处有螺旋星系,镜头缓慢推进”,画面才会清晰有层次。

版权问题要注意,生成内容如果用于商用,得确认素材来源,虽然Deforum本身开源,但如果输入的参考图是有版权的,生成结果可能涉及侵权,我一般用自己拍摄的照片或无版权图库的素材当参考,避免后续麻烦,还有模型选择,不同模型擅长的风格不一样,比如RealVis擅长写实,ToonYou擅长卡通,得根据需求选,别盲目用最新的模型,适合的才最好。

和同类工具比Deforum有啥不一样

和Runway ML比,Deforum胜在开源免费,Runway的Gen-2功能很强,操作也简单,但免费版只能生成15秒视频,高清画质还要订阅,一个月35美元起;Deforum完全免费,想生成多长就多长,只要硬件撑得住,不过Runway对新手更友好,Deforum需要懂点参数设置,适合愿意折腾的用户。

和Pika Labs比,Deforum的自定义空间更大,Pika生成视频速度快,输入“一只猫在弹钢琴”,几秒就能出结果,但风格比较固定,偏卡通写实;Deforum可以调采样方法、步数、CFG值,比如用DDIM采样比Euler a更稳定,步数调到50画面更细腻,能生成各种小众风格,低多边形”“故障艺术”,创意限制少很多。

Deforum是AI视频生成工具,如何用它制作动画短片

和Stable Video Diffusion比,Deforum更侧重动画连贯性,SVD擅长图像转视频,把一张静态图变成动态短片,但时长通常只能10秒左右,且动作幅度大了容易糊;Deforum支持更长时间的视频生成,通过关键帧控制动作,生成30秒以上的动画也能保持画面连贯,适合做故事性视频。

如何用Deforum制作动画短片教程

第一步先安装环境,得先装Stable Diffusion,然后在扩展页面搜索“Deforum”,点击“安装”,重启WebUI后,在左侧栏就能看到Deforum标签,我第一次装的时候漏了装依赖包,生成时一直报错,后来看教程才知道要在命令行输入“pip install -r requirements.txt”,把需要的库补上才行。

第二步设置基础参数,打开Deforum界面,先选“视频模式”,输入视频长度(比如10秒),帧率24,分辨率1080x720,然后写提示词,这里要注意前后帧的关联性,比如开头写“[0:00:00] 平静的海面,天空是浅蓝色,有少量白云”,中间写“[0:00:05] 海面上出现一艘帆船,慢慢向镜头驶来”,结尾写“[0:00:10] 帆船靠近,能看到船上的旗帜飘扬”,时间戳格式要对,不然AI识别不了关键帧。

第三步调整生成参数,采样方法选“Euler a”,采样步数30,CFG值7(数值越高画面越贴合提示词,但可能生硬),模型选“RealVisXL V4”(写实风格),如果想让画面更连贯,把“motion bucket id”调到127(数值越高动作幅度越大),“noise schedule”选“linear”,这些参数我试了十几次才找到适合的组合,新手可以先从默认参数开始,生成一次后再微调。

第四步生成并调整,点击“Generate”按钮,等待进度条跑完,生成完如果不满意,比如某几帧画面模糊,就在对应时间戳的提示词里加细节,或者调整“strength”参数(控制每帧变化强度,0.5以下变化小,适合连贯动画),我上次生成“火焰燃烧”动画,初始参数strength设0.8,画面跳得厉害,改成0.3后,火焰流动就自然多了。

Deforum是AI视频生成工具,如何用它制作动画短片

常见问题解答

Deforum需要付费吗?

Deforum不用付费,它是开源工具,代码在GitHub上免费下载,安装后就能用,不过得有能跑Stable Diffusion的硬件,比如带独显的电脑,或者租云服务器,这部分硬件成本得自己承担,免费版功能和付费工具比,除了操作复杂点,生成效果一点不差,我用了半年,没花过一分钱在软件本身上。

Deforum生成视频需要什么配置?

最低配置建议显卡显存8G以上,比如RTX 3060 12G、RTX 4060,CPU和内存影响不大,8G内存够用,如果没高端显卡,也可以用云GPU,比如Google Colab免费版能跑,但生成速度慢,适合测试;付费云服务器像AWS、阿里云,按小时计费,RTX 4090配置一小时大概10-20元,生成效率高,我自己的电脑是i5-12400F+RTX 4070 12G,生成1分钟1080P视频大概40分钟,供参考。

Deforum能生成多长的视频?

理论上能生成任意长度的视频,只要硬件和时间允许,但实际用的时候,建议分段生成,比如生成3分钟视频,分成6段10秒的,每段单独调整参数,最后用剪辑软件拼接,因为一次生成太长,中间某帧出错就得重跑,分段生成容错率高,我最长试过生成1分钟的“四季变化”动画,分6段生成,每段10秒,总共花了3小时,效果还不错。

Deforum支持中文提示词吗?

支持,但效果不如英文提示词稳定,因为大部分预训练模型是基于英文语料训练的,中文提示词可能会出现理解偏差,比如输入“红色的苹果”,可能生成“绿色的苹果”,建议中英文混用,红色的苹果 red apple”,或者用翻译软件把中文提示词翻译成英文再输入,我一般用DeepL翻译后,再加几个英文细节词,生成效果会好很多。

Deforum和Pika Labs哪个更适合新手?

Pika Labs更适合纯新手,网页端操作,输入提示词点生成就行,不用装软件调参数,生成速度快,适合快速出片,Deforum适合愿意学参数的新手,虽然安装麻烦点,但学会后能做更复杂的动画,比如关键帧控制、风格自定义,创意空间更大,我表妹刚开始用Pika,后来想学进阶动画,我教她用Deforum,两周就上手了,现在能自己调关键帧做故事动画了。

欢迎 发表评论:

请填写验证码

评论列表

暂无评论,快抢沙发吧~