AI绘画已成熟，AI制作视频动画的发展前景与挑战探讨
字数：1383
预计阅读：04分钟
人工智能属于未来发展的主要路线范畴，AI绘画是人工智能应用里较为成熟的板块。鉴于AI绘画已能达成这般出色的程度，那么运用AI来绘制动画会呈现怎样的状况呢？本文会针对AI制作视频动画的诸多细节展开探讨 。
# 01
AI制作视频动画的两种方式
人类是如何让图片动起来的呢？
人眼在观察连续变化的图像序列时，人们发现会产生一种错觉，致使我们知觉到观察目标在运动，这种错觉称作动态视觉。人眼的视觉系统存在一定的延迟以及持续时间，这致使先前观察到的图像信息在短暂时间里依旧留存于我们的视觉记忆中。当连续的静态图像以足够快的速度连续播放时，我们的大脑把这些图像连接起来，且认为它们构成了一个连续的动画或者运动。
先是有一张张两两不同的图片，这些图片被快速播放，如此这般然后产生出动态效果，而这些可爱的小家伙正是由这动态效果而来的 。
让AI生成那种有着形象一致，动作缓慢变化的人物图片，且是在某种约束之下，然后把这些图片，以一定速度逐个去播放。电影里呢，连续的图像，是以每秒24帧或者更高的速度播放的。由于视觉暂留的效应，观众可以感知到这些静态图像的流畅运动，进而创造出动态的视觉体验。类似的情况，在动画制作当中，是通过快速播放一系列有着微小变化的图像，以此创造出动画角色以及背景的运动 。
这时，AI做动画就只剩下最后一个难点了，是怎样生成微小变化的图像，要晓得如今的AI绘画随机性相当高，即便运用了昨天介绍的插件，也没法确保AI绘画的一致性，这便引出了两套方案，其一为AI转绘，其二是AI生成。
# 02
AI转绘
在AI转绘里，确切来讲是先逐个截取视频的每一帧画面，接着把这些截取的画面提供给AI，然后借助相同风格的关键字，让AI依据这些关键字通过AI绘画的方式再次进行绘制工作。这之后，再把新生成的诸多图像，按照之前拆分出来的顺序，重新组合成一个视频 。
在这个方法下有两个比较有代表性的插件。
插件
插件
当前存在着局限性，此局限性主要呈现为两点，其一乃是细节丢失的程度极为严重，其二则是极易出现闪烁的状况 。
细节有着严重的丢失情况，情况之所以如此是由于要保证前后两帧的图片存在差异性，为了对视频的流畅度予以保障，这样就会出现细节上约束的丢失，像为了达成更加流畅的效果，会采用厚涂等待那种细节较少的画风句号。
它的优势在于，对算法算力依赖程度低，能够设定人物动作，视频走向能由人把控，能依据拍好的视频素材来绘制。
# 03
AI视频生成
直接生成AI视频，实际上是AI转绘升级的版本。它要收集公开的视频，把视频拆分成不连续的数据集，学习关联的视频描述，以此生成模型的基础描述。只要视频拆分得足够小，像1至5帧成为一个视频那样就行，那么其画面的变化也就足够小，能够与图片数据集作对比，进而生成关键字。这样就能完成从视频到文字的转译。当反向操作提供了文字集的时候，便可以生成对应的视频。
这种方式代表作有： video 和 的sora
当然我这里只是简单介绍，实际上的算法比我说地要复杂。
# 04
小结
先是今天，简略地说明了一下，AI绘画生成视频究竟是会怎样形成的步骤流程。然后明天，能够去介绍一番，这款由国人所制作出来的插件。
题外话：一直想好好记录一下生活，就从坚持写作推文开始吧。
今天是持续写作第 23 / 600 天。
欢迎 你 发表评论: