OpenAI Sora发布AI生成西游记动画短片，展现文生视频技术新突破
视频制作者开始制作AI视频有不少，是因随着多个文生图、以及文生视频软件发布，第一财经记者了解到，文生视频AI工具Sora已发布数十个展现人工智能生成视觉体验提供文生视频新可能的视频 。
例如，近日有一个用AI技术生成的动画片，时长近4分钟，内容关联《西游记》，它展现了石猴从降生到拜师学艺的整个过程，其中不乏花果山、水帘洞的场景，洞内水流、植物以及摆设错落有致，天庭依傍山势而建，视频还细致显现了孙悟空乘船前往城镇、抵达灵台方寸山的经过，画面之中，山峦雾气弥漫，水面有落叶等诸多微小画面呈现，街景之中不乏身着古代服饰的行人、门楼以及商店，这段视频发布于抖音之上，目前已有超过70万的观看量。还有一个由AI制作的《大闹天宫》预告片，其播放量超过了100万，在画面里，天庭的座椅、服饰彰显着庄严，镂空的器皿展现出设计细节，人物面部表情很自然。
视频平台上，一些由AI制作的MV，或者预告片、宣传片，获取了数十万的播放量。比如说，有一个动物版《恭喜发财》MV，里面存在多个小狗身着红色传统服饰的画面，并且小狗们演奏多种乐器，它还骑自行车，且写毛笔字，画面的细节十分丰富，动物毛发的细节清晰可见。广西卫视在网上放出了全由AI制作的龙年宣传片。据记者观察，这些AI视频具备这样的共同点，画面清晰而且还富有细节，然而每个分镜的时长仅仅只有几秒，当人物讲话的时候还没有能够匹配适宜的嘴型，画面的连贯性以及叙事性相对影视来说仍然有着距离，正是这些特点使得目前的AI视频相对更适合去制作预告片、MV等对于叙事要求不那么高、对于画面冲击力要求比较高的中短视频。
视频创作人员正使用着好些 AI 视频制作工具，Sora 与之不一样能带来明显收获，于视频时长方面，它有得天独厚的长处，能够直接生成 60 秒视频，然而 Sora 现在还没有面向大众开放使之能够使用。有记者察觉到，好多借助 AI 来制作视频的时候利用 AI 绘图装备先生成一幅幅图片，接着运用图生视频工具来打造 AI 视频。就像前面提到的长约 4 分钟的《西游记》动画，其创作所运用的工具是 AI 绘图工具和图生视频工具，在进行构思这个阶段运用了剖析原著文字并规划分镜的方式，之后借助剪映实行剪辑。制作和使用了以上《大闹天宫》预告片，剧本设计借助大语言模型予以辅助 。
有个从事美术工作达15年的博主“AI疯人院”，发布了上边提到的《西游记》动画，他讲，要去人工制作那个视频的话，起码得需要半年时间，然而他自己在AI的协助下只用一周就把它完成了。可他又同时表明，给绘图以及由图片生成视频的这个过程当中，还会出现废稿，并且AI很难全然理会创作者的意图，存在着随机性。发布《大闹天宫》预告片的那位博主在评论里讲，AI迭代速度太快了，预测做成一部长达三个半小时的电影估计能够在两年内达成。然而，存在部分网友，针对AI视频做出评论，声称，AI生成的内容，依旧呈现出僵硬的态势，看似如同PPT一般，并且其风格，仍旧难以与主题达到契合的程度。
目前，市面上能够生成AI视频的工具里，还涵盖了谷歌、阿里云-XL等。阿里云在一个视频当中进行介绍，生成视频无需美术以及编导基础，创作者能够在魔搭创空间寻觅到AI应用，借助该应用，于生成剧本之际会用到Qwen-7B-Chat大模型，在文生图之时会使用SDXL模型，进而由图片生成视频，阿里云的视频生成软件为开源的-XL，音乐居然也能够通过提示词AI予以生成。
有影视制作者向第一财经的记者表明，AI技术已在视频制作里得到应用，在平面设计方面效果颇佳，然而在AI视频当中，当下逐帧光影衔接存有问题，从Sora所放出的视频来看，同样存在逐帧的衔接问题。
距离2023年开始到现在，跟AI视频以及图片有关联的技术始终在不断地持续迭代，举例来说哦，之前香港科技大学、蚂蚁团队、浙江大学CAD&CG实验室一起合作的项目CoDeF，它的算法能够依据提示词来对视频进行风格转换呢，香港大学、阿里巴巴以及蚂蚁集团的新成果能够达成图片里物体瞬间移动，在学界之中还有研究团队正在探索图像修复以及还原技术。
栏目主编是秦红，文字编辑为程沛，题图来源是上观题图，图片编辑是曹立媛。
欢迎 你 发表评论: