首页 每日新资讯 Rokoko Video是什么如何用它制作动作捕捉视频

Rokoko Video是什么如何用它制作动作捕捉视频

作者:每日新资讯
发布时间: 浏览量:3 0

Rokoko Video基础信息

Rokoko Video是一款主打“轻量化动作捕捉”的工具,简单说就是不用那些笨重的传感器、专业的光学设备,拿个普通摄像头甚至手机拍段视频,它就能把视频里的动作“抠”出来,变成数字模型能用的动作数据,我第一次听说这工具时,还以为是啥高科技黑魔法,后来查了下才知道,它背后是计算机视觉和AI算法在发力,把视频里的人体关节点识别出来,再转换成3D动作数据。

这工具是Rokoko公司搞出来的,他们家本来就做动作捕捉设备,之前的Smartsuit Pro系列需要穿惯性传感器套装,虽然精准但价格不便宜,普通小团队或者个人玩家可能觉得门槛高,Rokoko Video算是他们放出来的“亲民款”,想让更多人能用得起动作捕捉,毕竟不是谁都有几十万预算搭专业动捕棚的。

现在它主要支持Windows和macOS系统,手机端好像还在开发中,不过用电脑连个摄像头就能跑,对硬件要求不算高,我之前用家里十年前的老笔记本试过,虽然有点卡,但基本功能都能跑起来,这点还是挺良心的,没把门槛设得太死。

Rokoko Video是什么如何用它制作动作捕捉视频

Rokoko Video核心功能

视频转动作数据是它的看家本领,你拍段人做动作的视频,不管是跳舞、跑步还是比划手势,丢进软件里,它会自动分析视频每一帧,标出人的头、肩、肘、手腕、髋、膝、脚踝这些关节点,然后把这些点的运动轨迹转换成3D空间里的动作数据,我试过拍自己跳广播体操,软件识别出来的动作虽然有点小偏差,但大方向是对的,比我手动K帧快多了。

实时预览也挺实用,连接摄像头后,你在镜头前动,软件里的3D模型会跟着实时动,就像照镜子一样,哪里动作不对当场就能看到,有次我拍一个挥手的动作,一开始胳膊抬得太低,实时预览里模型的手都快碰到肚子了,赶紧调整姿势,省得后期还要返工改数据。

多设备兼容性这点必须夸,它导出的动作数据格式特别多,FBX、BVH这些主流的3D软件格式都支持,像Blender、Maya、Unity、Unreal这些常用工具直接就能导进去用,我之前用Blender做动画,导进去的动作数据基本不用怎么调,模型就能跟着动起来,省了不少事。

还有个动作编辑功能,虽然不如专业动捕软件那么复杂,但基础的调整够用了,比如动作太快可以放慢,某个关节角度不对可以手动拖拽调整,甚至还能把两段动作拼在一起,我上次做一个“走路+转身”的动作,就是先拍走路视频,再拍转身视频,然后在软件里把两段数据拼起来,效果还挺自然。

Rokoko Video产品定价

目前官方暂无明确的定价,我去Rokoko官网看了,现在Rokoko Video还处于“Beta测试”阶段,说是可以免费下载使用,但有一些功能限制,比如导出的动作数据可能带水印,或者分辨率、时长有限制,之前听群里的大佬说,正式版可能会分免费版和付费版,免费版保留基础功能,付费版解锁更多高级功能,比如无水印导出、更高精度捕捉、多摄像头支持之类的。

不过具体多少钱还没定,有小道消息说可能跟他们家其他产品一样,走订阅制,比如每月几十美元,或者按年付费更划算,也有人猜可能会推出一次性购买的永久授权,但现在都还没个准信,反正现阶段想试试的话,直接去官网下载Beta版就能用,虽然有限制,但体验一下核心功能完全够了,等正式版出来再决定要不要掏钱也不迟。

Rokoko Video适用场景

独立游戏开发者绝对是最大受益者,小团队没预算请专业动捕演员,也买不起贵设备,用Rokoko Video拍自己或朋友做动作,导进游戏引擎里,角色就能动起来了,我认识一个做独立游戏的朋友,之前角色走路动作都是他手动K帧,花了一周才弄好一个循环,用了这个工具后,拍段视频半小时就搞定,剩下的时间全用来优化游戏玩法了。

短视频创作者也能用它整活,现在好多虚拟主播、动画短视频,人物动作要是太僵硬就没人看,用Rokoko Video拍自己做表情、做手势,实时驱动虚拟形象,画面会生动很多,我见过有人用它拍跳舞视频,然后把动作数据导给3D模型,做出来的动画跟真人跳舞几乎同步,点赞量比普通动画高不少。

教育领域也挺合适,学校教3D动画或游戏设计,学生没钱买专业设备,用这个工具就能上手实践动作捕捉,老师可以带着学生拍段简单的动作,然后在软件里分析关节运动,理解动画原理,我们学校动画课老师就推荐过,说比单纯讲理论效果好多了,学生自己动手做一遍,记得更牢。

甚至普通爱好者也能玩起来,比如喜欢做MMD动画的,之前找动作数据要么靠别人分享,要么自己慢慢调,现在拍段自己跳舞的视频,就能生成专属动作数据,想跳什么舞就做什么动作,再也不用愁没素材了,我表妹就用它给她的虚拟偶像做了段“科目三”舞蹈,在社交平台小火了一把。

Rokoko Video使用注意事项

拍视频的时候光线一定要足,我第一次用的时候在晚上拍,房间光线暗,软件识别关节点老是出错,不是把胳膊识别成腿,就是关节点“飘”来飘去,后来开了大灯,把人照得亮亮的,识别 accuracy 一下子上去了,关节点稳得一批,所以别在背光或者昏暗的地方拍,不然软件也“看不清”动作。

背景要简单干净,要是身后有一堆杂物,或者颜色太花里胡哨,软件容易把背景的东西误识别成人体的一部分,我试过在书架前拍动作,结果软件把书架上的书当成了“额外的关节点”,导出的动作数据里,角色后背莫名其妙多了个“凸起”,删了半天才弄干净,最好找面纯色的墙当背景,或者用绿幕,效果会好很多。

穿衣服也有讲究,别穿太宽松或者图案太复杂的衣服,宽松的衣服会挡住关节,比如袖子太长盖住手腕,软件就识别不到手腕的动作;衣服上要是有密密麻麻的花纹,可能会干扰算法对边缘的判断,我之前穿条纹T恤拍动作,软件把条纹当成了关节线,识别出来的手肘角度歪得离谱,换了件纯色紧身衣后就正常了。

还有,动作幅度别太小,要是做特别细微的动作,比如手指动一下,软件可能识别不出来,或者识别误差很大,它更擅长捕捉大肢体动作,像走路、跑步、挥手这些,我试过拍弹钢琴的手指动作,结果导出来的数据基本没法看,手指关节全是糊的,后来问了客服才知道,目前对细微动作的捕捉还在优化中。

Rokoko Video是什么如何用它制作动作捕捉视频

Rokoko Video与同类工具对比

OptiTrackVicon这种专业光学动捕系统比,Rokoko Video的优势简直不要太明显,那些专业系统得在房间里装一堆摄像头,铺反光点,还得有专门的场地,一套下来几十万甚至上百万,普通用户想都别想,Rokoko Video就一个摄像头搞定,成本差了十万八千里,而且不用搭棚子,在家客厅就能拍,便携性拉满。

Kinect比呢,Kinect虽然也是摄像头捕捉,但现在已经停产了,而且只能在特定设备上用,兼容性差,Rokoko Video支持普通USB摄像头,电脑、笔记本都能用,导出格式还多,Kinect导出来的数据好多软件不兼容,还得转格式,麻烦得很,我之前用Kinect拍的动作,导进Blender里模型直接“抽风”,用Rokoko Video就没这问题,导进去就能用。

再说说手机端的动捕APP,比如一些声称“手机拍视频转动作”的应用,虽然也轻便,但精度差太多了,我试过某款手机APP,拍同样的走路动作,Rokoko Video识别的关节点偏差在几厘米内,手机APP能偏出去半米,模型走路像喝醉酒一样晃,而且手机APP功能也少,基本只能导出简单数据,想编辑调整都不行,Rokoko Video的编辑功能虽然基础,但够用,比手机APP专业多了。

惯性动捕套装比,比如Rokoko自家的Smartsuit Pro,虽然惯性套装精度更高,但得穿在身上,夏天热得要死,而且一套好几千美元,Rokoko Video不用穿任何设备,拍完就能走人,对于预算有限或者嫌麻烦的人来说,简直是福音,要是专业级影视制作,肯定还得用惯性套装或光学系统,但日常小项目,Rokoko Video完全够用。

Rokoko Video制作动作捕捉视频教程

我前段时间帮朋友的独立游戏做角色跑步动作,就是用Rokoko Video搞定的,整个过程还挺顺利,给你们说说步骤,首先得下载软件,去Rokoko官网找到Rokoko Video的Beta版,填个邮箱就能下,安装过程跟普通软件一样,一路点“下一步”就行。

打开软件后,先连接摄像头,我用的是笔记本自带的摄像头,画质一般但够用,在软件设置里选择“摄像头输入”,选好自己的摄像头,画面就会出现在软件里了,这时候记得把房间光线调亮,我特意把阳台的灯也打开了,确保自己整个人都在画面里,别被 cutoff。

然后是校准,软件会让你站在画面中间,保持自然姿势,它会自动识别你的身体轮廓,标出关节点,第一次校准可能有点慢,耐心等几秒,等关节点都稳定了再开始拍,我第一次校准的时候没站正,关节点歪歪扭扭的,重新站好后就正常了,所以校准的时候别乱动,让软件“看清楚”你的姿势。

接着就可以拍动作了,我让朋友站在摄像头前,做跑步的动作,跑了大概10秒,拍的时候注意让他在画面里别跑出框,动作幅度大一点但别太夸张,软件会实时显示3D模型跟着动,要是哪里识别错了,比如腿没抬起来,就重拍一段,别想着后期再改,前期拍好省事儿。

拍完后点“处理视频”,软件会分析视频生成动作数据,这个过程根据视频长度,短的话几十秒,长的可能要几分钟,处理完后就能在软件里预览动作了,看看有没有卡顿或者关节错位,我那段跑步动作,一开始脚踝识别有点问题,调整了一下视频角度,重拍后就好了。

最后导出数据,在软件里选“导出”,格式选FBX(因为朋友用Unity开发游戏,FBX兼容最好),然后设置导出路径,导出的时候可以选是否包含根骨骼、是否平滑动作,我选了“平滑动作”,让跑步看起来更自然,导出完成后,把FBX文件拖进Unity,给角色模型绑定骨骼,动作就直接能用了,朋友说比他之前手动调的动作流畅多了。

常见问题解答

Rokoko Video需要什么设备才能用啊?

其实超简单!只要有台电脑(Windows或者macOS系统都行),再配个摄像头就行,普通的USB摄像头、笔记本自带的摄像头都能用,不用买那种很贵的专业设备,我用我爸十年前的旧笔记本,连个几十块的外置摄像头,照样能跑起来,就是处理速度慢点,不过不影响用,对了,手机现在还不行,得等官方出手机版。

Rokoko Video是免费的吗?现在能用吗?

目前是免费的!它现在还在Beta测试阶段,去官网填个邮箱就能下载用,不过免费版有一些限制,比如导出的动作数据可能带水印,或者视频时长不能太长,正式版以后可能会收费,听说可能分免费版和付费版,付费版功能更多,但现在想体验的话赶紧去下,免费薅羊毛不香吗?我已经用它做了好几个小动画了。

用Rokoko Video拍动作,对环境有啥要求不?

环境要求不算高,但有几点要注意!首先光线一定要好,别在黑乎乎的地方拍,软件会看不清你的动作,关节点老识别错,然后背景要简单,别乱糟糟的,我上次在我家玩具堆前拍,软件把玩具当成我的手了,导出的动作特别离谱,穿衣服也别穿太花或者太宽松的,纯色紧身衣最好,这样关节点识别得准。

Rokoko Video导出的动作数据能导进哪些软件啊?

支持的软件可多了!像做3D建模的Blender、Maya,做游戏的Unity、Unreal,还有做动画的Cinema 4D这些都能导,导出格式有FBX、BVH这些常用的,基本主流软件都认,我上次导进Blender里,模型直接就能跟着动作动,都不用调格式,特别方便,不过导出的时候记得选对格式,不同软件可能偏好不一样。

Rokoko Video和手机上的动捕APP比,哪个更好用啊?

肯定是Rokoko Video好用啊!我之前试过好几个手机动捕APP,不是识别精度差,就是导出格式受限,手机APP拍出来的动作,关节点老是飘,导进软件里模型跟抽风一样,Rokoko Video虽然也是视频转动作,但识别准多了,小幅度动作也能抓住,而且电脑端功能更多,能编辑动作、调整关节角度,手机APP根本比不了,要是想做稍微专业点的东西,选Rokoko Video没错。

欢迎 发表评论:

请填写验证码

评论列表

暂无评论,快抢沙发吧~