日本团队借助AI技术,延续手冢治虫艺术造诣创作新漫画
被称作“漫画之父”,在日本甚至全世界范围内极负盛名 的手冢治虫(Osamu ),是上个世纪颇为著名的日本漫画家之一,其拥有经典漫画作品诸如《铁臂阿童木》 ,《三眼神童》 ,《黑杰克》等等 。
手冢治虫在1989年离世 ,为了将他的艺术造诣予以延续 ,日本存储器制造商的研究人员 ,与手冢工作室的艺术团队展开合作 ,运用深度学习技术 ,创建了世界上首个由AI创作的漫画项目 ,该项目让手冢风格的漫画作品得到了高度还原 。
该项目借助人工智能打造、创作了一部新漫画,新漫画以一定特定名命,其名为《》,这部新漫画在漫画杂志周刊《》当中发行,为了生成漫画里的新角色以及故事,项目团队运用以某种方式进行了分析,分析主题是手冢拥有的数百部经典作品,这些经典作品包含 ,Black Jack 和 Astro Boy 等,并且把这些漫画当作训练材料用以创作生成新漫画里面的角色。
负责那个项目的人,身为内存芯片公司数字流程创新中心的高级研究员折原凉平( )作出解释称:,“为致使AI知晓手冢治虫漫画中具有 的特征而为的让,我们的科研人员采用专用的针对图像识别的AI把手冢漫画里角色面部的那一部分转变成为得以用于探究的数据所成之物”的同时并兼且,还就诸多情况处境场景剧情中的故事情节发展变化开来去进行了深入地一一详细剖析研究。人工智能凭借着借助依靠依据这些所获得取用获得的数据进而得以学习掌握了领会了手冢治虫的漫画风格特色特点,能够主动自发地自行生成产出具备有着手冢风格样式的角色人物以及故事情节之发展变化过程。
漫画角色生成
角色生成阶段的核心工具是,这是由开源的,基于对抗性神经网络模型,可用于生成虚构人脸,为了构建训练的数据集,函馆未来大学的木山和硕教授与他的学生从手冢往昔的作品中收集了超过10,000张面部图像的数据集用于模型训练,此外,团队还使用手冢治虫作品以外的漫画人物面孔和实际的人脸来进行训练,使得该模型充分学习了不同风格漫画的人脸画风、不同角度的人脸数据等。。
据了解,研究人员预备了十五万页漫画手稿数据,用来供AI去学习手冢治虫漫画风格的特征,这些素材透过实验室的识别软件,被划分并且标记成“场景”,以及“对白文字气泡”,还有“人物面部”和“人物身体”,而为了提升AI生成图像的质量,工作人员展开了反复的试验,并一直持续到生成理想的图像才会停止,经由学习,AI能够达成包括将角色翻转,以及让角色数量加倍,还有仅仅加载女性角色等一系列操作。
项目组采用了诸多V100 GPU,运用了经cuDNN加速的深度学习框架,此框架是特定编写的,来开展训练以及推理 。
于第一阶段时,仅需一个过程便可生成人脸。研究人员讲:“鉴于此缘由,研究小组尝试去生成更为完整的图像,在这其中,从粗糙的描绘(像轮廓之类)开始,逐步生成诸如眼睛、鼻子以及嘴等等精细的细节。”

接下来,团队决定只使用手冢漫画中的女性角色:
最终,该团队运用转移学习,通过整合,使成千上万个数据点,能让模仿手冢画风生成的角色,看上去毫无破绽:
故事情节生成
生成漫画角色之后,漫画故事情节开始组建,这是另外一项万分艰巨的工程 。
参与该项目的AI负责人,名为栗原智的教授指出 ,倚靠现阶段的技术 ,纯凭借AI去生成个性极为鲜明的漫画角色 ,以及情节富有特色的故事情节 ,是具备极大难度的 。“进行漫画绘制 ,需要诸多有关故事以及人物的想法 ,甚至于人类自身 ,开始之时 ,思索起这些也会感到棘手 。AI能够做到的 ,即为生成‘创意的种子’ ,将其用作‘故事情节的主干’ ,还有‘角色模板’ ,供身为人类的漫画家参照 ,进而使我们的想象力以及创造力 ,获得惬意的发展 。”
那么,活着的人类如今究竟具备着怎样的可行性去开展实际能行之事呢?栗原教授道,这必然是取决于我们是否能够成功实现把那带有手冢治虫独特故事内涵之关键精华交付予人工智能这一情况的。当然了,我们是绝对不应当让手冢治虫回归的。并且在手冢工作室某些工作人员针对故事情节展开具体解构之后,为了促使人工智能能够深入学习钻研手冢治虫的故事精髓,团队选用了 130 个手冢治虫创作编排之各类且予以系统性、细致化地理出条分缕析方式分解为 13 个独立阶段的漫画故事,将其用作项目数据 。
手冢治虫作品的 13 个阶段的结构被了解之后,AI 经自动生成了 100 多个故事大纲,然而、这些依照 AI 生成的故事于实情存有着甚多逻辑方面的错误 。
就对于所生成的这一百多个故事而言,仅有大约百分之二十看上去具备意义,与此同时,它们还充斥着令人意想不到情节,当然,团队认定这些与众不同的想法以及飞跃亦是手冢治虫漫画作品的精髓 。

最后,经过手冢工作室艺术团队的人工校准,达成了比较完整的故事剧本,并且这个故事剧本有一定艺术性。
手绘尝试
在项目推进进程里,研究人员又发觉,手冢治虫的漫画,除开其自带独具特色的画风之外,还涵盖了艺术家专属的情感表达形式。
团队从手冢工作室当中那位担任艺术家此一职务的人那里,获知了闻名甚广的手冢治虫往昔从事作画活动期间所秉持的动作习惯。通过具备熟练程度地让画笔得以被运用,手冢治虫能够在一笔一划里体现经由喜悦以及愤怒,悲伤还有愉悦这些类别所归集的多样化情绪。鉴于此一种情况于是该团队又开启行动尝试运用如同机械臂呈现的那般艺术表现形式来再度展现手冢治虫的这些体现特别表征的传世美术作品 。
要搞模拟手冢治虫那微妙动作,就得在机器人里头复制人类的肌肉机制。团队借助原型机械臂把笔固定住,而这机械臂是由压力传感器操控的。通过去模仿手冢治虫的作画习惯来设定压力参数,最后成功在纸上绘制出了某个作品的主角。然而,当前的技术依旧特别难以完全模拟人类那种微妙且复杂的动作,所以用机械臂绘制漫画这项工作还将会持续不断地研究下去 。
漫画行业的未来?
《》漫画的出版得到了帮助,关于此的《》总编辑是三浦俊宏,他表示,最初他看到这部由计算机生成的漫画,第一反应是拒绝,原因是他觉得这种靠机器画出来的漫画缺乏灵魂,然而在和栗原教授交谈过后,他改变了想法,并且对该作品能把传奇艺术家的作品再度呈现感到难以置信 。
三浦说,他意识到,这个项目,也能够用来,分析人类,如何创造漫画 。他补充说道,他想要证明,创建,可以在这些作品中,绘制漫画的AI的过程,本身就是人类的创造过程 。三浦还调侃了一番AI ,他说,AI不能和作家一起喝酒,对吧,他猜测,那是他的优势 ,他笑着说 。
有这样一些人,对于漫画行业的未来忧心忡忡,他们觉得,随着那种 AI 漫画技术日益成熟起来,会致使好多凭漫画来维持生计的人丢掉工作。然而,另外有人对此持有乐观的看法,他们觉得,当那些人们所喜爱的漫画家慢慢变老的时候,在未来也能够借助 AI 使得后来的人依旧可以欣赏到具备老一辈漫画家风格的新漫画作品,这说不定是一件不错的事情。
最后,我期望,有些常态性对读者爽约的漫画家,能够保持清醒,要是再一味沉溺于打麻将,那就让AI来替你作画好了!


欢迎 你 发表评论: