奥飞寺的萧萧
量子比特 | 公众号QbitAI
只需录制视频,AI就能完美带你进入动画!
无论是线条、色彩,还是光影呈现,都与美漫中的写实风格如出一辙。 动画也细腻流畅,帧数显然也不低:
制作这样一部拥有120个VFX(视觉效果)镜头的动画,需要付出多少努力?
只要3人就够了,不需要服装和道具组。
相比之下,之前拍摄的很多大片动画特效往往需要耗费大量的精力,精心制作的团队甚至达到了数百人。
这部动漫在Youtube上上线后,三天内就获得了150万+的观看量和11万+的点赞。
有的画家看完后已经被吓到了:
我把一生都奉献给了绘画……几年后这些就会被取代。
有网友感慨“儿时梦想成真”:
小时候,我一直以为动画是根据真实视频改编的。 现在看到这个,我觉得超级酷。
那么卡通人物,这样一部动漫是如何诞生的呢?
如何用AI制作动漫?
该过程分为三个部分。
第一部分是利用AI创建和生成动漫角色,并建立其与演员之间的关系; 第二部分是创建动画场景; 第三部分是合成和调整最终的动画效果。
我们先来看看AI换角色动画的第一部分。 这部分是用Stable Diffusion完成的,并用Google推出的DreamBooth扩散模型进行微调。
以动漫中的这个角色为例,左上角是演员原型,右下角是AI创建的动漫角色:
这不是直接将视频逐帧放入Stable Diffusion能够达到的效果。
为了保证角色的动画风格达到自己想要的效果,作者收集了大量经典动画《吸血鬼猎人D》中角色的各个角度的截图,并反馈给AI:
同时,人工智能还需要学习并记住真人从面部到身体的各种细节特征。
因此,需要提前拍摄大量演员在不同灯光、多角度、各种动作下的照片:
这样卡通人物画法,当AI看到视频中的演员时,它可以快速以《吸血鬼猎人D》为绘画风格的基础,画出与演员长得像的动漫风格的角色。
对于一些不容易控制的人脸放大镜头,还利用ControlNet来进一步控制生成的效果。
然而,直接用AI生成的动画仍然存在问题。
即使帧之间的差异不大,但连接也不是完全连贯的卡通人物画法,一些“反复跳跃”的毛尖和光影细节会导致画面疯狂闪烁:
作者想到了使用DEFlicker去闪烁插件来解决这个问题,同时稍微降低帧率来保证画面的流畅度。
第二部分是生成场景。 在这一部分,作者直接使用了虚幻引擎以及它自带的一些3D模型来制作动画背景。
例如,这个旋转背景看起来非常酷:
背后是大量场景照片的合成和快速滚动:
最后一部分是后期合成修饰。
这部分是团队自己完成的。 一方面,他们在视频中添加了一些3D模型(例如闪烁的蜡烛),以增加角色的沉浸感:
另一方面,加入了很多复古的视觉效果,让动画看起来好看了很多:
结果就是这部人工智能辅助的动画。
创作波士顿动力恶搞特效视频
这部动画的创作团队Corridor Crew来自美国一家名为Corridor Digital的制作工作室。
走廊数字成立于2009年,多年来创作了许多热门的特效短视频。
比较出名的就是2019年恶搞波士顿动力机器人的《阿特拉斯的反击》(New Robot Can Now Fight Back!)。
视频中吉祥物,阿特拉斯屡次被人们欺负、谩骂,终于忍无可忍,向人类发起攻击:
△来源“Bosstown Dynamics”(狗头)
这段视频一度被认为是来自波士顿动力公司的真实视频,直到Corridor Digital出面否认。
随后,波士顿动力也正式辟谣,称这只是Corridor Digital制作的CGI片段。
走廊数字工作室旗下的Corridor Crew团队负责做一个“秘密节目”,专门解读各种大片的特效以及制作背后的技术流程。 团队成员将放映一些电视剧和电影,并对视觉效果镜头进行讨论和分解。
他们还邀请了很多特效艺术家和演员做节目嘉宾,观察他们对各种特效的反应。
对于团队制作的AI动画,有网友调侃:
下次邀请动画师怎么样? 看看他们对这部人工智能动画的反应。
那么,你对于AI制作的动漫有什么看法呢?
参考链接:
[1]
[2]
[3]
– 超过-
量子比特QbitAI今日头条签约
- 本文固定链接: https://wen.nuanque.com/renwu/5188.html
- 转载请注明: nuanquewen 于 吉祥物设计/卡通ip设计/卡通人物设计/卡通形象设计/表情包设计 发表
- 文章或作品为作者独立观点不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。本文之内容为用户主动投稿和用户分享产生,如发现内容涉嫌抄袭侵权,请联系在线客服举报,一经查实,本站将立刻删除。本站转载之内容为资源共享、学习交流之目的,请勿使用于商业用途。