随着AI大模型的开源,AI已经可以与动画制作进行更深度地结合,从绘图到上色到精修,AI都能发挥实际作用。虽然在许多环节,AI制作动画并不完美,也无法完全取代人工,但AIGC正以惊人的速度发展,动画产业长期存在的产能不足问题,也有望被AI解决。
作者:黄泽正?来源:新声Pro
原标题:《AI提速动画生产》
骑上绿色脚踏车,带着黑框眼镜的少年顺着山坡一路滑行,山下是静冈县狭长的海岸线,身后一只机械狗欢快地追逐着车子,车上的少年不时回过头,打量着他的机械狗玩伴……
这个场景是动画短片《犬与少年》中的一幕,近期在奈飞平台上线后,该短片播放量迅速突破200w,单条推特浏览量也达到2000w+。
就动画质量而言,《犬与少年》的场景构成并不复杂,画面精细度也不算上乘。但最值得关注的点是,该短片的场景美术是使用AI生成,而非由人类绘制。对于动画行业来说,将AI整合进制作流程非常有想象力。
自AIGC风起以来,杭州无界AI绘画平台,通过提供低门槛、多类型的AI绘画体验,积累了上百万用户。目前正在探索AI与动画生产的结合。
无界AI内容负责人赵杰诚表示,随着AI大模型的开源,AI已经可以与动画制作进行更深度地结合,从绘图到上色到精修,AI都能发挥实际作用。虽然在许多环节,AI制作动画并不完美,也无法完全取代人工,但AIGC正以惊人的速度发展,动画产业长期存在的产能不足问题,也有望被AI解决。
腾讯正有序推进ChatGPT和AIGC相关方向的专项研究:2月9日消息,腾讯相关人士向记者表示,腾讯目前在ChatGPT和AIGC相关方向上已有布局,专项研究也在有序推进。腾讯持续投入AI等前沿技术的研发,基于此前在AI大模型、机器学习算法以及NLP等领域的技术储备,将进一步开展前沿研究及应用探索。(科创板日报)[2023/2/9 11:57:22]
长期需求
动画行业一直是一个「劳动密集型」产业。
普通的12帧率动画,按25分钟计算,需要18000张图画。对于一个10人规模的团队来说,约需要2个月才能完成。这与市场需求严重不符。
根据2021年爱奇艺、优酷、腾讯视频、B站四家平台公布的国产动画片单,其数量已经达到188部。在流媒体平台对动漫作品有大量需求的情况下,产能不足长期影响着动画的发展。
《犬与少年》的摄影监督田中宏侍就提出:「很多动画创作者都在同时推进多部作品,因此很难专注于一件作品。借助AI能解放制作者,让大家有更多时间去做创造性的工作。」
以AI辅助动画场景制作为例,当画师输入大致的想法词条,比如天空、海洋、山峰、河流等,AI就会立即生成场景草图,并且完成上色。画师可以在AI生成的基础上进行精修。这意味,最费时费力的草图和上色部分,都会交由AI完成。
声音 | Ira Kleiman方律师:Craig Wright仅提供了1.6万多个BTC地址清单,但无中间人信息:在由Coindesk上传的一份新文件中,Ira Kleiman的律师称,Craig Wright只提供了16,404个比特币地址清单,但没有关于“保税快递”中间人的信息。原告要求Craig Wright在10天之内回应7条关于中间人的质询,之后原告将利用这些答复来获取有关“保税快递”中间人的信息。在此期间,原告正在请专家审查和分析这份清单。据此前CoinDesk报道,根据1月14日向美国佛罗里达州南部地区法院提交的一份法庭文件,第三方“提供了解锁加密文件所需的信息和密钥片段”,似乎是指此前提及的备受期待的“保税快递员”中间人,表示CSW拥有解锁96亿美元比特币所需的私钥。Bloom法官对保税快递公司的存在和比特币争议的数量表示怀疑。CSW此前因未能出示其所持比特币的完整清单而被判藐视法庭。[2020/1/15]
用赵杰诚的话来说,当AI生成图片的数量足够多,精度足够高,人类画师某种程度只需要充当「分拣员」,即从大量AI生图中选出自己想要的图。
从成本和效率两方面考虑,AI也能给动画产能带来明显提升。
首先是时间成本,赵杰诚告诉《新声Pro》,AI可以大幅减少动画绘图的时间,「粗略估计耗时在原先的五分之一」。在草图阶段,无界AI可以按照指示在3分钟内生成100张图片。这意味着,在单位时间内,AI生成草图的数量可以轻松超过人工手绘的极限。
分析 | Craig Wright旗下矿池已控制BCH 58%算力:据BitcoinExchangeGuide报道,根据BCH中心化采矿的最新报告,Coingeek和BMG Pool的算力现已达到网络的58%。据悉,这两个矿池均隶属于自称中本聪的Craig Wright。[2018/9/18]
《消除与召唤》游戏的开发公司广州谷季,曾精简了全部美术人员,将角色、场景等内容完全交由AI生成。游戏主策划张源表示,之前制作游戏片头时,当他将分镜需求提交给美术,对方所需时间至少一个月,最后只能产出7张图。而在使用AI之后,只需一天就能完成。
据赵杰诚透露,无界AI当前每张4k精度的图片的生成不会超过2毛钱,大多数成本可以控制在1毛钱以内。参考国内普通插画师月薪11至13k的工资水平,AI无疑能降低人力成本。
赵杰诚认为,前段时间火热的「AI取代人工画师」话题,并非危言耸听。「很多ACG公司的老板明确表示,使用AI的一大原因就是为了精简美术团队。」
但就目前而言,AI与动画的结合并不完美。
范围有限
相比于理想状态下AI全流程接管动画制作,目前AI对动画产能的提升,主要还是体现在绘制草图、修改、上色等单个生产环节,后期也还需要人工辅助。
Craig Wrigh:拥有比卢旺达整个国家更多的财富:据bitcoinist.com消息,在卢旺达首都基加利举行的2018年非洲变革峰会上,自称中本聪的NChain 首席技术官 Craig Wright发表了关于他利用区块链技术改造非洲的各种主张。Wright表示,比特币是非洲加密货币和区块链的一部分,会议期间他表示他自身比卢旺达国家有更多的财富。此前,Wright自称他是比特币创造者,从而引发了加密货币行业的愤怒。Twitter分析师Dennis Parker认为Wright是一个子,假冒的中本聪。[2018/5/25]
换言之,AI技术对动画制作确有提升,但所涉及的范围依旧有限。
赵杰诚告诉《新声Pro》,在光线、AI补帧、动态特效三方面,目前的AI技术很难在动画中完成。
首先是光线,在动画制作时,光线的明暗变化,与照射在人物身体时光线的反射都很难处理。尤其在人物不断运动时,要想让光线与人物融为一体,而不至于穿帮,对AI来说还存在较大困难。赵杰诚也认为,要实现较为理想的光线效果,无界AI还需要研究一个专门针对光线的插件。
在连贯性动作方面,动画制作中有一个「中间画」的概念,其目的是在两张原画之间添加连贯画面,使动作看起来更加流畅,以实现「动画」的效果。就绘画难度而言,原画远高于中间画,但中间画的数量要求更多,且大量为重复劳动。AI试图解决的正是自动生成中间画。
自称是比特币“创始人”的Craig Wright被起诉盗取已故IT专家超百亿美元比特币遗产:据coindesk,澳大利亚企业家Craig Wright近日被起诉盗取已故IT专家Dave Kleiman超过110万枚比特币的所有权。Kleiman的兄弟Ira Kleiman代替其提出诉讼,他的律师认为这些比特币价值超过100亿美元。同时Craig Wright还被指控扣押Kleiman的区块链技术的知识产权。Dave死后,Wright伪造了一系列合同将Dave资产转移进自己公司。此前,Craig Wright曾宣称自己是比特币发明者中本聪。[2018/2/27]
目前AI还只能做到轻度的中间画自动生成,最终还是需要人工进行调整。比如在绘制孙悟空挥棒这一连贯动作时,由于人物姿态、装饰服装都发生了移动,AI生成的线条间就可能会有断的笔触,需要人工填补。
但赵杰诚补充表示,通过采用ControlNet和T2I-Adapter技术,行业已经提出了解决方案,预计三个月后该问题将得到更好解决。
在动态特效方面,AI也很难在动画中完美实现。
比如在热门动漫《死神》中,主角黑崎一护的瞬步令观众印象深刻。要呈现这种带有残影的瞬间移动效果,从做图开始就需要进行动感模糊的虚化操作,对AI来说存在困难。
另一方面,AI对人类语言的学习还在继续,对于一些动画中存在的抽象概念,AI很难直接理解。
比如在动漫中经常出现的夸张动作,对AI就有很大的理解门槛。
以《海贼王》动漫为例,主角路飞的一大能力是伸长手脚攻击敌人,对AI来说,绘制「伸长手臂」这个指令就很难理解。赵杰诚表示,如果单纯只输入「伸长手臂」,AI只会将手臂尺寸稍微伸长,完全达不到动漫中夸张的画风。如果要制作夸张动作,就需要使用者输入更多明确的指令,帮助AI理解,如人身高1.7米,手臂伸长20米,握紧拳头等关键词。
以上不利因素客观制约了AI直接生成高品质动画,但赵杰诚认为,目前AI可以用于需要大量出内容的年番动画,或已经有第一季的动画,以及准备开始做更多内容的制作公司。「这样就不用为AI专门去做学习做图,直接喂原有的图就行了,精度也会更高。」
赵杰诚同时也补充,受样本数据量所限,无界AI的一些专有词条和插件都还在优化,理论如何变成实际,还需要跟更多的动画从业者们测试。
思维转化
将AI融入动画生产,不仅是一次技术改造,也是一次思维改造。
在2022年末AI绘画刚刚兴起时,海外曾掀起过一波抵制AI的浪潮。在综合CG视觉艺术网站Artstation,画师们纷纷上传一张「NOTOAIGENERATEDIMAGES」的图片,一时间网站首页一半以上的内容都被此图片占领。两位重量级艺术家BillSienkiewicz和AlexRoss,也在推特上声援抵制AI绘画。
但赵杰诚认为,AIGC的浪潮已来,「首先抵制是抵制不了的,其次AI也不会完全取代画师,关键是思维要转化。」
首先在技术层面,传统画师应该尽快建立对AI的认知,并且进行模型训练。
以无界AI在本月初生成的《鬼灭之刃》同人海报为例,人物和背景由AI直接生成,团队仅针对角色手和眼进行了简单修图,就在鬼灭粉丝群内引发热议,粉丝们纷纷感叹海报中灶门炭治郎设计的美感和还原度。
而相对应的,甘露寺蜜璃的人物还原度就相对更差,赵杰诚解释称,「这是因为动画还没出,所以训练素材少,效果就一般。」还有一个原因在于,无界AI为灶门炭治郎专门做了一个单独的测试模型,也可以提升其生成精度。
所谓的模型更像一个词条与AI输出能力的集合。
以《全职猎人》中的人气角色奇犽为例,如果需要用AI生成张楚岚形象,原本需要添加白色卷发,有蓝色瞳孔,服装描述,鞋子描述等一系列关键词,才能最终生成一个相似的人物形象,还需要人工修图。而模型则是将奇犽的体貌特征融合在一个词条内,用户只需要输入关键词「奇犽」,就能输出人物形象。
赵杰诚戏称,这样一来就能快速出《全职猎人》续集,既让富坚义博有时间打麻将,又能满足粉丝需求。
而训练模型、集成词条的过程,也可能是未来画师的分水岭。赵杰诚表示,将来AI绘画者区别「画功」的关键,很可能取决于其对模型的打磨程度,「你的素材越多,素材上的关键词越细,出图结果越好。」
另一方面,AI绘画对美术需求发起方的意义,同样重大。
在传统动画生产流程中,制作团队会分为美术需求方和美术执行方。前者包括导演、制片、制作人等,负责提出构想,后者包括原画师、插画师、美术设计等,负责绘图及创意执行。两者之间往往存在意见分歧,比如当动画导演提出画面构思后,原画师有时难以理解导演需求,或者无法在有限时间内产出让导演满意的画作。
赵杰诚认为,AI能够帮助美术需求方明确自己的愿景和创作意图。比如导演可以使用AI反复测试动画题材、风格和品类,来验证自己突如其来的想法。对美术执行者来说,导演的奇思妙想往往意味着多次返工和思路对接。
正如皮克斯的《玩具总动员》开创了3D动画风潮,是对传统定格动画的数字化改造,日本2D手绘动画常见的「赛璐珞技术」,也因计算机技术运用,转化为数字化制作。AI对动画制作的改造,也包括技术、成本、思维等多个方面。
从更长远来看,AI也许可以让制作人在立项时不再拘泥于市面上已有的产品类型和风格,而以更低的成本进行广泛尝试。
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。