搜索
    AI动画背后都是真人？是沙雕整活还是噱头？
    资源 › 知识库/文章/讯息 › 技术文章 › 元素文章 AIGC
    14333 0
    实名

    通过了实名认证的内容创造者
    GGAC + 关注 4.40万
    发布于 2023-5-2 12:23:09

    您需要 登录 才可以下载或查看，没有账号？注册

    x
    ggac.com
    33578bb0e523595ed0740df3677159dc.gif
    近几日一部使用AI工具制作的动画👇在圈内大火👇
    [micxp_wxonkey]wxv_2821187252868497411[/micxp_wxonkey]《ROCK, PAPER, SCISSORS》（剪刀石头布）
    动画短片《ROCK, PAPER, SCISSORS》（剪刀石头布）讲述了一对双胞胎王子通过“石头剪刀布”的形式争夺王位继承权的故事
    画面中超多“笑点”的无厘头剧情让看过的不少网友印象深刻

    786ec4ee85499d5ca9989f303e9be260.gif







    《ROCK, PAPER, SCISSORS》节选
    据悉，这部短片制作的整体思路是把实拍影像变成动画用AI工具Stable Diffusion把图像逐帧转化为动画风格








    《ROCK, PAPER, SCISSORS》官方示例
    图像参考来自实拍不是用关键词直接生成的所以不会出现“画不来手”的情况网友：AI走出舒适区，勇敢挑战剪刀石头布



    评论区大家的意见
    那么这样一部“大制作”

    背后又有怎样的花式操作呢
    制作团队corridordigtal工作室最近放出了幕后设计内容快跟随小G一起来浅看下



    首先，动画的编剧、分镜、表演编排依然是由人类创作的而在服装方面他们直接选择了网购廉价制服
    准备好之后，就是在绿幕面前摆造型截取单帧全程只要两个人负责摄影和打光就行了瞧瞧这些夸张的神情为了演好，这些老外也是够“拼”的了






    《ROCK, PAPER, SCISSORS》官方示例
    他们让AI根据实拍逐帧“转描”实拍的画面用Stable Diffusion训练能够将【演员】与【模仿风格】对位转换的模型
    团队对标的风格是日本动画名作《吸血鬼猎人D》截取了上百个不同角色/物件、不同景别的截图用于训练



    在这一环节，创作者们用添加关键词、排除关键词来回调整细节数值的方法将实拍画面批量生成为24帧每秒的“动画”




    团队在调整数据
    其中会有1-2帧略显跳跃他们则会将镜头放入视效合成软件Fusion加入防闪烁插件，设置为fluoro light模式一个节点不够，就再贴一个
    肉眼感觉足够流畅之后将角色从绿幕中抠出来帧率减半变为12，使其更像动画、更自然




    《ROCK, PAPER, SCISSORS》官方示例
    而且了解Stable Diffusion的小伙伴都知道
    保持画风动起来可是一个很大的难点
    想要每一帧的画面风格统一并不容易



    《ROCK, PAPER, SCISSORS》官方示例
    他们的解决方案
    是用Stable Diffusion训练风格模型
    采用了Nitrosocke的Diffusion模型
    将图像调整成特定风格

    为进一步解决各种五官
    褶皱的细节混在一起的缺陷
    他们会专门训练单个演员的模型提升帧与帧的连续性
    ↓现实↓



    VS
    ↓训练效果↓


    《ROCK, PAPER, SCISSORS》官方示例
    场景方面则使用虚幻引擎里的场景“封闭教堂”根据想要的效果微调渲染和光照找到适合当作背景的场景，截取图片
    把截图放进Stable Diffusion输入关键词进一步转换画风








    输入关键词进一步转换画风
    下面让我们来看看官方完整的幕后对比一幕幕硬核场面笑点满满
    [micxp_wxonkey]wxv_2822188061248864261[/micxp_wxonkey]《ROCK, PAPER, SCISSORS》幕后
    这走位和神色确实够味我们这边还机翻了下幕后设计的完整字幕版视频哦👇想了解具体细节的小伙伴快来看看👇
    [micxp_wxonkey]wxv_2822521629800022017[/micxp_wxonkey]《ROCK, PAPER, SCISSORS》幕后设计准备（机翻字幕版）

    说起来AI在动画领域的应用可不仅于此这些技术的运用在近期几乎不断出现在大家的视野里



    作为创作辅助工具AI的应用一直在尝试“三渲二”效果解决方案
    近期某推便有创作者经过多次反复的测试用AI将初音未来的“三渲二”进行了突破


    [micxp_wxonkey]wxv_2822236520861548550[/micxp_wxonkey]初音未来AI动画对比
    通过一点点的去噪尝试↓画面正在一点点改进↓


    前段时间AI生成的动画《THE CROW》（乌鸦）它还获得了2022年戛纳电影短片节最佳短片



    作者是一位名叫Glenn Marshall的计算机艺术家先来看看这部短片
    [micxp_wxonkey]wxv_2822268588983205888[/micxp_wxonkey]《THE CROW》（乌鸦）
    Glenn Marshall在很早的时候就一直在深入研究使用视频素材作为来源的AI风格转换的想法他一直不断尝试着各种不同的风格
    直到他在某管上发现了一部真人舞蹈的微电影《Painted》这让他激发了灵感
    想将这部片子AI化下面我们来看看对比视频
    [micxp_wxonkey]wxv_2822245042412208130[/micxp_wxonkey]《THE CROW》（乌鸦）对比视频
    Marshall 将《Painted》的视频输入CLIP（二维绘图应用程序CLIP Studio Paint创建的图像文件）负责从文本特征映射到图像特征然后指导一个GAN（生成式对抗网络）或扩散模型生成图像
    就这样系统算法生成了一段“荒凉风景中的乌鸦动画视频”Glenn Marshall认为这是对电影未来的一瞥



    还有在今年2月发布并爆火的全AIGC动画《地球爱情终曲》👇距离地球毁灭前24小时的爱情应该是怎样的👇
    [micxp_wxonkey]wxv_2822259862331080705[/micxp_wxonkey]《地球爱情终曲》




    现在AI在动画领域的应用成为不少网友关注的焦点这里说回上文我们聊到的动画幕后设计
    从技术层面上来讲该动画的生产流程并没有对技术底层做出较大革新更多就像是部分网友所说的“类似真人图像处理”“就是加了个滤镜”
    可能的“优点”仅在于不需要技巧精湛的动画师来绘制动画直接通过视频转描风格化等等
    [micxp_wxonkey]wxv_2822521629800022017[/micxp_wxonkey]《ROCK, PAPER, SCISSORS》幕后设计准备（机翻字幕版）

    而通过上面我们介绍的AI在动画生产当中的这一系列应用我们也能捕捉到当中的局限
    大多是单一角色出现的场景角色之间大多没有进行直接的交互分镜方面也相对简单虽然看起来还行但真的商用还是要人工一帧一帧修



    许多动画人也在呼吁不必过于焦虑现在AI无非是动画制作的一种新方式而已无法撼动现在动画片的制作模式只能说让动画工具多一种选项



    你觉得AI会影响动画的发展吗？会给动画人带来哪些影响？
    欢迎来评论区和我们聊聊
    GGAC旗下CG行业全媒体矩阵，日推游戏/动漫美术
    使用道具 <
    高级模式
    B Color Image Link Quote Smilies
    您需要登录后才可以回帖 登录 | 注册

    本版积分规则

    素材推荐
    提醒
    0
    快速回复 返回顶部 返回列表