CG世界 发表于 2023-8-8 11:09:49

用文本直接生成影视级动画特效?


引言自从打开了潘多拉魔盒后,AI技术开始席卷各行各业,最近一款名为RunWay的产品,已经能够实现文本生成影视级动画短镜头片段了~
如果有这样一款“只用文字制作视频”的梦幻AI工具,你会用吗?RunWay是一款由同名开发商制作的AI视频生成和图像生成软件,一直与Stability.AI公司共同研发Stable Diffusion,主要用于视频制作/设计/策划。目前提供的服务包括:Gen-2:文本转视频Gen-1:视频到视频人工智能培训文字转图像图像到图像等


从官方Twitter中可以看到,它的标语就是“如果你能想象到,那你就能生成出来!”自从它于2023年6月7日发布以来,吸引了世界各地大量创作者的关注。那这个Gen-2和之前他们已经发布过的Gen-1到底有什么不同呢?突破在哪里?首先,Gen-2采用了多模态人工智能系统,可以理解多种不同类型的输入数据并基于它生成内容。
find-a.jp网站给出了对比图如下:


总结来说,就是Gen-2在Gen-1视频转视频的功能上进行了升级,实现了“文本→视频”、“文本+图像→视频”、“图像→视频”等多模态视频生成。但貌似文本转视频之前也有别的开发商或个人制作团队进行尝试,效果似乎并没有像Run Way Gen-2那样突出。
根据Run Way自己的用户数据显示,它们的方式比现有的其他竞品更受青睐,在图转图和视频转视频的调研中,跟竞品(比如Stable Diffusion 1.5和Text2Live)的比较满意度分别达到了73.53%和88.24%。

为了更好地进行效果验证,首先咱们先来注册个账号试试看~


用户注册流程
第一步:先来到它的官方主页

第二步:点击注册,目前显示是免费的

第三步:输入你的电子邮箱地址及用户名、密码



第四步:继续输入你的名字和组织机构(可选)

第五步:发送验证码到你的邮箱进行验证,输入验证码后即可订阅成功





使用流程
订阅完成后,就会自动跳转来到RunWay的使用界面
下面我点击文本到视频的按钮:

出现了一个使用提示,可以大致了解它的使用步骤,最重要的是,它告诉你每秒需要花费5个信用点,且一开始会送你525个信用点,即你可以免费生成总共105秒的视频。


话不多说,先来试一下吧,输入下自己的提示词,我这里想象了个末日废墟的都市,藤曼在高楼间生长:
输入Post-Apocalypse,city,vine on the tall building

看起来还行,再从生成的预览图片中挑一个或者继续点击预览按钮,切换新一批的样本进行挑选
我这里继续丰富下提示词,加入Rainy,fog,New York等修饰词,效果如下:

我这时想到了电影《迷雾》中的情节,想在远景中添加一个怪物,那就弄个哥斯拉吧,风格再往克鲁苏靠靠。继续添加提示词:Crusu,Godzilla in the fogy city


虽然这个哥斯拉比较抽象,但在我不停的随机后,还是找到了一个比较满意的:

先点一个生成,看看效果吧~


等待中~激动wxv_3038488745827729409效果出来了,看起来还行,但只有4秒!!!!!好吧,谁叫我不是付费用户
再去网上看看别人的尝试
有人用化妆品的图片结合提示词:


wxv_3038502205449928706质量不错~


使用技巧


再来说说操作细节,界面上有几个操作按钮,按数字标注说明如下:1、可生成的秒数(免费版本为 105 秒)2、跳转至付费版本页面3、复制生成视频的链接4、生成可以中断,以前的视频可以重置5、图片上传6、生成视频7、提示字符数(最多320个字符)8、提示词键入区9、持续时间(Gen-2 目前可以生成 4 秒的视频)10、多种设置(只有付费版本有很多功能)目前的收费标准分为三档:
标准版每月15美元,包年的话每月12美元
专业版每月35美元,包年的话每月28美元
企业版需要直接联系开放商进行定价RunWay除了Gen-2 外,还提供了 26 个工具,包括:Generative、Video、Image、3D 和 Audio等 。

最后需要说明的话,用Gen-2制作的视频是可以作为商业用途的~本期就到这里,再会~End

仰空越梦 发表于 2023-8-8 15:11:50

狠不错诶,谢谢分享~

发表于 1970-1-1 08:00:00

Teny 发表于 2023-8-8 19:03:12

谢谢楼主分享!!!

qq_萝卜_v7e 发表于 2023-8-9 00:35:33

{:1_227:}

wys88323 发表于 2023-10-13 15:38:26

{:1_236:}
页: [1]
查看完整版本: 用文本直接生成影视级动画特效?