AgileGAN-哈哈,好玩!字节跳动和南洋理工大学共同开发的肖像化工具!...
肖像工具 15952 3
实名

通过了实名认证的内容创造者

发布于 2022-4-11 18:47:09

您需要 登录 才可以下载或查看,没有账号?注册

x
            
来源 CG世界
“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”中国很有影响力影视特效CG动画领域自媒体
记得前段时间经常能在微博或者B站等地方看到别人搬运的外网卡通滤镜视频,无论是猫猫狗狗还是人,只要加上了这个滤镜,真的是一秒钟就变身为迪士尼角色,还算没啥违和感,先给大家随便看几个:


怎么样,是不是非常有趣,最近经过朋友的分享,我发现国内抖音里也出了相似的滤镜,大家没事可以去搜搜看。不过今天要为大家介绍的,不是使用在视频里的工具,而是一款只需要通过一张照片,就可以得到动漫人物的脸、卡通人物的脸,甚至古典绘画的脸的工具,而且使用起来非常方便,感兴趣的话就继续看下去吧!

这个工具名叫AgileGAN,是一款创建风格化肖像的新工具,由来自南洋理工大学和字节跳动的几名小伙伴共同打造,大家可以先通过下面这个视频来了解一下:
这个新工具可以通过反转一致的迁移学习来创建风格化的肖像,只要上传一张人脸明显一点的照片,就可以获得几张风格化肖像,就和下面这几张图片一样:


be6a6367e5973bedc6065f61b7aa6d4d.jpg





这个工具中引入了一种新颖的按层次划分的变分自编码器,可以在确保映射隐空间分布符合原始的高斯分布的同时,将原始空间拓展为多维度的隐空间,以便更好地编码不同级别的细节。同时为了更好地捕捉面部特征,这个工具还有一个属性感知生成器,并采用了一种动态停止策略,以避免过度拟合小型训练数据集。






我们再来看一下下面这张图片:




先来给大家介绍一下图片上都是什么:最上面的那一行小图是一些采样样式示例,下面两行大图则依次是几组输入图像,来自Toonify(也是一个类似的工具)的结果,以及来自AgileGAN的结果。只要输入了一张图像后,就可以非常快的自动生成各种艺术风格的高质量高分辨率(1024*1024)图像了。

我们都知道,肖像画作为一种艺术形式,已经从写实描绘演变为多种创作风格。虽然在自动风格化方面取得了实质性进展,但生成高质量的风格肖像仍然是一个挑战,即使是最近流行的Toonify在用于真实输入图像时也存在一些小缺陷。所以为了能够得到不同的肖像风格,AgileGAN出现了。这个工具为创建高质量和高分辨率的肖像风格化模型方面提供了更大的灵活性,并且只需要有限数量的风格样本(~100)和较短的训练时间(~1小时)。制作团队收集了几个用于评估的风格数据集,包括 3D 卡通、漫画、油画和名人。通过定性、定量和通过感知用户研究进行的比较,这个工具可以实现优于以前最先进方法的肖像风格化质量。

我也拿了几张照片试了试,也顺带给大家看一下网站是啥样的,不过相信大家一打开就能看懂~

网站地址:http://www.agilegan.com/(打不开的话可以科学上网)




这就是这个工具的网页啦,手机使用的话也是没问题的,看到下面那个黄色的Upload Photo按钮了吗,点击它你就可以上传自己想要的照片了。

我们先来试一张小蜘蛛荷兰弟的:








非常中规中矩的照片哈,从上到下依次是卡通风格,油画风格和漫画风格,想要什么风格就点相对应的图片就可以了。

下面我们再拿美队的照片试试康,看看有胡子的人会出现什么样的效果。










也还不错,那么动物的是否也能够识别出来呢?我们拿美队的狗狗来试一下。





很遗憾,不行,目前只支持人脸图像。那我再来试一张角度刁钻的自拍:









哈哈哈,确实还挺好玩的,感兴趣的朋友们也可以自己去试试看,不过大家不用担心网站会存储自己的图像,在获取结果以后它们就会被立即丢弃。

那么今天关于AgileGAN的内容就是以上这些~

参考文章:
https://guoxiansong.github.io/homepage/agilegan_cn.html

—全文完—
原文链接:https://mp.weixin.qq.com/s/-9lvdahH7hVAjI49QBnQJw
         

本帖被以下画板推荐:

内容主要涵盖影视特效,CG动国,前沿CG技术,作品欣賞
使用道具 <
好人好事  发表于 2022-4-12 08:51:19  
2#
回复 收起回复
使用道具
熾天之翼  发表于 2022-4-12 09:08:44  
3#
回复 收起回复
使用道具
天外来人999  发表于 2022-4-27 11:10:45  
4#
打不开,科学上网也不行
回复 收起回复
使用道具
您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部 返回列表