织梦CMS - 轻松建站从此开始!

188体育备用|188体育备用网址

当前位置: 188体育备用|188体育备用网址 > 娱乐 > 188体育备用:秒变 “迪士尼在逃公主”:一键切换 “漫画脸”AI 效果太过逼真

188体育备用:秒变 “迪士尼在逃公主”:一键切换 “漫画脸”AI 效果太过逼真

时间:2020-09-29 09:26来源: 作者:admin 点击: 8 次
上传一张照片,就可以拥有自己的动漫形象?现在一个名为“Toonifyyourself”的AI工具就可以办到,而且效果非常逼真。最近,热映的真人版《花木兰》,在国外又掀起了一股动漫风!各种名人漫画形象频频刷屏,比如这张宫崎骏老爷爷,可可爱爱的形象完全可以出演动漫电影了。还有这张演员杨紫琼的动漫形象,大

上传一张照片,188体育备用:就能够领有自身的动漫形象?

现在一个名为 “Toonify yourself”的 AI 工具就能够办到,并且效果十分传神。

比来,热映的真人版《花木兰》,在国外又掀起了一股动漫风!各种名流漫画形象重复刷屏,好比这张宫崎骏夙儒爷爷,可心爱爱的形象完全能够出演动漫片子了。

还有这张演员杨紫琼的动漫形象,大眼、瘦脸完全具备了动漫角色的典型特性。

更重要的是简直复刻了真人的原始状态,包孕头发、面部心情、神志,妥妥地定制化动漫形象。

这些动漫形象全数出自一个名为 “Toonify yourself”的 AI 工具。它不但呈现出效果传神,操作起来还十分简略,只需在模型中上传一张照片即可!

据体会,这款工具刚刚发布就完成了 25 万次办事,十分受用户欢迎,还有网友评论称:研发者能够思考思考商业化的问题了。

那么,这款工具是若何实现的呢?

天生漫画脸的手艺原理

据它的创建者之一 Doron Adler 介绍称,该工具主要使用了混合搜集(Blended Network),这是一个复杂的搜集机制,主要因为两局部模型来完成:StyleGAN Model 和 Blended Model。

此中,StyleGAN Model 负责对初始照片停止预训练,其目的是勤俭训练的工夫和老本,由于对于小我而言,并不是每小我都有足够的 CPU 或者数周的工夫停止数据训练,这个过程也被成为 “转移学习(Transfer learning)“。

重要的是,通过预训练模型,能够得到更高质量的图像。

Doron 介绍称,为了到达更好的动漫效果,他们网络了迪士尼 / 皮克斯 / 梦工厂等大约 300 张动漫图像作为数据集。

通过对数据集停止训练来学习动漫角色的典型特性。从以下输出结果来看,效果仍是十分不错的。

只管对数据集停止了少量的训练,但大眼、瘦脸等典型特性都能很好的捕捉到。此中局部图像比较含糊,是由于原始图像的分辨率比较低,并且有些是手绘图像形成的。

接下来,经过人脸微调的图像会进入 Blend Model 的解决阶段。

在这里,因为 StyleGAN 的构造,模型中的差别层以差别的体例影响天生人物的外不都雅。低分辨率层决定头部姿势和人脸形状,高分辨率层则控制光线和纹理等细节。

Doron 利用的 Layer Swapping 脚本从原始模型中提取了高分辨率层,从 StyleGAN Model 微调模型中提取低分辨率层,因而,最终得到了具有卡通人脸构造且具备照片级传神渲染效果的混合模型。

能够看到,利用原始的相貌模型和混合卡通模型天生图像,两者之间存在着明显的接洽,保持了人物的原始面容,同时也实现了动漫化。(必要夸大的是,若是必要高分辨率的卡通形象,则必要输入高像素的原始图像,一般不得低于 1024x1024 像素)。

效果传神,操作简略,但因太火而下线

StyleGAN 模型能够产生大量人脸图像,在此中能够找到任何一张人脸的图像。好比通过该模型输入一张必要解决的图像示例,模型会通过 “代码”(也称为潜在向量),输出一个与示例完全匹配的人脸图像,如下图左边为原图在左边,右边边为天生图。

然后将具有特定 “代码”的人脸图像输入混合模型,结果就能够得到一个卡通化人脸。

这一过程,输入示例大致履历了三步解决过程:

提取面步特性,并自动对齐图像。

找到潜在代码,复制图像。

利用卡通模型的潜在代码 , 对图像停止解决。

基于这一原理,用户只必要在体系中上传照片即可。不过惋惜的是,因为用户拜候量过大,思考到办事器的运行老本,Doron 暂时关闭了这一体系的利用入口,并体现重新布局老本效益后,会再次对外开放。

关于作者

Justin Pinkney 是该工具另一创建者。与 Doron 一样,Justin 对天生艺术和机器学习十分感趣味。

从他的小我主页上体会到,Justin 曾是一名物理学家,现在英国 MathWorks 担任软件参谋,负责算法开发、模型训练以及组织软件开发理论。

Justin 使用 StyleGAN 模型做过多项钻研。好比他通过 StyleGAN Network Blend 让壁画上的浮雕秒变人脸图像。

该项钻研同样是基于 “图层替换(Layer Swapping)”的概念,将根底模型与利用转移学习的模型(即微调模型)交融在一路到达最终的效果。

此外,还有使用神经搜集天生各类虚伪蛋糕等。

此类钻研的具体手艺过程,Justin 在其博客中给出了具体申明,感趣味的伴侣能够加入:(https://www.justinpinkney.com/stylegan-network-blending/)。

(责任编辑:)
------分隔线----------------------------
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
表情:
用户名:
发布者资料
查看详细资料 发送留言 加为好友 用户等级: 注册时间:2020-10-27 00:10 最后登录:2020-10-27 00:10