大家好,我是叶梓。一名AIGC狂热爱好者,目前正在 AI 领域进行深入的探索。
不知不觉间,已经在 AI 领域摸爬滚打了快半年。目前对于目前 AI 领域里的各种主流工具都玩的不错。
同时也跑通了AI 写作、AI 绘画的一些项目,让自己有了一些成就感。
学习 AI 的同时我也根据自己的使用心得,编写了两份 AI 绘画的入门攻略,帮助了不少刚接触 AI 绘画的小伙伴。
详细内容见:零基础光速入门AI绘画,SD保姆攻略 终和零基础光速入门AI绘画,Midjourney保姆攻略 终
本系列的文章是 Stable diffusion 的各种进阶操作
在上一篇文章里我们重点说明了使用 controinet 中的 tile 模型和 Lineart 模型,将动漫人物转为真人的方法。
相信很多小伙伴已经把二次元老婆带进了现实,有好的图片记得分享哦。
今天我们继续讲解真人转动漫的方法,这样你就可以给自己的女朋友做一张独一无二的动漫图了。
一、 controinet 模型的选择
和动漫转真人一样,我们同样要借助? controinet 模型,真人转动漫比较的好的模型也是 tile 模型和 Lineart 模型。
不得不说, tile 模型和 Lineart 模型这个模型绝对是 controinet 模型的新秀。
二、实际操作流程
基本操作和上一篇的操作区别不大。
大模型:这次我们要生成动漫人物,所以要选择一个动漫模型,比较推荐 revAnimated 或者 anything ,其他二次元模型也是可以的,比如Counterfeit,或者Cetus-Mix等。
vae:84000即可。
正面提示词:需要详细的描述出真人图片的内容,或者又想要做一定修改的内容。
反面提示词:通用的反向提示词即可,可以加上 easynegative 、badhandv4等Textual Inversion。
采样方法:因为是做动漫图片,DPM++ SDE Karras比较好一些,其他的可以尝试,找出自己喜欢的风格。
面部修复:动漫图片一般建议不用打开。
高清修复:建议打开。算法选择R-ESRGAN 4x+Anime6B,重绘幅度0.5-0.7即可
打开 controinet :上传真人图片,选用 tile 或者 Lineart 。
最后点击生成,等待生成即可。
我们看一下生成的图片。
原图:
tile 模型:
Lineart 模型:
主要列举了 tile 模型和 Lineart 模型生成的图片,有感兴趣的朋友也可以多多尝试其他的模型,看看哪种更合适。
三、真人动漫互转的本质
上述的使用 controinet 中的 tile 或者 Lineart 模型,对于真人动漫互转的方法,相信大家都学会了。
其实本质上就是,使用 controinet 对于线条进行控制,然后配合大模型,去升噪降噪的过程,也是 diffusion(扩散)的过程。
四、其他真人动漫互转的办法
前面我们学到,通过文生图对图片进行描述,然后通过 controinet 的模型进行控制,然后通过大模型进行重绘,把真人和动漫进行了互转。
我们既然通过文生图可以实现,那么图生图自然也可以达成这样的效果。
操作流程:
1、我们在图生图中,上传我们的真人图片。
2、参数如下图
3、重绘幅度保持在0.5-0.75之间都可以。因为是图生图,幅度越小,改变的地方越少。
4、 controinet 的操作和文生图保持一致即可。
我们看看最终的效果。
tile 模型:
Lineart 模型:
我们可以看到,这两个模型出图的风格还是有不同的。不过相对于文生图,图生图和原图相似度更高,但是缺乏了一些二次元的感觉。我们可以根据自己的喜好去进行选择。
同样的,我们也可以使用图生图,去进行动漫转真人。
好了,本篇文章就先到这里。在本篇文章里我们重点说明了使用 controinet 中的 tile 模型和 Lineart 模型,将真人的照片转为动漫风格的两个方法。
你学会了吗?赶快打开SD,给你的女朋友做一张独一无二的动漫图吧。
下一篇,我们会继续讲解让你的二次元老婆摆出你想要的姿势。期待的同学记得点个关注。
感谢阅读,我们下个文章再见。