背景

堂哥最喜欢的动漫是死神。他给了我一张死神主角一户的头像,以及自己的头像,期望我产出一张真人动漫头像。

一户的头像:

堂哥让我给他做个真人动漫头像

堂哥自拍照:

堂哥让我给他做个真人动漫头像

最近,有大佬布置了个stable diffusion,正好拿来一试身手。

stable diffusion 1.4 做真人动漫头像

整理一下思路,做动漫真人头像,首先要把动漫头像转位真人(写实)头像,然后在写实头像的基础上换脸就能达到想要的作用。

第一步,动漫转真人

图生图

堂哥让我给他做个真人动漫头像

  • 先挑选图生图功能,把一户头像拖进去。
  • 然后运用interrogate deepbooru插件,从上传图片做反向生成提示词,以免自己去写提示词。
  • 然后再恣意挑选一个写生风的LORA模型,这儿挑选了majicmixRealistic。

运用 control net

启用 controlNet插件,controlnet 用网格的形式,标准stable diffusion骤变的规模,从而然著作愈加安稳。

堂哥让我给他做个真人动漫头像

这儿用 lineart_standard 主动依据上传图片生成网格,免去了手动绘制网格的烦恼。

其他

采样步数、宽、高以及提示词相关性,可以依据实践需求和生成著作的作用酌情调整。

点击生成,看看作用

生成出来的图片,对比动漫原图,现已非常写实。

堂哥让我给他做个真人动漫头像

接下来,可以用这张写实风的图,去做真人换脸。

第二步,换脸

反推提示词

和转真人一样,运用图生图,上传写实处理后的著作,反推提示词。LORA也是恣意选一个写实风相关的就可以,要求不大。

与此同时,采样迭代步数调高,重绘起伏调低。

堂哥让我给他做个真人动漫头像

运用 Face Swap插件

启用face swap插件,上传图片,选面部修复。

堂哥让我给他做个真人动漫头像

点击生成,看看作用

大功告成了

堂哥让我给他做个真人动漫头像

终究著作

堂哥让我给他做个真人动漫头像

总结

制作真人动漫分以下两部

1.运用图生图,把动漫转为真人,恣意选写实风的LORA,并利用control net插件,操控生成著作的改动规模。

2.运用图生图,对写实图片换脸,运用face swap插件,轻松换脸。