Stable diffusion角色设计:如何绘制多角度人像?

    我们在使用stable diffusion的时候,经常会出现的问题是想要绘制多角度人物,如何保证人物的一致性一直都是非常头疼的问题。
    解决这个问题的办法是通过训练lora来完成人物的一致性,但是,大多数 LoRA 都是针对现实生活中的人物(著名演员图像、个人照片)和风格进行训练,都偏训练者个人偏好的人物风格。如果我想根据大模型本身的输出创建一个角色,这样我就有一个 100% 独特的虚构角色了,如果要生成自己的虚构角色,我该如何描述呢? 今天,它来了,国外有位大神做了一张人物角色表模板,这个模板由15个不同的面部角度图组成,然后再生成一致且多角度人物图。 感兴趣的小伙伴可以去作者网站查看:https://cobaltexplorer.com/2023/06/character-sheets-for-stable-diffusion/ 人物面部角度图

    Stable diffusion角色设计:如何绘制多角度人像? - 图1

    人物网格图

    Stable diffusion角色设计:如何绘制多角度人像? - 图2

    具体流程有三步:

    1、controlnet OpenPose来识别人脸 2、Controlnet Lineart来引导SD将生成保留在特定框中 3、Ultimate SD upscale放大工具(因为之前每个正方形的格子尺寸为256,放到到512尺寸才算是正常,也利于大家后面训练lora做为素材)

    1、controlnet OpenPose来识别人脸

    把人物模板放入controlnet中,选择OpenPose。

    预处理器:openpose_face

    模型:默认

    Stable diffusion角色设计:如何绘制多角度人像? - 图3


    2、Controlnet Lineart来引导SD将生成保留在特定框中

    切换到controlnet第二个选项卡,放入线框模板,选择Lineart。

    预处理器:lineart_standard (from white bg & black line)

    模型:control_v11p_sd15_lineart [43d4be0d]

    Stable diffusion角色设计:如何绘制多角度人像? - 图4

    当然,如果不希望脸崩坏的话,建议使用ADetailer插件进行人脸修复,这样可以大大减少人脸崩坏的情况。

    Stable diffusion角色设计:如何绘制多角度人像? - 图5

    点击生成,得到如下效果:

    大模型:墨幽人造人 正向提示词: ((best quality)),((masterpiece)),(detailed),(a character sheet of a woman from different angles with a grey background:1.4),auburn hair,eyes open,cinematic lighting,Hyperrealism,depth of field,photography,ultra highres,photorealistic,8k,hyperrealism,studio lighting,photography, 反向提示词: easynegative,canvasframe,canvas frame,eyes shut,wink,blurry,hands,closed eyes,(easynegative),((((ugly)))),(((duplicate))),((morbid)),((mutilated)),out of frame,extra fingers,mutated hands,((poorly drawn hands)),((poorly drawn face)),((bad art)),blurry,(((mutation))),(((deformed))),blurry,((bad anatomy)),(((bad proportions))),((extra limbs)),cloned face,(((disfigured))),gross proportions,(malformed limbs),((missing arms)),((missing legs)),((floating limbs)),((disconnected limbs)),((malformed hands)),((missing fingers)),worst quality,((disappearing arms)),((disappearing legs)),(((extra arms))),(((extra legs))),(fused fingers),(too many fingers),(((long neck))),canvas frame,((worstquality)),((lowquality)),lowres,sig,signature,watermark,username,bad,immature,cartoon,anime,3d,painting,b&w,

    Stable diffusion角色设计:如何绘制多角度人像? - 图6


    3、Ultimate SD upscale放大工具

    点击发送到图生图按钮,在图生图中进行方法处理与进一步修复人脸崩坏的情况。

    Stable diffusion角色设计:如何绘制多角度人像? - 图7

    在最底部的脚本中选择Ultimate SD upscale放大工具,具体设置如下:

    Stable diffusion角色设计:如何绘制多角度人像? - 图8

    修改提示词相关性(5)与重绘幅度(0.4)数值

    Stable diffusion角色设计:如何绘制多角度人像? - 图9

    同样的,点开ADetailer插件进行人脸修复

    Stable diffusion角色设计:如何绘制多角度人像? - 图10

    得到如下效果,人脸完美修复,没有任何崩坏的情况:

    Stable diffusion角色设计:如何绘制多角度人像? - 图11


    3、相同方法,生成不同风格多角度人像

    3D风格

    大模型:disneyPixarCartoon_v10

    Stable diffusion角色设计:如何绘制多角度人像? - 图12

    动漫风格

    大模型:万象熔炉 _ Anything Ink_Ink

    Stable diffusion角色设计:如何绘制多角度人像? - 图13

    插画风格

    大模型:revAnimated_v122

    lora:flatIllustration

    Stable diffusion角色设计:如何绘制多角度人像? - 图14

    好了,以上就是今天的分享,希望这篇文章对你在设计上有所帮助,如果感觉内容不错,请点个在看,或转发给更多朋友吧,谢谢大家~