在文生图中,由于是扩散算法,每次生成的人物脸部不一致。
可以使用Lora模型进行控制,lora模型需要预先训练,并且训练需要不同角度的图片,而文生图又由于每次生成的图片不一致,进入了死循环。
openpose模型解决
原理:通过openpose控制,生成多个角度的角色图片,用于训练lora
流程:
首先下载素材图片:
1.将带人物的网格图放入 ControlNet 单元1 中,使用 openpose
进行骨骼识别,控制出图时需要生成人物脸部的不同角度,
需要开启完美像素模式,作者建议权重为2
2.将空白网格图放入 ControlNet 单元2 中,使用 L
进行对出图时控制网格图,
需要开启完美像素模式,
3.最终出图的分辨率为 1328*800
4.文生图关键词(按需使用):
正向提示词:
(a character sheet of a woman from different angles with a grey background:1.4) , auburn hair, eyes open, cinematic lighting, Hyperrealism, depth of field, photography, ultra highres, photorealistic, 8k, hyperrealism, studio lighting, photography
反向提示词:
easynegative, canvasframe, canvas frame, eyes shut, wink, blurry, hands, closed eyes, (easynegative), ((((ugly)))), (((duplicate))), ((morbid)), ((mutilated)), out of frame, extra fingers, mutated hands, ((poorly drawn hands)), ((poorly drawn face)), ((bad art)), blurry, (((mutation))), (((deformed))), blurry, ((bad anatomy)), (((bad proportions))), ((extra limbs)), cloned face, (((disfigured))), gross proportions, (malformed limbs), ((missing arms)), ((missing legs)), ((floating limbs)), ((disconnected limbs)), ((malformed hands)), ((missing fingers)), worst quality, ((disappearing arms)), ((disappearing legs)), (((extra arms))), (((extra legs))), (fused fingers), (too many fingers), (((long neck))), canvas frame, ((worst quality)), ((low quality)), lowres, sig, signature, watermark, username, bad, immature, cartoon, anime, 3d, painting, b&w
5.将生成的图片放置图生图,进行清晰度修复
在生成的网格图中,每张图片的像素仅有256*256,这时候需要将分辨率提高
ControlNet中使用 Tile
模型处理:
最后选择放大算法:
暂无评论内容