基本参数
训练素材:78张头像,训练步数:7800,训练载体:kohya,基础模型:SD1.5
LORA用法(很重要)
lora的主要用法是在img2img的inpaint里,去修改原图像的头。
不要在txt2img里面直接用lora。
因为人物肖像的lora,训练素材都是怼脸的大头照,你直接在txt2img里面用,所生成的图片都是大头照。哪怕你在prompt里面输入了 full body,出来的图片还是大头照。当然,你可以降低LORA的权重,就能生成带身体的图片,但是,这样一来,人物的样貌就变了,这不是我们想要的结果。
下面是简单的教程。
这是一张AI生成的正常比例的人物肖像,我们把这张图转到img2img里,在inpaint里给人物的脸部画上蒙版,输入chengxiaoCC的LORA
这样,我们就得到了一张带有程潇脸部的半身照。
这么做的好处是,你可以在txt2img里面,专心制作人物的衣服,动作,场景。
最后,再单独用肖像lora,在img2img里的inpaint里进行最后的加工。更加灵活,成品率更高。
值得注意的是,img2img里面的prompt,和Sampling method,要保持和txt2txt里的一样,这样做,可以保证替换的人物脸部跟原图光影统一。
声明
本人提供的训练素材,仅仅用于学习和交流,分享AI绘画经验。
不要用于商业用途,不要用于色情制作,不要大规模传播。
如果某些人执意要将公众人物的肖像用于情色素材,请不要著名此LORA的出处,非常感谢。
Description
FAQ
Comments (37)
如果有训练模型方面的问题,可以私聊,感谢大家的支持。
大佬,6g显存能训练吗,我很想训练,碍于设备不行
@Yjjjmiao 用kohya是可以的 油管有教程
有心了,表示敬意
你好呀,可以加个V么~,有偿请教~,V同手机号 13810456674
@kaol2046 512827520 可以加QQ群,我也在里面。
大佬人也太好,支持!
想問一下訓練用的模型是不是用官方sd1.5效果就足夠?
然後用的素材圖片有沒有說最少用多少張才比較理想?
大頭照分辨率要最少720p/1080p 嗎?
@verXD 大头照分辨率目前是512*512.训练素材最少15张,训练的模型目前我用的是1.5
@three117 SD1.5模型叫什么名字呀,是你下载sd最开始的一个模型吗?
@linerMA stable diffusion-v1-5-pruned 官方模型之一,可以在hugging face下载
@three117 感謝大佬回覆!用你的方法做出來的lora 不會影響衣服好強!
不過有時想用hiresfix做高清圖,用inpainting好像是沒辦法,
只好兩種lora都做一做哈哈
大佬我误了, 话说群满了
群满了,求新群
@mx1700806 有新群的话加我下谢谢! 71420381
请问你换脸时用的是官方的sd-1.5 impainting么?
学习了,感谢大佬!
没找到在哪私聊,我想请问一下大佬有麦香鸡(菌烨tako的lora)的lora吗
这两天 正在从灵域电视剧中,扒程潇的素材炼丹。电视剧的妆造更加统一,提升后期出图效果。
图像分辨率更大了,把身体也带上,尽量避免大头娃娃的情况
大佬或许可以考虑从她女团时期的图训练?
请问训练集图片分辨率最大是768*768吗?再大还有用吗?
@FRANK7IN 女团时期的图太少了,我暂时不知道去哪里能获得更多
@taystal 目前正在尝试768*1024
脸的话推荐去她的MV里截图当素材
@MAKUBEZW 感谢,刚才我已经再查找宇宙少女的MV了,发现确实可以有使用的素材。
@MAKUBEZW pinterest这里面也有很多刚出道的高清图
@three117 感觉网上的图包好多能用的,大概2k张?
xue dao le
大佬请问“在inpaint里给人物的脸部画上蒙版,输入chengxiaoCC的LORA”这个到底是在哪里输入Lora?在Prompt里面吗?可是你不是也说Prompt不能改,我没找到别的能输入Lora的地方,疑惑中,万谢!
就是在prompt里面,加上lora的信息就可以了,除此之外的prompt尽量不改
good txt2img稍微过拟合了点,不过算可以了,chillmix底膜训练亚洲面孔可能更好,
这是第一个丹,很多细节没有把握好,经验不足,然后再炼一个程潇的承诺也一直没有兑现
作者说话好听,我给作者点个赞
Details
Files
Available On (1 platform)
Same model published on other platforms. May have additional downloads or version variants.