郑重声明:本人制作该模型完全出于对该公众人物的喜爱,该模型所基于的角色荧是本人心中最优秀的cosplay之一。在制作的过程中,我没有任何冒犯、侵权、或者商业行为的意图。我希望这个模型能被视为二次创作,而非对公民人身权的侵犯。
若在制作该模型的过程中,我的行为产生了任何侵权问题,请及时联系我并进行协商解决。上个月看到站内有人分享了自己炼的翠翠cos模型,给了我一些启发,于是想制作一个介于cos模型和人物模型之间的lora,在还原cos者的同时尽可能保留更多服装细节。考虑到dawn66666666(原dawn6666)大佬曾经在civitai发布过No.119(翠翠)的荧lora(已被下架,原封面如图),
但大佬主要炼的是上半身像,当时的lora炼制方法也远没有现在这么成熟,因此想尝试自己炼一个。由于版权声明,这里不展示炼制lora所使用的大模型
不过你们猜也能猜到。由于是第一次炼制,很多训练参数也都是照搬赛博佛祖们的,没有半点个人经验,训练集全部来源于公开网络并且分辨率堪忧,但还是勉勉强强炼制出了人生中第一炉丹。在使用lora分层后得到的效果还算不错:
不过由于训练集分辨率问题,衣服的细节并没有被很好保留下来,所以我之后用supermerger (
https://github.com/hako-mikan/sd-webui-supermerger) 分层融合了现有的lora模型与Numeratic大佬的lumine模型(
https://civitai.com/models/35028)。由于大佬的lumine模型是用NAI模型炼制并且数据集非常充足,因此泛用性很高在三次元模型中也还原得很出色。
之后就是考虑用什么模型去生成图像了。虽然lora模型是依托某大模型炼制的,但并不意味着原模型生成效果最好。因此我对比了多个2.5D/3D模型,以下是d大佬的翠翠模型与N大佬的lumine模型的融合lora在不同模型中的表现:
从中筛选出面部和服饰都还原得还不错的四个模型并进一步比较:
由于服装tag也被正确嵌入,那么继续比较一下换装效果:
萝卜白菜各有所爱,我个人更偏好realidefmix模型(by aigirl951877),之后就默认使用realidefmix模型。
我也对比了自己炼制的lora效果(HYH/no119:0.9/1.0面部权重):
可以看出我的模型相对来说更还原人物面部,这是因为dawn大佬的旧模型在当时并没有被很好地分层(
补充:这里说的有问题,应该是lora只调用9/10/11的face分层后,相比我的模型分层后的表现,其人物脸部特征明显减弱,应该是模型有些欠拟合)。但由于训练集问题,我的模型有几率会将荧一侧的发饰错误表现为苍色的头发。
以上是本人第一次炼制lora的简报,一方面可能不合规,另一方面炼得不满意,模型就不分享了。
我进一步优化了这个模型,感兴趣的可以来看看我新的炼丹帖。realidefmix模型地址(其他展示模型也均在c站):
https://civitai.com/models/66728/realidefmix