PT+LoRA,根本停不下来!
叙旧
2023-03-01 09:34:07

宝子们,不知道有没有期待小编给大家描绘一下“钟离公子的崽”?

可以是可以,但这也太小看我们的LoRA模型了!

LoRA模型有一个特点就是,只用一张图就能训练!而且训练速度很快,兼容各种画风模型。拿PT+LoRA画同人,那和“风格选择”有什么区别?

时代变了!宝子们!在这篇推文里,小编将给大家带来更加魔性的玩法!


App &PC端 
登入入口

首先,我们找到这个功能!APP端的宝子直接进入无界AI,在“高级设置”中就能找到PT/LoRA的功能:


使用PC端的宝子们,同样从无界AI的首页,进入AI创作。打开“高级设置”,在原有的“参考图”下面,即可找到PT/LoRA功能



入门玩法:

PT“角色同人” 

打开“角色同人”可以发现,无界AI这次不仅在推荐中为大家提供了各种特色风格和固定角色模型,更有8款大类二次元角色等你"临幸"!

角色同人的部分,我们最多一次性可以选择10个。


先来试试效果!

案例模型是二次元-全彩CG。为了更好的展示“新时代”的特点,这次我们抛弃联篇累牍的关键词,仅仅选用4个emoji图片——🚺、☀️、🌊、💐,然后不断累加同人角色:


图1、图2的效果非常明显,图2几乎相当于是胡桃角色同人。但小编仅选择了4个同人角色,就明显发现了一个非常重要的问题——权重

注意看图3、图4。

图3的“角色同人”,小编选的是“胡桃、能天使”,最终成品的主体是胡桃,但是增加了能天使角色中的“透明翅膀”的元素。

反之图4,小编选择的“角色同人”顺序是“能天使、胡桃”,成品出来,人物头发变短了、衣着也更加现代,形象更偏“能天使”。下为原角色造型图:

《原神》角色-胡桃
《原神》角色-胡桃


《明日方舟》角色-能天使
《明日方舟》角色-能天使



从图1-图6的对比,不难发现:仅加入一个“角色同人”的效果,非常明显。但随着同人角色越加越多,就会出现排名越靠后的同人角色“可见度”越低的情况。

显然,盲目的“大乱炖”并不可取,有目标、有顺序的选择几个同人角色就足够了(不同角色的融合效果不同,具体可自行尝试)。

同时,也可以适当添加风格类的“角色同人”选项:


权重,依然很明显。当角色放在前面、风格靠后时,风格对出图效果的影响会非常低。

所以单一角色混风的时候,建议尽量先选风格,再选角色,并将想要着重体现的风格放在前面。

2个或以上同人角色+不同风格的混搭时,更要注意。角色的先后,以及角色与风格的先后,都会带来完全不一样的效果:


看到这里,你是不是觉得已经大概摸索清楚规律了?

还是那句话,这才哪儿到哪儿?接下来我们聊聊进阶玩法——融合模型!


进阶玩法:

LoRA“融合模型” 

“融合模型”中的选项也非常多,而且还拥有单一选项权重设置的功能单图可选的融合数量最多能有5个。又是一个看上去很简单,但绝对能够“图玩年”的功能:


在二次元中,同脸是最大的问题(具体可对标迪X尼公主们的王子)。

所以我们先来个简单的换脸游戏。还是用上面的关键词“🚺、☀️、🌊、💐”:


小编随便选取了“亚洲女脸”2、4、6三个模板的来展示,从脸型、眼睛比例能明显看到差别。甚至风格上,有的比较可爱,有的比较成熟。

而这些脸型也是可以融合的,效果如图25、图26。

当然,AI暖暖当然还离不开“换装游戏”。我们选择一个比较有特色的融合模型“汉服2.5D-3”,并逐步叠加模型、调整权重:

一、比图15、图16,想要让角色穿上汉服,“汉服2.5D-3”的融合权重大致要在0.3以上。但不同模型的效果也不相同,小编尝试了一下“水墨国风”,权重在0.5及以上才有较明显的效果。大家在使用不同模型的时候,可以先去尝试。

二、从图16到图17,我们将“汉服2.5D-3”的权重加强到了0.55,并且增加了融合模型“果冻少女”,权重为0.8。整个画面的色度出现了明显的变化。(PS:因为本身有权重调整功能,选择具体“融合模型”的先后顺序,几乎不影响出图)

三、对比图16、图17、图18的着装,小编有一种错觉:“汉服2.5D-3”的权重越大,角色所穿的汉服就越规制。即,权重越大就越偏向传统汉服,而权重越小则可能越偏向现代改良版的汉服

四、我们继续在图19、图20上添加融合模型的数量。相信玩到到这一步的宝子就会发现——越来越容易垮图了!


这也是小编将“融合模型”称为进阶玩法的原因,能玩转4个风格类融合模型,绝对不是刚入门的小师弟/小师妹了!同样,想要晋升师兄/师姐的话,我们可以选择主打部位不同的“融合模型”做组合(如:脸部模型+风格模型+角色模型等)


同时,具体权重的调试更至关重要。尝试去降低模型的权重,然后逐渐调整比例(这具体需要先摸索出,选择的每一个模型的最低效果比重)。

比如图19,水墨国风模型的特点非常明显,小编就将它的权重设置在刚刚能看出明显效果的程度。

再到图20,小编继续添加了胡桃角色的模型。这个模型对人物发型的影响比较大,所以即便权重不算很低,也没有出现崩图的情况。

那如果将换脸与换装结合呢?


如果现在再与单纯关键+全彩CG模型的出图效果做对比,小编只能“大声质问”你:图就摆在你眼前,你看它还有几分像从前?


终极无限:

角色同人+融合模型 

认认真真看到这里,相信你对PT以及LoRA模型的玩法都已经有了一个大致的了解。我猜你一定和小编一样,已经非常期待尝试“角色同人+融合模型”的组合玩法了!

但老实说,想要将两者结合,并产生王炸级的能量反应,还需要宝子们自己上手摸索!

那今天呢,小编就先抛砖引玉,给大家简单展示几张效果图吧!(关键词:🚺、☀️、🌊、💐)


“作死”是玩家的天性!
谁又能抗拒
在崩图边缘不断蹦迪的快乐呢?!

PS:通用模板也可以使用PT和LoRA融合,
期待一个大神为我们带来
LoRA通用人物类模型的心得分享!


商务合作
文创客服
小助手