ai模特lora训练实测:触发词、权重和底模搭配我踩过的坑
先说结论:ai模特lora自己训完全可行,二十来张图就能把自家款练出专属性,但权重和底模这两个参数卡得死,差一点就是两个物种。读者先做的是:攒一份分布匀称的训练集,再谈抽卡。
9月初店里上秋装,外拍报价一条裙子两三百,我干脆给主推的那款外套训了个ai模特lora。练完三版的判断很直接:能用,出图的专属性比通用模型高一大截,衣服的落肩、双头拉链这些细节都带得住,但参数比想象中挑剔。最直观的变化在售后,之前用通用模型出的图,偶尔有买家拿着"图片跟实物颜色版型对不上"来找事,这批几乎没出现过。
训练总投入说出来吓不着人。22 张图,单版训练四十来分钟,云卡花费十块以内;拍摄那 22 张只用了一个下午,衣架挂拍加平铺,手机就拍完了。真正花时间的是试参数,我从 0.5 一路试到 0.9,废图出了小一百张才摸到舒适区。这笔账后面拆开讲。
训练集不是越多越好,是分布越匀越好
训练集 20 张上下就够,关键在角度和光照的分布要匀:上身、平铺、细节各占一块,姿势别重复凑数。数量堆上去没用,分布歪了整批图都歪。
我第一版训练集就栽在这。当时贪多凑了 30 张,其中 24 张是同一个正面站姿,光全是顶灯。练出来的模型出图千篇一律,跟盖章似的,换提示词都掰不回来。
第二版推倒重来,22 张:上身 10 张、平铺 6 张、袖口领口拉链细节 4 张、白底全身 2 张。光线故意打散,窗边、阴台、室内灯各来一部分。这版练完,出图的姿势总算"活"了。喂图这事跟喂饭一个理,顿顿同一个菜,模型就只认那个菜。
拍训练集另有几个小讲究:挂拍别逆着窗,闪光灯一开布料反光,练出来的模型也爱跟着出油光;细节图拍虚了宁可删掉重拍,糊图喂进去,出图的手部和织纹会跟着糊。这几条都是第一版喂过亏才改的。
权重 0.7 到 0.8 是我试出来的舒适区
调用权重压在 0.7 到 0.8 之间最稳,低于 0.6 版型跑偏,高于 0.9 面部发僵,先抽三张看脸再放量出图。
权重这东西,我试了下就摸清它的脾气。同一个训练包,0.5 的时候衣服是衣服人是人,可袖长忽长忽短,双头拉链经常只剩一头;拉到 0.9,版型是稳了,脸开始僵,五官往中间挤,一看就是练过头。
| 权重 | 服装版型 | 面部 | 10 张可用量 |
|---|---|---|---|
| 0.5 | 袖长忽长忽短 | 自然 | 4 到 5 张 |
| 0.75 | 基本不跑 | 自然 | 8 张 |
| 0.9 | 很稳 | 发僵、五官挤 | 3 张 |
出图参数我也固定下来了:1024×1536 竖幅,步数 28 到 32,步数低了衣服纹理发虚,高了也就那样,纯属烧时间。抽卡别一把梭,我的习惯是先按 0.75 抽 3 张,脸过关再放到 10 张一批,免得整批报废。9月中那批秋装图固定 0.75 出,10 张里崩 2 张上下,崩的基本是手指和衣领压褶。这个可用率,修图完全兜得住。有同行说他那儿 0.8 更好,我试了下两版对比差别不大,款式越复杂我越往 0.7 靠,简单款才敢上 0.8。
底模一换,lora 立刻变陌生人
lora 是绑死底模的,换底模等于换土壤;触发词只负责唤起,脸和画质的上限全由底模决定,升级前先留档。
9月中我手痒升级了一版底模,想着画质能再抬一截。同参数同触发词,出来的人像换了个人,五官脸型全变,外套版型倒还认得。翻回去一看,训练包是在旧底模上练的,等于苗挪了土。回滚,重训一遍才对上。
触发词本身倒是随意的。我起的是 mvcoat01 这种无意义字符串,就为避开常用词撞车。有人爱用"外套模特"当触发词,容易把提示词里本来就有的词搅进去,抽卡结果忽好忽坏,排查起来费劲。重训之后触发词不用改;训练包文件名我按品类加日期来起,哪个包是哪天在哪版底模上练的,翻起来不抓瞎。听着琐碎,店铺图一多,这就是救命的习惯。
话说回来,现在店里八成模特图都走这套流程,主推款才有资格单独训一个 lora,长尾款拿通用模型加提示词凑合。预算紧的同行不用一步到位,先挑一款卖得动的试水,二十来张图,一晚上能见分晓。练坏了也就废一晚上电费,加十来块云卡钱,比一次外拍便宜多了。真到上手那步你会发现,最难的压根不是技术,是狠下心删掉不合格的训练图。
常见问题
训练图一张都不想自己拍,拿网上扒的卖家秀凑训练集行吗?
我试过混 3 张网图进去,出图角落总带水印残影,风格也打架,整包都给带偏了。版权风险还在那儿摆着,这功夫省不得,自己手机拍足够。
显卡带不动训练,上云贵不贵?
我这边用按小时计费的云卡,单版训练 40 分钟出头,花费 10 块以内。调参废的是图,不是钱,成本大头是你的晚上。
lora 出图手指崩了怎么救?
局部重绘手部区域,重绘幅度 0.4 左右,别整图重跑。我这边 10 张能救回 7 张,比重新抽卡省时间。
一个店要训几个 lora?
我现在养着 3 个:外套、连衣裙、针织,按品类分。每加一个成本不高,麻烦在维护——底模一升级,全得重训验证一遍,别贪多。