虚拟模特ai怎么让脸不飘?我的固定人设三件套

虚拟模特ai怎么让脸不飘?我的固定人设三件套
虚拟模特ai固定人设:同一张脸多姿势出图的对比墙

我的判断是:虚拟模特ai想让脸不飘,单靠提示词死路一条,得靠参考图锁脸、LoRA训练、种子与描述双固定这三件套。先用免费额度试锁脸插件,跑通了再考虑训不训LoRA。

虚拟模特ai这东西,玩过的都懂:单张图美得冒泡,连出十张就露馅,换个姿势脸型就变,上一张圆脸下一张瓜子脸,买家看着像进了两家店。我给一个做饰品的朋友出季度素材,第二个月客户自己看出来了:主页封面和详情页的模特,眼距对不上。那单我赔了重做的时间,也逼我把固定人设这条路彻底走通。

先把丑话说在前面:任何工具都不存在一键固定人脸的按钮,宣传页里那种前后一致的效果,背后都是有人在做控制。控制做得越足,脸越稳,这是唯一靠谱的规律。

脸为什么会飘,先弄清原因再动手

采样过程的随机性、姿势变化带动五官重绘、提示词只能定风格定不了骨相,三层原因叠一起,脸必然飘。提示词写得再细,也管不住采样器掷骰子。

拆开讲。第一层,出图的采样过程天然带随机性,同样的提示词跑两次,结果都不一样,这是机制本身,绕不开。第二层,你换了姿势、换了构图,模型等于重新画了一遍人,五官是它按概率重新想象的。第三层最气人:你写"瓜子脸、大眼睛、高鼻梁",模型每次对这几个词的理解都有偏差,风格能锁,骨相锁不住。

我做过一个对照实验:纯提示词控制,同一套描述跑100张,让同事挑"能认出是同一个人"的,只挑出58张。这个成绩做单品凑合,做品牌人设远不够格。所以别在提示词上死磕了,方向就不对。

固定人设三件套,按顺序上

第一件用参考图锁脸,第二件训专属LoRA,第三件种子加描述双固定,三件套齐了,识别率能从六成抬到九成往上。顺序别乱,一件不够就上下一件。

第一件,参考图锁脸。用IP-Adapter这类人脸参考插件,weight我习惯给0.8到0.9,再高脸是锁住了,表情会僵。脸的素材得你自己准备:从生成图里挑一张骨相顺眼的,存成基准图,后面所有批次都喂它。多说一句,基准图要么用全AI生成的,要么用有授权的素材,别拿真人的脸去套,请勿用于冒充他人身份,这条红线得写在流程里。

第二件,LoRA训练。基准图有了,再喂30到50张不同角度不同光线的同脸图,8G显存在我那张4070上跑一轮一个半小时。训出来的LoRA权重别拉满,0.7左右最稳,拉满会过拟合,连基准图上的碎发瑕疵都一起复刻。我踩过的坑:训练集里混了七八张戴眼镜的图,出来的模特逮谁都给配一副眼镜,返工一下午才找到病根。

第三件,种子加描述双固定。锁脸之后脸型稳了,但发型、肤色还会小幅漂移,把表现好的那版的种子号记下来,配上写死的外貌描述段,漂移幅度能再压一档。我试过同一参数连跑50张,发际线的弧度只在两张上出了可察觉的偏差,这个稳定度做季度素材够用了。这三件套是递进关系,第一件就够用就停,别为了炫技全上。

批量出图时,抽检机制比技术更重要

每20张抽1张,跟基准图并排对比耳型、眼距、脸上的痣,认不出就重跑;再建一张人设参数卡,把所有生效参数写死存档。靠眼睛记是靠不住的,靠流程才靠得住。

为什么抽检放这么重的位置?因为脸飘是渐进的,跑着跑着模型状态变了、插件没挂上,等你发现已经废了一大批。我的做法是出图窗口旁边永远开着基准图,肉眼扫一眼只需要两秒。

人设参数卡是个土办法但真好用:一张文本文件,写清基准图路径、锁脸权重、LoRA文件名和权重、种子号、外貌描述段落、采样器参数。换电脑、隔一个月重跑、或者交接给同事,照着卡片填参数,出来的脸依然对得上。没这张卡之前,我自己都复现不出两个月前那张脸。

对了,如果你想研究不碰真脸的前提下怎么把人像画出味道,于谦ai绘画怎么画才对味那篇的思路挺值得一看,讲究的是神似而不是复制。

回到开头的判断:脸不飘靠的不是某款神奇工具,是控制做的足不足。三件套按需上,抽检和人设卡把成果固化下来。虚拟模特做的是长期形象,前期多花在固定上的每一分钟,后面每个批次都在还你。

常见问题

虚拟模特的脸会不会不小心撞脸真人?

概率很低但不为零。我的习惯是新面孔定稿前拿去搜一次图,看着眼熟就推翻重来。另外别故意往明星长相上凑,那不是撞脸,是找事。

能拿真人照片训练专属LoRA吗?

拿自己的照片练自己的形象,没问题;拿别人的照片,必须拿到本人明确授权,否则风险全在你身上。给客户做项目更要白纸黑字写清楚素材来源。

一个虚拟模特形象能多个店铺共用吗?

技术上没问题,但两家店挂同一张脸,买家会串戏,你的品牌辨识度反而被稀释。真要复用,至少换个发型妆造,拉开差距。

固定脸之后,体型和肤色怎么保持一致?

跟脸一个思路:体型靠固定的身材描述加构图控制,肤色靠写死的描述词加统一的光线预设。都写进人设参数卡里,别凭手感。

延伸阅读