着衣揉みLoRAを探求してるんやが、ちょっとアドバイスもらえないやろか

https://files.catbox.moe/cqf82j.Jpg
こんな感じの表情が含まれない教師画像を80枚作ってリピート数2、30エポックで回してるんやが、、、
https://files.catbox.moe/k77hus.jpg
出来上がったLoRAを適用すると全体的に彩度が落ちるのと、女の子が無表情に近づく(ベースPonyでebaraで出力)

教師画像のタグには White Background とか含めて覚えないようにしてるつもりなんやが、色がくすむって事は過学習ってことなんやろか・・・? 女の子の表情が曇るのもよくわからん・・
なんかやらかしてるところあったら教えてもらえると嬉しいです