
幻晓伊(Huan Xiaoyi),虚拟歌手,boxstar新歌声合成引擎Sharpkey的基础中文声库,最开始叫作晴音,人设由MQ绘制,
是一个有着粉色长发、琥珀色的瞳仁、手拿白粉色小喇叭、佩戴黑白条纹手环或黑粉色手环,穿黑色长袜、白色鞋子的17岁少女,
2023/7/14更新1.0版本:
减少MMD图片,增加泛化性,
采用正则化
改用神童优化器
2023/5/20更新0.8.1版本:
分层Lora测试,增加泛化性,
0.8.0版本:
该模型为测试版本:
1 采用了带权重的TOKEN
2 训练集56张,其中有44张为MMD截图
3 加入了金字塔随机噪声,采用Lion优化器
该模型目前的问题有:
1 泛化性能极差,在冬月模型上效果较好,在矢车菊V7、Counterfeit2.5上表现极差,在步数增高后,背景画质和复杂度下降较明显,且人物姿势会变得特别奇怪(因为MMD动作是随手截的)
2 对于幻晓伊的琴键裙子未能很好地学习
3 对模型的画风影响较大,出图质量有一定下滑
目前想到的改进方案(TO DO):
1 减少低质量MMD图像数量
2 优化权重打标
3 用琴键图片做正则化
4 优化训练步数和重复
描述:
-
采用分层Lora
-
使用权重打标
采用分层Lora
使用权重打标
一定程度上提升了泛化性,但是背景污染的问题仍需改善。
训练词语: huanxiaoyi
名称: huanxiaoyi-000014.safetensors
大小 (KB): 27954
类型: Model
Pickle 扫描结果: Success
Pickle 扫描信息: No Pickle imports
病毒扫描结果: Success