SAEHD不香吗?谈谈SAE与SAEHD

教程发布 无标签
DeepFaceLab
DeepFaceLab DeepFaceLab 2019-12-17 12:23:16
用户等级:0级

SAEHD想要运行起来会比SAE要难的多,默认参数下SAE“效率”就好很多,那么造成这个“问题”的原因是什么呢,我们来简单的看一看。

从参数上看似乎并无大区别

我们仔细对比一下会发现SAEHD“不见了”pixel_loss参数,多了random_warp和true_face_training参数,而且新版SAEHD默认ae_dims也从512更改为256,e_ch_dims和d_ch_dims合并为ed_ch_dims并默认为21.

true_face:我们知道,作者在2019.09.19版本增加了TrueFace模型(基于GAN),然后在09.24版本又给重置清零,紧接着在2019.10.09版本将TrueFace模型彻底移除。这对于当时拿TrueFace练模型的小伙伴真的是个悲伤的故事。

TrueFace开启前

TrueFace开启后

相比较之前独立的TrueFace模型而言,SAEHD中的TrueFace是模块(外挂)般的存在,目前版本的TrueFace参数其实过于温柔,需要开启更长时间才会有更好的效果,建议在合成之前开启1-5万次迭代会使脸更加清晰,最重要的是开启之后确实会更像src.

random_warp : 在训练初期random非常有用,原因是random可以随机扭曲面部表情,也就是所谓的无中生有,当src素材不足之后开启会有想不到的效果。但是弊端也很明显,如果长时间开启会损失一部分的“真实度”,因为很多表情都是“扭曲”来的会显得不那么真实,而且random堪比learn_mask都是显存杀手,建议训练中期就将其关掉。

pixel_loss :SAEHD之前的模型都有pixel_loss,我的一位小伙伴喜欢将其叫做图丢,细细想来这个外号真的非常贴切,那么SAEHD为啥没有pixel_loss呢,其实也是有的,只不过不好找到而已。我们都知道SAE是最容易坏掉的模型,开启了 clipgrad梯度剪切还好,不开启就训练真的是胆战心惊。SAE未开启pixel_loss之前用的是DSSIM,开启之后DSSIM被关闭,结构更改就将模型变得不够稳定。SAEHD就大大的不同,其同时开启DSSIM和pixel_loss而采用相加的值,所谓SAEHD稳如狗并非浪得虚名。

总结:SAEHD现在仍然不够完美,但是不论是稳定性还是效果都足以秒杀其他所有的模型,如果你的电脑实在跑不动SAEHD,我们建议你将random_warp关掉,这样或许是另一种形式的高配版SAE模型。

SAEHD不香吗?

楼主签名:
回帖
回复列表

    版块列表

    本站热帖
    01 AI换脸第三步:DeepFaceLab使用教程(2.训练及合成) 4477
    02 AI换脸第三步:DeepFaceLab使用教程(1.安装及分解视频) 4292
    03 P100真香:DeepFaceColab详细教程 3408
    04 2GB显存畅玩 DeepFaceLab更新至2020.01.08 3254
    05 选择合适的模型 H64 -H128 -DF -SAE -SAEHD 3212
    06 SAEHD不香吗?谈谈SAE与SAEHD 3168
    07 极致的遮罩处理(一):DeepFaceLab手动遮罩编辑。 3020
    08 DeepFaceLab不同模型的参数含义 2997
    09 DeOldify – 一个强大的AI修复老照片(视频)项目 2781
    10 “增之一分则太长,减之一分则太短”,精细的调整取脸框大小,不做提脸的“登徒子” 2776
    11 图像无损放大工具 Topaz Gigapixel AI v4.4.4 破解版 2704
    12 AI换脸第二步:选择合适的DeepFaceLab版本 2594
    13 DeepFaceLab新手基础知识:训练期间如何更改参数值? 2477
    14 合成必修课:7) convert 合成合成如何从“人皮面具”变成“真实脸部” 2474
    15 通过image_denoise_power降噪让换脸更自然 2340
    16 合成必修课:7) convert之调整模式详解 2289
    17 AI换脸进阶:如何给戴眼镜的面部换脸? 2250
    18 合成必修课:7) convert 合成暂停和继续 2190
    19 DeepFaceLab更新至2019.12.17 2178
    20 这个模型会上头:Avatar模型的使用说明 2133