ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

简单尝试DeepFaceLab(DeepFake)的新AMP模型

2022-02-09 13:59:06  阅读:961  来源: 互联网

标签:morph DeepFaceLab 模型 factor AMP DeepFake


DeepFaceLab相关文章

一:《简单介绍DeepFaceLab(DeepFake)的使用以及容易被忽略的事项》
二:《继续聊聊DeepFaceLab(DeepFake)不断演进的2.0版本》
三:《如何翻译DeepFaceLab(DeepFake)的交互式合成器》
四:《想要提高DeepFaceLab(DeepFake)质量的注意事项和技巧(一)》
五:《想要提高DeepFaceLab(DeepFake)质量的注意事项和技巧(二)》
六:《友情提示DeepFaceLab(DeepFake)目前与RTX3080和3090的兼容问题》
七:《高效使用DeepFaceLab(DeepFake)提高速度和质量的一些方法》
八:《支持DX12的DeepFaceLab(DeepFake)新版本除了CUDA也可以用A卡啦》

文章目录

一,不算太新的AMP模型

1.1 什么是AMP模型

在2021年5月30日的版本中,作者试验性的加入了AMP模型。
目前版本就有3个模型了:

  • AMP
  • Quick96
  • SAEHD

AMP:对应amplifier(放大器),因为目标的面部表情被放大到源脸。
这个模型可以控制morph factor(变形因子)参数,可以在合成前指定 0.01.0 的参数值。
当然还有很多具体的描述请看作者原文档吧。

1.2 训练AMP的步骤

  1. 需要足够多样的源脸数据集。

  2. 设置morph factor(变形因子)为0.5

  3. 运行6) train AMP SRC-SRC.bat脚本,训练源到源到50万次以上迭代 (越多越好)

  4. model目录中删除inter_dst文件

  5. 常规训练——也就是运行6) train AMP.bat

1.3 最终效果

测试的内容都删了,才发现忘记截图……只能文字举个例子。
在这里插入图片描述
AMP模型最大的特点就是合成时指定morph factor变形因子。

  • morph factor = 0.0:合成后完全是目标脸,等于根本没有换脸。
  • morph factor = 1.0:合成后完全是源脸。

所以当morph factor介于0.01.0之间时,合成效果就在更像源/更像目标之间浮动。
试了一下确实是这样,但是对比SAEHD似乎没找到AMP的优点,它到底是干嘛用的。

个人怀疑,它是不是用于源难以重现目标所有表情时的一个选择?
如果你知道,请不吝赐教。
.

二,其它模型及特点

2.1 SAEHD

平时用的正常的模型,有很多参数选择。
可以根据自己的显卡调整分辨率和学习网络的各种选项。
简称SAEHD:High Definition Styled AutoEncoder
之前各种文章都是用的这个模型(也没别的啊)。
.

2.2 Quick96

最快速的模型,没有任何选项,固定96分辨率,全脸。
因为固定了选项,所以会自动用作者提供的预训练数据(所以很快)。
可以用在低端显卡上,比如2GB+的NVidia,或者4GB+的AMD。.

用这个模型可以快速的试一下,出效果。
缺点是分辨率太低了,量变引起质变,有时导致最终效果不佳(不仅是分辨率)。
.

2.3 被移除的模型

  • TrueFace:只能N卡用,作者试了一下就移除了。
  • SAE:被SAEHD给替代了。
  • avatar :是不是给动漫用的,忘记了……反正被移除了,其效果可以被代替。
  • RecycleGAN:呃,完全没印象……

标签:morph,DeepFaceLab,模型,factor,AMP,DeepFake
来源: https://blog.csdn.net/ddrfan/article/details/122839410

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有