DeepFaceLab进阶教程 - 版本历史

2022年2月8日 (二) 02:17 Xuexf

2022-02-08T02:17:44Z

Xuexf：/* 使用DFL脚本 */

2022-02-07T08:48:57Z

‎使用DFL脚本

Xuexf：/* 遮罩处理 */

2022-02-07T08:48:23Z

‎遮罩处理

Xuexf：/* 使用MVE */

2022-02-07T08:03:04Z

‎使用MVE

2022年2月7日 (一) 07:31 Xuexf

2022-02-07T07:31:43Z

Xuexf：/* 提取脸部 */

2022-02-07T07:30:57Z

‎提取脸部

Xuexf：/* 提取帧 */

2022-02-07T07:14:46Z

‎提取帧

Xuexf：/* 素材篇 */

2022-02-07T07:14:06Z

‎素材篇

Xuexf：/* 简介 */

2022-02-07T06:50:12Z

‎简介

Xuexf：/* 素材训练前处理篇 */

2022-02-07T06:47:52Z

‎素材训练前处理篇

@@ 第2行： / 第2行： @@
   [[人工智能与影视背景知识|背景知识]] | [[DeepFaceLab]] | [[人工智能与影视研究整理|研究整理]]
-  [[DeepFaceLab|DFL入门教程]] | [[DeepFaceLab进阶教程|DFL进阶教程]] | [[DeepFaceLab经验|DFL经验]] | [[DeepFaceLab问题整理|DFL问题整理]]
+  [[DeepFaceLab|DFL入门教程]] | [[DeepFaceLab进阶教程|DFL进阶教程]] | [[DeepFaceLab经验|DFL经验]] | [[DeepFaceLab框架|DFL框架]] | [[DeepFaceLab问题整理|DFL问题整理]]
 == 简介 ==

@@ 第76行： / 第76行： @@
 主要是调用以下脚本进行XSeg的操作
-[[文件:File.png|600px]]
+[[文件:DFL进阶教程-2.png|600px]]
 最上面的两个使用软件自带的模型进行应用。

←上一版本		2022年2月7日 (一) 08:48的版本
第63行：		第63行：

	=== 遮罩处理 ===		=== 遮罩处理 ===
		+
		+	何为遮罩（mask）？遮罩就是一个0/1矩阵，目标区域值为1，非目标为0。合成的时候用遮罩可以面部一些不想被替换的地方如眼镜、刘海等。
		+
		+	DFL的遮罩有两种模式，一种是换脸模型里的多边形mask，另一种是XSeg。多边形mask是在提脸时就写入了图片里的，训练换脸模型时也会进行训练。XSeg则是另外一套相对独立的体系。需要在素材上画遮罩区域，训练XSeg模型，然后进行合成时进行应用。
		+
		+	如果是比较精细的换脸，需要使用XSeg遮罩。
		+
		+	同样的，XSeg也有两种方式，一种是使用DFL自带的脚本，一种是使用MVE
		+
		+	==== 使用DFL脚本 ====
		+
		+	主要是调用以下脚本进行XSeg的操作
		+
		+	[[文件:File.png\|600px]]
		+
		+	最上面的两个使用软件自带的模型进行应用。
		+	下面的就是字面意思了。如果调用下面的几个，需要按照edit、train、apply的顺序进行操作。也就是先画遮罩、训练XSeg模型、应用XSeg模型的顺序。
		+
		+	画XSeg遮罩的时候，只需要挑一些比较关键的画就可以了。
		+
		+	==== 使用MVE ====
		+
		+	画遮罩也是比较推荐用MVE，因为可以方便地进行预览，不像DFL只能一张一张地看。而且提供了比DFL本身更加方便的方式。

	== '''训练篇''' ==		== '''训练篇''' ==

←上一版本		2022年2月7日 (一) 08:03的版本
第55行：		第55行：

	==== 使用MVE ====		==== 使用MVE ====
		+
		+	链接：https://pan.baidu.com/s/1EG_vkC71TVc_CKG-LH3QbA 提取码：9y1u
		+
		+	教程地址：https://www.bilibili.com/video/BV1uP4y1t7Mj
		+
		+	建议用这个来处理素材，画关键点和XSeg遮罩。

	=== 遮罩处理 ===		=== 遮罩处理 ===

←上一版本		2022年2月7日 (一) 07:31的版本
第99行：		第99行：

	预训练完成后，开始正式训练时，会出现pred那一列与dst一样或近似的情况（应该是src的脸），这时候不用担心，继续训练就好，迭代个几万次就正常了。		预训练完成后，开始正式训练时，会出现pred那一列与dst一样或近似的情况（应该是src的脸），这时候不用担心，继续训练就好，迭代个几万次就正常了。
		+
		+	== 合成篇 ==

←上一版本		2022年2月7日 (一) 07:30的版本
第42行：		第42行：
	=== 提取脸部 ===		=== 提取脸部 ===

		+	提取脸部可以采用两种手段，一种是直接使用DFL的脚本，另一种是使用MVE（machine video editor）软件。
		+
		+	==== 使用DFL脚本 ====
		+
		+	先调用脚本'''data_* faceset extract.bat'''提取脸部。
		+
		+	如果是src素材，直接删去data_src/aligned文件夹下出错的图片即可。
		+
		+	如果是dst素材，将debug文件夹下不正常的图片删掉，再调用脚本'''data_dst faceset MANUAL RE-EXTRACT DELETED ALIGNED_DEBUG.bat'''进行手动重新提取。
		+
		+	这里的手动还是属于使用算法提取，并不是手动画人脸的关键点。所以有时候会遇到手动也无法处理的情况。这时候就要用到MVE了。
		+
		+	==== 使用MVE ====

	=== 遮罩处理 ===		=== 遮罩处理 ===

@@ 第22行： / 第22行： @@
 使用DFL的脚本提取即可。参数FPS输5~10就足够了。太多的话会导致重复的过多。
-提取帧有两种格式，JPG和PNG。PNG属于无损格式，体积较大。JPG体积小，图像质量较高。
+提取帧有两种格式，JPG和PNG。PNG属于无损格式，但体积较大。JPG体积小，图像质量会有一点损失。
 === src素材质性标准 ===

@@ 第14行： / 第14行： @@
 == '''素材篇''' ==
-=== 1.去哪里找 ===
+=== 去哪里找 ===
 抖音，快手，哔哩哔哩，Youtube，还有高清电影电视剧。如何下载这些视频很容易搜索到。
-=== 2.剪辑（可选） ===
+=== 提取帧 ===
-主要根据视频中无关情节出现的比例而定，如果是从从电影里提取素材，最好还是剪辑一下，可以用PR、快剪辑等。另外如果是多个视频为了操作方便最好也拼在一起。
+使用DFL的脚本提取即可。参数FPS输5~10就足够了。太多的话会导致重复的过多。
-从视频中提帧的时候FPS输5~10就足够了。太多的话会导致重复的过多。
+提取帧有两种格式，JPG和PNG。PNG属于无损格式，体积较大。JPG体积小，图像质量较高。
-=== 3.筛选src素材 ===
+=== src素材质性标准 ===
-首先肯定得把非目标人脸给删掉，直接从文件夹里删除即可。可以使用sort.bat后更方便地筛选。
+要把非目标人脸给删掉，直接从文件夹里删除即可。可以使用sort.bat后更方便地筛选。
-* '''清晰度''' 模糊的素材坚决不要
+* '''清晰度''' 尽可能清晰
-* '''光线''' 需要保证素材脸部光线均匀，明暗适中，稍微暗一点但是均匀的可以留下。如果出现特别强的光在脸上导致脸部色彩不均匀，最好删掉。如果dst有这种场景的话可以考虑留下。
+* '''光线''' 特别暗的建议不要留，可以保证一定的复杂度。
 * '''遮挡''' 最好选脸部没有遮挡的素材
 * '''角度''' 越丰富越好
 * '''表情''' 越丰富越好，最关键的是眼睛和嘴巴
 * '''妆容''' 角色妆容的差别最好不要太大，比如嘴唇颜色，眉毛，素颜or浓妆
-* '''数量''' 在满足上述要求的情况下5000张精选素材为宜
+* '''数量''' 在满足上述要求的情况下5000到10000就可以
 === 图片去重 ===
- 软件VisiPics，网上下载，先选择文件夹，然后选择阈值登记，进行扫描，最后选中来删除或移动重复图片。
+可以使用软件VisiPics，网上下载，先选择文件夹，然后选择阈值等级，进行扫描，最后选中来删除或移动重复图片。
 == '''提取脸部篇''' ==

@@ 第9行： / 第9行： @@
 基本流程如下：
-[[文件:DFL进阶教程-1.png|500px]]
+[[文件:DFL进阶教程-1.png|600px]]
-视频切帧没有特别需要注意的地方，主要在素材的准备、提取脸部、训练和合成上会有一些问题。
+视频切帧没有特别需要注意的地方，主要在'''素材的准备'''、'''提取脸部'''、'''训练'''和'''合成'''上会有一些问题。
 == '''素材篇''' ==

←上一版本		2022年2月7日 (一) 06:47的版本
第36行：		第36行：
	软件VisiPics，网上下载，先选择文件夹，然后选择阈值登记，进行扫描，最后选中来删除或移动重复图片。		软件VisiPics，网上下载，先选择文件夹，然后选择阈值登记，进行扫描，最后选中来删除或移动重复图片。

−	== '''~~素材训练前处理篇~~''' ==	+	== '''提取脸部篇''' ==