资讯内容
都是第一次玩DeepFakes

之前没碰过DeepFakes,突然想发B站视频玩儿一下。试了试还挺麻烦的,这里记录一下自己踩的坑。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
本文的目标就是将The Singing Trump的视频换成我们的川建国同志。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
**后效果:Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
视频链接:https://www.bilibili.com/video/BV12p4y1k7E8/Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
环境说明本文尝试的环境为linux服务器的环境,因为跑得比较快吧。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Python环境:Anoconda python3.7版本Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
GPU:K80, 12G显存Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
DeepFake版本:2.0Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
其他工具:ffmpegJbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
素材准备首先需要准备一个或者多个The Singing Trump的视频,以及川建国同志的视频。用作换脸素材。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
视频切分首先通过ffmpeg将视频素材切分成多个图片。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
mkdir output ffmpeg -i 你的视频.mp4 -r 2 output/video-frame-t-%d.png复制代码这里视频不一定要mp4,其他格式也行,然后 -r 2表示是2帧,也就是每秒钟采集两张图片,各位可以按照自己的视频尝试。 **后是输出到output文件夹里面,前缀随便定义就好了,名字也不是关键。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
这里**好多找几个视频,因为deepfake会提示要保证人脸个数大于200张才会比较好,我这里分别准备了3个视频,一共6个视频。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
弄完了还挺大,乱七八糟加起来3.7个G。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
这里没啥可说的,从github上下代码。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
git clone https://github.com/deepfakes/faceswap.git复制代码然后根据自己的实际情况装环境,我这里是现在PC上装cpu这个,然后在服务器上装nvidia。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
接下来将所有的脸部抽出来。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
python3 faceswap.py extract -i trump_output -o trump_output_face python3 faceswap.py extract -i sing_trump_output -o sing_trump_output_face复制代码这里抽完了脸就是这样了。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
接下来需要手工把我们不需要的脸都删掉。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
在我们调用extract生成脸部时,会自动生成一个校对文件,用于在原图上保存脸部的信息。删除脸部之后,需要将脸部和原图片进行对齐。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
这里可以打开gui工具Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
python3 faceswap.py gui复制代码然后选择Tools下的Alignments。 Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
接下来选择Remove-Faces,然后输入对齐文件路径,脸的路径,以及原图的路径。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
然后点击绿色按钮开始,运行即可。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
然后将sing_trump_out也执行同样的操作。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
开始训练接下来就可以开始训练了,-m参数为保存模型的位置。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
python3 ./faceswap.py train -A sing_trump_output_face -ala sing_trump_output/alignments.fsa -B trump_output_face -alb trump_output/alignments.fsa -m model复制代码小问题这里如果用gpu的话,我发现tensorflow2.2开始要用cuda10.1以上,但我这边儿没法装,所以需要用tensorflow1.14或者tensorflow1.15,这就需要deepfake的1.0版本才能用。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
github.com/deepfakes/f…Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
训练截图我发现faceswap1.0和master分支的操作是一样的,没太大变化。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
我这里的速度大概是2分钟100个step。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
首先要准备我们要转换的视频,然后把视频切分,这里就不是按照之前的帧数了。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
ffmpeg –i sing_trump2.flv input_frames/video-frame-%d.png 复制代码这里我的视频是1分41秒。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
转换完了大概有3050张图片,也就是差不多30帧的,然后一共7.1G(mac就256G真的有点儿遭不住)Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
接下来,需要对我们要转换的视频图片再来一遍人脸对齐,首先抽脸。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
python3 faceswap.py extract -i input_frames -o input_frames_face复制代码然后再把多余的脸删掉,像前面的步骤一样的操作用gui工具选择Remove-Faces,然后进行对齐。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
对每一帧进行AI换脸通过convert命令进行转换Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
python3 faceswap.py convert -i input_frames/ -o output_frames -m model/复制代码我这里的速度大概是每秒1张图片,不过真正的脸只有600多张,如果脸比较密集的话我估计可能没有那么快,所有的图片转换完大概是5分多钟(这个gpu当时有别的程序在跑真实可能会更快一点儿)。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
在训练了1200step之后,大概是这个样子,效果看着还不是很好哈,不过已经有点儿意思了。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
**后通过ffmpeg把图片合成一个视频。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
ffmpeg -i output_frames/video-frame-%d.png -vcodec libx264 -r 30 out.mp4复制代码这里合并完了我发现是2分钟,不过影响也不大,毕竟后面还要进行剪辑,用PR等软件再编辑一下就好了。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
总结看视频可以发现当脸比较小的时候,faceswap并没有识别出来脸,所以也就没有做替换,还是有点儿遗憾。 Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
个人感觉整个deepfake的**费时间的流程其实就是在删掉多余的脸上面。Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
相关免费学习推荐:python视频教程Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
以上就是都是第一次玩DeepFakes的详细内容,更多请关注少儿编程网其它相关文章!Jbm少儿编程网-Scratch_Python_教程_免费儿童编程学习平台
- 上一篇
通俗易懂的理解Python中的多线程
简介python里有一个threading模块,其中提供了一个函数:threading.Thread(target=function, args=(), kwargs={})function是开发者定义的线程函数,args是传递给线程函数的参数,必须是tuple类型,kwargs是可
- 下一篇
实现python批量下载网易云音乐的免费音乐
简介python视频教程栏目介绍实现下载免费音乐相关免费学习推荐:python视频教程运行效果代码#-*-coding:utf-8-*-importrequests,hashlib,sys,click,re,base64,binascii,json,osfromCrypto.CipherimportAE