ikenlon 发表于 2021-6-22 20:24:41

【老鸟进阶】大角度/死亡角度解决方案

本帖最后由 ikenlon 于 2021-6-22 22:29 编辑

很多朋友遇到寻找素材时候,会遇到DST素材有大角度,很多时候,由于SRC资源有限,无法完美训练融合:大角度,大仰脸,极限俯视角度,极限仰视角度等。
有时候,寻找素材时候,发现大角度就觉得很蛋疼,还要特地把这些角度剪掉,浪费大量时间。


其实,这个问题是有技巧解决的,虽然不能和原SRC大角度素材相比,但是,我们还是希望得到完整的效果,教程如下:


A · 大角度,大仰脸,极限俯视角度,极限仰视角度,一般只出现很短的时间,一般0点几秒到最长几秒,很多时候只是在视频中过渡一下

B · 分析脸型如下(原DST脸部切图):



出现这几种情况,要花费很长时间去训练,或者因为SRC脸部没有对应表情,导致无法训练处很好的效果

C · 处理方法如下
(1)在你的DST切脸工作完成后,找到DST内aligned文件夹内这些大角度的脸部图片;
      (注意,不要选取可以看到:2个完整的眉毛、完整眼睛、比较完整的正的嘴部!!因为这些图片你的模型会慢慢学习,只选择基本认不出来人物特征的这些极限角度脸部!!能认出来人物特征的,你的模型可以慢慢搞定);
(2)将这些大角度的脸部图片复制到SRC脸部文件夹:aligned内,注意:是复制,而不是剪切过去,需要保留DST的这些大角度脸部图片;
(3)开始训练他们.


D · 效果分析:
   1)你会发现,原来比较难训练的这些角度,慢慢变得融合的很好,很自然。丹好的话,一般1个小时就可以出非常好的效果了。
   2)这些极限角度本来已经很难分辨出是谁了,成品视频主要还是看完成度,与过渡自然程度,


E · 实际运用经验:
    1)你可以寻找和SRC人物五官特征相似的素材,寻找这些大角度,然后长期放在你的SRC-aligned里,做为大角度补充,长期使用。
    2)删掉原来放进去的大角度脸部,可以把你觉得合成视频效果最好的,最接近SRC原人物的视频,找出来,并切出这些脸部,放进你的SRC,这样反复,你的大角度将不在是难题了,并且会越来效果越好!


F · 下面咱们看看实际效果,我256的模型400W的模型,训练了2小时左右,效果还是不错的。不知道大家能不能看出来,我 训练的是大幂幂,其实还是有点像的。




教程结束,感谢大家查看,有不对的地方还请方家指正,我会将教程不断修改。



koeikongxu 发表于 2021-8-2 15:04:31

lalakia2012 发表于 2021-6-22 22:18
这种走样叫做出好效果?
这是笑料才对!

嘲笑别人之前先看看自己有没比别人做得好是基本得礼貌。

一个只看到整天嘲笑别人,自己却连个正经的教学贴或者答疑帖都没有的东西凭什么嘲笑别人?

dodash 发表于 2021-6-22 20:40:30

个人遇到最困难的是大角度dst提脸提不出来,手动有时候也不行:(

ikenlon 发表于 2021-6-22 22:27:26

lalakia2012 发表于 2021-6-22 22:18
这种走样叫做出好效果?
这是笑料才对!

不是所以人的SRC都有齐全的角度的,这个只是补救方法,上面说了,这不是完美的办法,但是是一个讨巧的方法

lieyandatianshi 发表于 2021-6-22 20:45:45

还有DST有时候根本切不出来一些死亡角度的脸这也是麻烦问题

lieyandatianshi 发表于 2021-6-22 20:30:08

本帖最后由 lieyandatianshi 于 2021-6-22 20:33 编辑

遇到妆容不一样的就有问题了,SRC是浓妆的话你这替补素材是淡妆怎么解决妆容一致?尤其是口红颜色SRC是深红色,而你替补的是浅色的嘴唇色会有问题的

ikenlon 发表于 2021-6-22 20:35:28

lieyandatianshi 发表于 2021-6-22 20:30
遇到妆容不一样的就有问题了,SRC是浓妆的话你这替补素材是淡妆怎么解决妆容一致?尤其是口红颜色SRC是深红 ...

我遇到很多你说的问题,训练时候开启色彩转移模式,并且后期调试的时候,选择MKL-X可以解决大部分你说的问题

lieyandatianshi 发表于 2021-6-22 20:38:35

本帖最后由 lieyandatianshi 于 2021-6-22 20:39 编辑

ikenlon 发表于 2021-6-22 20:35
我遇到很多你说的问题,训练时候开启色彩转移模式,并且后期调试的时候,选择MKL-X可以解决大部分你说的 ...
不敢啊,我开了经常的崩,是颜色花了崩

ikenlon 发表于 2021-6-22 20:40:41

lieyandatianshi 发表于 2021-6-22 20:38
不敢啊,我开了经常的崩,是颜色花了崩

开颜色转移没事啊,这个不占用现存啊

lieyandatianshi 发表于 2021-6-22 20:42:03

ikenlon 发表于 2021-6-22 20:40
开颜色转移没事啊,这个不占用现存啊

反正开了颜色转移我崩过几次就没敢在开了

lieyandatianshi 发表于 2021-6-22 20:42:45

dodash 发表于 2021-6-22 20:40
个人遇到最困难的是大角度dst提脸提不出来,手动有时候也不行

怎么可能尼?你好好看下教程

deepfacelab 发表于 2021-6-22 21:04:28

点赞,又学到了一招
页: [1] 2 3 4 5 6 7 8 9 10
查看完整版本: 【老鸟进阶】大角度/死亡角度解决方案