deepfacelab中文论坛

 找回密码
 立即注册
查看: 14251|回复: 822

【金鱼基础模型库】用于补全SRC极限角度

  [复制链接]

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

发表于 2021-11-15 15:41:37 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:7  我的评分:未评
本帖最后由 无敌小金鱼 于 2022-5-24 01:50 编辑

https://dfldata.xyz/forum.php?mod=viewthread&tid=445
      之前随风大佬写了一篇补全SRC素材的文章,里面他做了一套基础模型库,主要用于补全SRC所没有的角度,不过我用后感觉CG感太重,而且没有什么表情,换出来的人不是特别好,脑袋也有点大,所以我用高模自己做了一套基础模型库,基本按照标准的东方脸型来做的,包含了大概十几种常见的表情,且每一个表情都是全角度采集,还有一些比较那啥的表情,针对日常的环境基本上也够用了。

简单来说原理就是你的SRC缺少很多角度,然后用这套DST模型库让它去学习,经过训练生成比较像的新的角度图,然后把这些角度图重新切脸,再放回SRC里继续训练,经过多次的转换得以补全所有你的SRC的全部角度,需要一定的时间和步奏,但这应该是目前补全角度的最优方案了。

这套模型库已做过landmark修复,可以直接使用,为512WF切脸,已经包含了上下左右中全部角度,所以训练的时候DST翻转要关掉,其他就按训练的三大步骤走就行:小BS勾勒轮廓  大BS细化五官 大BS加强细节


简单更新一下使用教程:
游客,如果您要查看本帖隐藏内容请回复


预览图和角度分别图
截图.jpg

角度分布图

角度分布图

截图2.jpg 截图1.jpg


金鱼【素材基础库】.txt (121 Bytes, 下载次数: 366, 售价: 150 灵石)

评分

参与人数 23威望 +6 灵石 +30 贡献 +24 收起 理由
labels + 1 很给力!
怪兽233 + 1 很给力!
dzbyzby + 1 很给力!
Capo24 + 1 很给力!
dim206 + 1 很给力!
WinKK + 1 学习实践中,牛啊!
哈衣乐 + 1 赞一个!
baicai123 + 1 赞一个!
ali2132007 + 1 很给力!
dixs + 1 牛逼
Patlala + 1 赞一个!
阿晋 + 1 赞一个!
三也多 + 1 很给力!
mlgbsaa@gmail.c + 1 赞一个!
lieyandatianshi + 1 很给力!
biliond + 1 很给力!
machunlai + 1 很给力!
koeikongxu + 1 很给力!
tian0000000001 + 1 很给力!
marsmana1 + 1 很给力!

查看全部评分

回复

使用道具 举报

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

 楼主| 发表于 2021-12-5 02:21:45 | 显示全部楼层
bcmoon 发表于 2021-12-4 22:09
大佬刚试了第一回,有问题想请教一下
是关于会再放到SRC使用的换脸素材
看随风大佬那帖说不是无论好坏,要看 ...

这种图不要,要循序渐进,你的src缺少的角度越多就得越慢点来,不能指望一两次就补全,相对好的图是所谓的基本五官和脸型要在,可以不那么清楚,也不那么像,但能保证正常的lanmak人脸定位点正确,所以你需要手动去筛选提脸,新切段脸记得在编号签重命名一下,比如加个a,下一轮提出更好的脸就可以直接覆盖。

你的训练参数基本没有问题,只有色彩模式不用动改成none,第一轮出来的图色彩可能会有点不统一,但经过多轮以后慢慢就会统一了。

合成的时候超分开1或者更高一点 这样出来的就是大图了 然后就可以切512的脸图。默认224太小。
回复 支持 1 反对 1

使用道具 举报

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

 楼主| 发表于 2021-11-16 01:16:49 | 显示全部楼层
qoungyoung 发表于 2021-11-15 19:53
关闭dst翻转->放到dst训练->合成dst->合成后的人脸切图后重新放到src充当数据集,请问是这样一个流程吗 ...

对,就是这个流程,主要是这套基础库是接近真人的高模,拥有极限角度的同时包含了羞羞的表情,而且不需要处理头发这些东西,比较标准的亚洲脸型,适用性很广,群里大佬们已经测试了可以很快把SRC原本没有的角度和表情逼出来。

最终的效果还不错就合成出来重新切脸丢进SRC里继续跑,后面就会越来越快。新提的脸记得重命名,也可以替换掉以前SRC里不够好的角度,总之过程会有点繁琐,但一劳永逸最终得到一套相对齐全的素材。

评分

参与人数 1贡献 +1 收起 理由
dim206 + 1 赞一个!

查看全部评分

回复 支持 2 反对 0

使用道具 举报

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

 楼主| 发表于 2022-3-4 00:13:52 | 显示全部楼层
WinKK 发表于 2022-3-3 17:25
其实我还是有一点担心的地方,当我们用这种方法补进去了5000多张各种角度的SRC,虽然基本解决了死角的问题 ...

把新生成的5000多张SRC单独放到一个文件夹,然后用筛选脚本,把正面20度左右的角度全部提取出来只保留大角度即可。
赛选脚本:https://dfldata.xyz/forum.php?mo ... mp;extra=#pid120180
不太会用就手动筛选
回复 支持 1 反对 0

使用道具 举报

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

 楼主| 发表于 2022-1-6 21:17:09 | 显示全部楼层
Patlala 发表于 2022-1-6 20:41
关闭dst翻转? 不太明白这意思

训练的时候有个DST翻转的参数关掉  这是很基础的知识了
回复 支持 1 反对 0

使用道具 举报

7

主题

453

帖子

3万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
33217

小有贡献灵石巨富翁灵石小富翁灵石大富翁灵石小富翁

 楼主| 发表于 2021-11-15 16:20:28 | 显示全部楼层
不用担心帖子上角度图中间空的部分,那个我是点了MVE里1.5的,其意思就是他所有能生成的角度。

而原始角度是这样的
quanjiaodu.png

基本上,超过60度意义就不太大了,提脸也会很困难,MVE 1.5以后是可以完全达到60度的,放心使用。

我们大都时候就是因为中间素材太多而周边角度比较少才来做这样的补充,所以这套基础库就没有搞很多中间的角度,没什么意义。

回复 支持 1 反对 0

使用道具 举报

8

主题

381

帖子

2176

积分

初级丹圣

Rank: 8Rank: 8

积分
2176
发表于 2021-11-15 15:43:40 | 显示全部楼层
大佬的努力必须支持!
回复 支持 反对

使用道具 举报

15

主题

1962

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11114
发表于 2021-11-15 15:51:30 | 显示全部楼层
感谢分享 积累灵石先
回复 支持 反对

使用道具 举报

8

主题

522

帖子

3119

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3119
发表于 2021-11-15 16:02:51 | 显示全部楼层
点赞,感谢分享~~~
回复 支持 反对

使用道具 举报

4

主题

380

帖子

2178

积分

初级丹圣

Rank: 8Rank: 8

积分
2178
发表于 2021-11-15 16:41:20 | 显示全部楼层
好东西 谢谢大大无私的分享
回复 支持 反对

使用道具 举报

42

主题

2152

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11646
发表于 2021-11-15 16:45:04 | 显示全部楼层
感谢分享,本人要学习的还很多啊
回复 支持 反对

使用道具 举报

3

主题

259

帖子

3143

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3143
发表于 2021-11-15 16:45:17 | 显示全部楼层
不错的素材,谢谢
回复 支持 反对

使用道具 举报

22

主题

354

帖子

4万

积分

超级版主

灌水、骗子和无效链接、违规错误帖子请在帖子右下角举报处理(奖

Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30

积分
41361

优秀版主灵石小富翁灵石小富翁灵石大富翁灵石巨富翁小有贡献

发表于 2021-11-15 16:57:19 | 显示全部楼层
跟RG类似,时间换角度哈哈哈。另外设置价格低了,150-300吧,防一下狗骗子
★★★SRC素材狂魔★★★
手工肝4─8K图
隐退看心情肝图⊙_⊙
无效链接、骗子和错误帖子请在帖子右下角举报处理(奖励灵石)
公益请查看我公益帖子开头蓝红字说明
回复 支持 反对

使用道具 举报

1

主题

136

帖子

974

积分

高级丹师

Rank: 5Rank: 5

积分
974
发表于 2021-11-15 17:12:38 | 显示全部楼层
价格再提高点,防止滥用
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|小黑屋|deepfacelab中文论坛  |网站地图

GMT+8, 2022-7-1 14:50 , Processed in 0.117811 second(s), 17 queries , redis On.

Powered by Discuz! X3.2

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表