deepfacelab中文网

 找回密码
 立即注册
查看: 8832|回复: 31

基于AI绘画的换脸教学(初级)

  [复制链接]

163

主题

1728

帖子

18万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
180556

管理员优秀版主论坛股东灵石巨富翁小有贡献灵石大富翁灵石小富翁

 楼主| 发表于 2023-2-9 19:26:25 | 显示全部楼层 |阅读模式
摸索了一段时间AI绘画,浅浅摸索到了一种基于AI绘画的换脸方法,先分享下初步简单方案。 后续会有更高效果的AI绘画换脸方法


效果展示如下
image.png
00762-1150231686-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00764-1150231688-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00766-1150231690-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00760-1150231684-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png

学习基础
先学会基础的AI绘画,知道图生图的用法。没玩过的小白想玩AI绘画,请见 https://dfldata.xyz/forum.php?mo ... 2402&extra=page=1

基本原理
利用AI绘画图生图(img2img)里的局部重绘(inpainting)功能,将目标图的五官抹去,再通过准备好的AI模型和描述词,来生成只有五官发生变化的新人脸

具体操作流程
1. 随便下载安装一个AI绘画模型(推荐真人向的模型)
2. 在图生图里选择自己要换脸的图
3. 点击局部重绘,把五官全部抹去
4. 利用训练好的lora模型或其他自定义单人模型和相关提示词进行生成
5. 获得换脸后的图

image.png


核心难点
换脸大家肯定想换成指定的一个人,上述流程中并没有提及怎么来指定目标人物换脸,这点稍微有点难度,需要训练一个目标人物的专属lora模型
至于什么是lora模型,lora模型怎么训练,lora模型怎么使用,
待我下期教学细细讲解
本期我也没使用针对专人训练的lora模型,所以每次换出来的脸长的不一样

找了个黑寡妇的模型测试,验证是可以实现指定人物换脸的
image.png



未解决问题
每次生成的脸五官位置、眼神、微表情会有些许变化,不如dfl换脸来的还原,这个我还没摸索出好的方案,供大佬们来探索







评分

参与人数 11贡献 +11 收起 理由
kyorz + 1 赞一个!
RyanChang + 1 很给力!
yutiancsm + 1 很给力!
benlei + 1 很给力!
三也多 + 1 赞一个!
flyxxbird + 1 很给力!
redgg2 + 1 很给力!
bbb110690229 + 1 很给力!
a67994407 + 1 很给力!
sdlou + 1 很给力!
xex123580 + 1 很给力!

查看全部评分

提供商用版云端实时换脸服务、数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群124500433
AI绘画交流QQ群748167404
回复

使用道具 举报

4

主题

22

帖子

192

积分

高级丹童

Rank: 2

积分
192
发表于 2023-3-7 16:49:31 | 显示全部楼层
那是不是可以用一个模型把头部去了,另一个模型直接只要头部,然后把两个模型合成一个.这样会不会可以直接用合成加tag使用了.
回复 支持 1 反对 0

使用道具 举报

7

主题

145

帖子

1009

积分

初级丹圣

squeeze

Rank: 8Rank: 8

积分
1009
发表于 2023-2-9 19:52:07 | 显示全部楼层
滚石大大,如果将局部重绘的重绘幅度参数调小一点或者调整蒙版可以解决问题吗
一切随缘就好
回复 支持 反对

使用道具 举报

163

主题

1728

帖子

18万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
180556

管理员优秀版主论坛股东灵石巨富翁小有贡献灵石大富翁灵石小富翁

 楼主| 发表于 2023-2-9 20:00:39 | 显示全部楼层
sdlou 发表于 2023-2-9 19:52
滚石大大,如果将局部重绘的重绘幅度参数调小一点或者调整蒙版可以解决问题吗 ...

不知道,没来得及试。主要我lora模型都还没训练好
提供商用版云端实时换脸服务、数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群124500433
AI绘画交流QQ群748167404
回复 支持 反对

使用道具 举报

17

主题

154

帖子

3969

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3969

小有贡献

发表于 2023-2-9 22:12:24 | 显示全部楼层
学习了,滚石大大辛苦!期待下一期教学!
风之引擎
回复 支持 反对

使用道具 举报

1

主题

69

帖子

652

积分

高级丹师

Rank: 5Rank: 5

积分
652
QQ
发表于 2023-2-10 01:01:43 | 显示全部楼层
厉害,厉害
回复

使用道具 举报

0

主题

10

帖子

74

积分

高级丹童

Rank: 2

积分
74
发表于 2023-2-10 01:23:09 | 显示全部楼层
活到老,学到老
回复 支持 反对

使用道具 举报

2

主题

595

帖子

4124

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4124
发表于 2023-2-10 09:46:30 | 显示全部楼层
插个眼 下班回家好好学习一下
回复 支持 反对

使用道具 举报

4

主题

82

帖子

1431

积分

初级丹圣

Rank: 8Rank: 8

积分
1431

论坛股东

发表于 2023-2-10 09:54:58 | 显示全部楼层
期待单人模型怎么训练的教程
回复 支持 反对

使用道具 举报

3

主题

71

帖子

693

积分

高级丹师

Rank: 5Rank: 5

积分
693
发表于 2023-2-10 10:10:22 | 显示全部楼层
滚石 发表于 2023-2-9 20:00
不知道,没来得及试。主要我lora模型都还没训练好

我训练了个高圆圆的pt,但是感觉没成功... ...
大佬搞懂了方法来发个教程吧~
回复 支持 反对

使用道具 举报

0

主题

10

帖子

418

积分

初级丹师

Rank: 3Rank: 3

积分
418
发表于 2023-2-10 10:22:31 | 显示全部楼层
学习了,期待大佬的研究成果
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|小黑屋|deepfacelab中文网 |网站地图

GMT+8, 2023-3-31 19:58 , Processed in 0.058531 second(s), 57 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表