当前位置:   article > 正文

AI绘画--还在为面部瑕疵烦恼?ComfyUI脸部工作流帮你一键修复

AI绘画--还在为面部瑕疵烦恼?ComfyUI脸部工作流帮你一键修复

大家好我是小王同学!!SD的WebUI 中的面部修复神器 ADetailer,无法在ComfyUI 中使用。那么如何在ComfyUI中进行面部处理呢?ComfyUI 中也有几个面部修复功能,比如ComfyUI Impact Pack(FaceDetailer),以及换脸插件Reactor和IPAdapter。
在这里插入图片描述

ComfyUI-Impact-Pack 是一个功能强大的插件,专为 ComfyUI 设计,用于从图片中识别出人脸面部,重绘人脸。

  1. 1.安装ComfyUI-Impact-Pack插件

需要访问 GitHub 页面,下载 ComfyUI-Impact-Pack 插件。放入到custom_nodes目录中。或者通过插件管理器中安装。安装完后重启 ComfyUI 。

(需要的同学可以自行扫描获取)
在这里插入图片描述

在这里插入图片描述

  1. 2.修复流程

ComfyUI-Impact-Pack 插件提供了一系列核心功能,包含细节修复、检测器、高清修复:

1.模型加载

加载FaceDetailer的工作流,调出面部细化节点:SAM 加载器 和 检测加载器 节点。根据加载的模型类型,输出将有所不同。默认下载的 bbox 模型仅将面部区域检测为矩形,而 segm 模型则检测整个人的轮廓。

节点入口在 Impact节点-简易-面部细化

在这里插入图片描述

在这里插入图片描述

2 .修复流程

mpact Pack 配备了三种核心探测器:BBOX、SEGM 和 SAM。这些探测器利用相关模型来识别并定位特定区域,随后将识别出的数据以 SEGS 格式输出,供后续处理使用。

在使用FaceDetailer进行面部修复时,流程如下:

  1. 使用FaceDetailer识别并标记面部和手部的 mask。

  2. 根据识别的 mask 区域,FaceDetailer 对这些区域进行细节重绘。

  3. 通过调整 Guide_size、guide_size_for 和 max_size 参数来控制重绘区域的大小和范围。

节点入口在 Impact节点-简易-面部细化

在这里插入图片描述

在这里插入图片描述

3.检测器说明

Impact Pack 提供了三种关键的探测工具:BBOX、SEGM 和 SAM,它们各自承担着不同的检测功能。Detector 利用这些模型来识别特定区域,并将识别结果以 SEGS 格式输出,以便进一步处理。

  1. BBOX(边界框):这一工具通过 bbox/face_yolov8m.pt 模型,能够将目标区域定位并捕捉为矩形框,特别适用于面部区域的检测,生成面部的矩形掩模。

  2. SEGM(分割):SEGM 工具采用 segm/person_yolov8n-seg.pt 模型,以轮廓形式精确捕获目标区域,适用于获取人体形状的轮廓蒙版。

  3. SAM(Segment Anything Model):SAM 利用 Segment Anything 技术来创建轮廓蒙版。它通常不单独使用,而是与 BBOX 模型结合,以便在已经通过 BBOX 确定的检测目标上,生成更为精细的轮廓掩模。

利用这种综合应用方式,Impact Pack 得以实现从基础的矩形区域识别到复杂的轮廓勾勒,提供了一系列全面且高效的检测与掩模制作功能。

上面说的这三个检测器,都在Impact-检测下面。

在这里插入图片描述

通过观察图像,我们可以清晰地看到不同检测工具之间的差异:BBox工具能够识别出人物的矩形轮廓,Segm工具则能够捕捉到全身的轮廓,而当SAM工具与BBox工具结合使用时,它能够精确地检测出人物的脸部区域。

4.检测加载器

新建检测加载器:新建节点–lmpact节点-检测加载器

在这里插入图片描述

检测加载器节点中,加载三种模型,返回 BBOX检测 或 SEGM检测。

在这里插入图片描述

一共有3个,bbox的2个,segm的一个。

SAM加载器模型也有三种模型,根据检测效果来选用。

Gsam_vit b 01ec64.pth

sam vit h 4b8939.pth

Gsam_vit l 0b3195.pth

模型路径:\ComfyUI\models\sams

在这里插入图片描述

这3种模型占用的显存资源不一样,根据自己的配置使用。

  1. 3.脸部修复流程

上面都是检测器的功能说明,下面我们来通过面部细化节点搭建来完成脸部修复,

新建节点:Impact节点-简易

在这里插入图片描述

面部细化参数非常多,大部分设,保持默认即可,要注意的是降噪,默认0.5,会影响到生成的人物相识度,如果不像,可以适当调低。

在这里插入图片描述

重要的是检测器选择,我们可以使用BBox检测+SAM模型这2个组合。

在这里插入图片描述

这个面部修复节点,自带采样器功能,面部修复用这个节点就可以了。

下面是图生图+面部修复工作流,添加面部修复节点:

在这里插入图片描述

左边是原图,右边是,面部修复过的图片:

在这里插入图片描述

通过上述步骤和注意事项,用户可以有效地使用 ComfyUI-Impact-Pack 插件进行面部修复和其他图像增强任务,提升图像质量和细节表现。

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/945672
推荐阅读
相关标签
  

闽ICP备14008679号