赞
踩
大家好我是小王同学!!SD的WebUI 中的面部修复神器 ADetailer,无法在ComfyUI 中使用。那么如何在ComfyUI中进行面部处理呢?ComfyUI 中也有几个面部修复功能,比如ComfyUI Impact Pack(FaceDetailer),以及换脸插件Reactor和IPAdapter。
ComfyUI-Impact-Pack 是一个功能强大的插件,专为 ComfyUI 设计,用于从图片中识别出人脸面部,重绘人脸。
需要访问 GitHub 页面,下载 ComfyUI-Impact-Pack 插件。放入到custom_nodes目录中。或者通过插件管理器中安装。安装完后重启 ComfyUI 。
(需要的同学可以自行扫描获取)
ComfyUI-Impact-Pack 插件提供了一系列核心功能,包含细节修复、检测器、高清修复:
1.模型加载
加载FaceDetailer的工作流,调出面部细化节点:SAM 加载器 和 检测加载器 节点。根据加载的模型类型,输出将有所不同。默认下载的 bbox 模型仅将面部区域检测为矩形,而 segm 模型则检测整个人的轮廓。
节点入口在 Impact节点-简易-面部细化
2 .修复流程
mpact Pack 配备了三种核心探测器:BBOX、SEGM 和 SAM。这些探测器利用相关模型来识别并定位特定区域,随后将识别出的数据以 SEGS 格式输出,供后续处理使用。
在使用FaceDetailer进行面部修复时,流程如下:
使用FaceDetailer识别并标记面部和手部的 mask。
根据识别的 mask 区域,FaceDetailer 对这些区域进行细节重绘。
通过调整 Guide_size、guide_size_for 和 max_size 参数来控制重绘区域的大小和范围。
节点入口在 Impact节点-简易-面部细化
Impact Pack 提供了三种关键的探测工具:BBOX、SEGM 和 SAM,它们各自承担着不同的检测功能。Detector 利用这些模型来识别特定区域,并将识别结果以 SEGS 格式输出,以便进一步处理。
BBOX(边界框):这一工具通过 bbox/face_yolov8m.pt 模型,能够将目标区域定位并捕捉为矩形框,特别适用于面部区域的检测,生成面部的矩形掩模。
SEGM(分割):SEGM 工具采用 segm/person_yolov8n-seg.pt 模型,以轮廓形式精确捕获目标区域,适用于获取人体形状的轮廓蒙版。
SAM(Segment Anything Model):SAM 利用 Segment Anything 技术来创建轮廓蒙版。它通常不单独使用,而是与 BBOX 模型结合,以便在已经通过 BBOX 确定的检测目标上,生成更为精细的轮廓掩模。
利用这种综合应用方式,Impact Pack 得以实现从基础的矩形区域识别到复杂的轮廓勾勒,提供了一系列全面且高效的检测与掩模制作功能。
上面说的这三个检测器,都在Impact-检测下面。
通过观察图像,我们可以清晰地看到不同检测工具之间的差异:BBox工具能够识别出人物的矩形轮廓,Segm工具则能够捕捉到全身的轮廓,而当SAM工具与BBox工具结合使用时,它能够精确地检测出人物的脸部区域。
新建检测加载器:新建节点–lmpact节点-检测加载器
检测加载器节点中,加载三种模型,返回 BBOX检测 或 SEGM检测。
一共有3个,bbox的2个,segm的一个。
SAM加载器模型也有三种模型,根据检测效果来选用。
Gsam_vit b 01ec64.pth
sam vit h 4b8939.pth
Gsam_vit l 0b3195.pth
模型路径:\ComfyUI\models\sams
这3种模型占用的显存资源不一样,根据自己的配置使用。
上面都是检测器的功能说明,下面我们来通过面部细化节点搭建来完成脸部修复,
新建节点:Impact节点-简易
面部细化参数非常多,大部分设,保持默认即可,要注意的是降噪,默认0.5,会影响到生成的人物相识度,如果不像,可以适当调低。
重要的是检测器选择,我们可以使用BBox检测+SAM模型这2个组合。
这个面部修复节点,自带采样器功能,面部修复用这个节点就可以了。
下面是图生图+面部修复工作流,添加面部修复节点:
左边是原图,右边是,面部修复过的图片:
通过上述步骤和注意事项,用户可以有效地使用 ComfyUI-Impact-Pack 插件进行面部修复和其他图像增强任务,提升图像质量和细节表现。
资料软件免费放送
次日同一发放请耐心等待
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】
**一、AIGC所有方向的学习路线**
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。