ComfyUi | 一份简单的修手方案

其他垂类 其他风格 其他主体 其他模型功能

工作流思路:

写实部分:

HandRefiner + FaceDetailer

二次元部分:

不论是换脸的Reactor还是手部检测的HandRefiner,对于写实类模型效果很好(毕竟容易捕捉特征),而对于特征不易捕捉的二次元,效果要大打折扣,所以既然HandRefiner不易识别二次元手部,那干脆就不让它识别,以写实大模型去生成需要的动作与姿势,然后获取它的姿势图与手部深度图,以二次元大模型出图。

基础步骤:

-》选择大模型

-》填写提示词


【插件自动下载失败或缓慢,以下为手动下载步骤】

1.下载comfyui_controlnet_aux插件

 1.1 通过管理器下载

 1.2 手动下载: https://github.com/Fannovel16/comfyui_controlnet_aux

2.下载HandRefiner的3个文件

 2.1 网址: https://huggingface.co/hr16/ControlNet-HandRefiner-pruned/tree/main

 2.2 下载control_sd15_inpaint_depth_hand_fp16.safetensors,放入ControLNet文件夹中

 2.3下载graphormer_hand_state_dict与hrnetv2_w64_imagenet_pretrained.pth,放入aux插件中的ckpts/hr16/ControlNet-HandRefiner-pruned中(没有文件夹则手动新建)  

3.下载MeshGraphormer插件

 3.1手动下载: https://github.com/microsoft/MeshGraphormer

4.下载MeshGraphormer的预训练模型

 4.1 详细流程: https://github.com/microsoft/MeshGraphormer/blob/main/docs/DOWNLOAD.md

 4.2 通过“4.1”网址中的第一步与第二步中提供的两条代码,可以自动新建3个文件夹以及3个预处理模型和4个预处理模型的权重,计7个文件。(这个部分若出错,可从/scripts中的download_models.sh文件中找到下载路径)

5.从 SMPLify下载basicModel_neutral_lbs_10_207_0_v1.0.0.pkl,从MANO下载MANO_RIGHT.pkl,并将两个文件放置在MeshGraphormer/src/modeling/data文件夹中(具体步骤见下述)

 5.1 登录https://smplify.is.tue.mpg.de/download.php,下载SMPLIFY_CODE_V2,在该文件夹中的models文件夹中找到所需文件。

 5.2登录 https://mano.is.tue.mpg.de/download.php,下载Models&Code,在该文件夹中的models文件夹中找到所需文件。

6.如果不显示MeshGraphormer Hand Refine节点,若之前已经安装了comfyui_controlnet_aux插件,则删除重新下载。


AI模型详情

模型类型:Other
基础算法:基础算法 v1.5
触发词:
文件格式: json
最近更新:2024-02-10 01:27
创作相关
允许下载:
严禁转载:
会员专享下载:
作者原创:
转载来源: liblib
转载说明: 该模型及相关图片信息可能涉及来源于其他开源社区或由用户自行上传发布,非原创作者,如需商业使用请联系原作者。
郑重声明:本模型仅用于练习使用模型,如需商业请与原作者联系获取版权许可等,互联网鼓励用户分享作品,并坚决保护创作者的版权信息,模型、图片、素材资源的版权均为原创作者所有。
免责声明: 您基于本模型服务生成的文本内容由您自行维护并对其独立判断后使用,您需在遵守适用法律法规和本服务条款的条件下使用,基于本服务生成内容产生的任何知识产权问题由您自行处理,您需对生成内容负责,本网站对由此造成的任何损失不负责任。除法律法规另有规定外。
版权说明: 本网站部分素材、模型、图片等信息基于用户自行上传和分享,此资源来源于网络,如涉及版权问题,请及时与本网站联系,如需删除收到通知响应后,会在处理后下架删除。

讨论列表 共有 0 条讨论

暂无评论信息...
为用户提供AI模型下载、AI模型训练、AI模型学习、AI模型教程。
AI模型分享社区,基于Stable Diffusion潜在扩散的机器学习模型。