求救大佬们,为什么这个工作流它不识别我的openpose?
stablediffusion吧
全部回复
仅看楼主
level 5
如图,我用的sdxl大模型,controlnet的openpose模型也是sdxl的,不明白为什么出的图没识别我的openpose提取的姿势?
2025年02月08日 07点02分 1
level 5
这是openpose提取的姿势预处理图,发个大图以防大家看不清,这个图里显示姿势提取是没问题的,但是最终出图姿势就没按这个姿势来
2025年02月08日 07点02分 2
level 11
重启comfyui试试
2025年02月08日 07点02分 3
level 5
Ir6
降噪调到0.7
2025年02月08日 08点02分 4
level 10
sdxl的openpose模型用controlnet-openpose-sdxl-1.0.safetensors或者thibaud_xl_openpose.safetensors,其他的效果其实都不太好。
2025年02月08日 09点02分 5
我就是用的你说的第一个,不过我也不确定到底是不是下的对,因为github那里没有直接叫这个controlnet_sdxl_openpose这种名字的模型,我也是看c站上有人写的攻略里的链接,链接到github别人一个分享里下载的,说到底也不知道究竟哪个是公认下载最多的那个[笑尿]
2025年02月08日 11点02分
@亚利艾尔FG 用xinsir: canny | cannyv2 | depth | openpose | openpose-twins | scribble | scribble-anime | tile | union | union-promax,这一系列都很不错,c站就有。
2025年02月08日 13点02分
@colourfulbird 感谢大佬,顺便问下您,这个VAE的模型是不是没有说要和Controlnet的模型做适配去寻找?就随便一个看着适合的sdxl的就可以吧?
2025年02月08日 13点02分
@亚利艾尔FG cae用模型自带的就行,我自己光辉和pony都能用这套controlnet
2025年02月08日 13点02分
level 11
刚去做了试验,发现在comfyui生态下,sdxl模型的姿态控制比较复杂。它跟你使用的【ControlNet模型】有关,而不同的【ControlNet模型】又与不同的【预处理器节点】适配程度不同;同时,在“ControlNet应用(旧版高级)”这个节点中,【强度】和【结束时间】两项设置也会直接影响到成图效果。
总结一下:comfyui生态下,sdxl模型,姿态控制到底像不像,直接跟你使用的【ControlNet模型】【预处理器节点】【强度】【结束时间】这四个参数有关,这四个参数间又会互相影响。当然,你使用的大模型、提示词也有关系,但这里先不讨论文生图方面的指标。
看我下面这个试验,我先固定大模型为“WAI-二元PONYXL_2.0”,提示词固定为“anime girl, sitting”,种子值、图片尺寸等文生图指标全部固定不变。【ControlNet模型】方面,我使用“controlnet++_union_sdxl_promax”(2.33G,下简称union模型)和楼上说的“thibaud_xl_openpose”(下简称thi模型)这两个CN模型作对比;【预处理器节点】方面,分别使用【AUX集成预处理器】(选择其中的“OpenposePreprocessor”,下简称aux节点)和【DW姿态预处理器】(下简称dw节点)两个节点作对比。
1、首先,看看【union模型、aux节点、强度1、结束时间1】四个参数搭配的表现。可以看到,高强度值和全程控制,让出图直接失败,把骨骼图直接生了出来。
2、接下来,看看【union模型、aux节点、强度0.5、结束时间0.4】的搭配。生图效果不错,接近完美,就差左手托下巴姿势了。
3、接下来,看看【union模型、dw节点、强度1、结束时间1】的搭配。同样生图失败。
4、接下来,看看【union模型、dw节点、强度0.5、结束时间0.4】的搭配。不同于上面第2次试验,这次图也生出来了,但姿态控制并不成功。因此可见,在同样的强度、结束时间数值下,union模型与dw节点的“适配性”并不好。或许,此时要改改强度和结束时间的数值,但我没去试了。
5、接下来,看看【thi模型、aux节点、强度1、结束时间1】的搭配。可以看到,不同于第1次试验,此时的高强度、全程控制,thi模型依然把图片生出来了,并没有像union模型那样出图失败,只不过效果就嘛嘛....
6、接下来,看看【thi模型、aux节点、强度0.5、结束时间0.4】的搭配。效果可以,只不过没有第2次试验效果好,当然,这可能也和大模型有关,换个大模型,或许表现又不一样了?当然,前面说了,这里我们先不讨论大模型等文生图指标....
7、接下来,看看【thi模型、dw节点、强度1、结束时间1】的搭配。依然可以看到,thi模型是不惧怕高强度值和全程控制的(union模型在高强度值、全程控制时则生图失败),当然生图效果也嘛嘛....不过可以看到,thi 模型是正确还原出了左手摸下巴的动作。
8、最后,看看【thi模型、dw节点、强度0.5、结束时间0.4】的搭配。和上面第2次试验一样,应该说是接近完美了,成功复刻了左手摸下巴的动作,但没有翘腿。
2025年02月08日 16点02分 6
注意,使用aux节点时,预处理器下拉菜单要选择“OpenposePreprocessor”
2025年02月08日 16点02分
可以看出,在这个试验环境中:union模型与aux节点适配性更好,thi模型与dw节点适配性更好。这两个模型,在与适配节点搭配时,建议强度都设为0.5或0.4,结束时间都设为0.5或0.4。
2025年02月08日 16点02分
@骨折钦料 非常感谢,大佬竟然分享了这么详细的类比实验过程出来
2025年02月09日 02点02分
@骨折钦料 我都不知道预处理器节点还有个aux,没用过,也没意识到预处理器节点的不同选择也有适配性问题
2025年02月09日 02点02分
level 9
楼上大佬真是热心人,让我对controlnet的应用有了更深的理解!
感谢分享,开源的世界有您更精彩!
2025年02月09日 02点02分 8
不是大佬,同学习[滑稽]
2025年02月10日 07点02分
level 5
楼主你的姿态预处理器能识别二次元的吗,我用来识别二次元,姿态预览一坨黑
2025年02月19日 02点02分 10
有可能你的图片分辨率太大了,换分辨率小一点的
2025年10月12日 02点10分
level 1
绝如望,我复杂一点的anime图,姿态识别都是黑图
2025年03月07日 13点03分 11
level 8
我用的forge,现在遇到的问题是生的图跟骨骼图没关系,四五个版本的openpose是模型都试过了[小乖]
2025年09月21日 01点09分 12
level 1
有可能是checkpoint或者lora模型拉了导致的,我换了一些比较优秀的模型就能按照识别的姿势来,很神秘[呵呵]
2026年08月05日 15点08分 13
1