質問
controlnetのopenposeがうまくいきません。訂正やアドバイスお願いします

状況説明
webui1111でcontrolnetのopenposeを使ってポーズを取らせたいのですが初歩で躓いています。
4-5サイトくらい読み比べてやってみたけど、
うまくいく時もあれば、全然反応しない時、グロっぽいバグ画像になるのが多い。プロンプトやi2iの方が直接反応があります

棒人形制作
openpose editorで簡単に弄ったのをPNGで出力後、画像編集ソフトでサイズやポーズを再編集し、512x512び透明ありのpngにして棒人形として使用
https://i.imgur.com/haQgMli.jpg

結果
https://majinai.art/i/6VWvnTo

手順
https://i.imgur.com/L5S6GNx.png
webui1111、ControlNet v1.1.116、上の棒人形を入れて
Enableチェック、Low VRAMチェック、
Preprocessor 無し
Model controlpose-fp16
Control Weight
t2iで1 girlで出力
その他設定は画像にて(weightは基本1 ControlNet Control Modeは基本balanceだけど、2にしたりControlNet is more importantにしたり数通り試したけど全部だめ)


10回くらい出力しても1つもポーズが反映されません
試しにプロンプトを沿えてみたら成功率があがり、
何のためにopenpose抜きでプロンプトを入れたら、pose入れても入れなくても結果は同じみたいです
何が間違ってますか?