Zuntan Profile picture
ローカル AI 技術で遊んだり、遊び方を紹介したり、簡単に遊べるようにするのが趣味です。 制作物の紹介時に私への連絡は必要ありません。 過去の活動まとめ: https://t.co/4sm8Z0qI2f
Feb 26, 2023 12 tweets 5 min read
ControlNetのopenposeとhedで、ポーズを指定しつつも詳細な背景と正常な手を無料で描画する手法です。
!!手の絵を描けなくても大丈夫です!!
!!体型の一致する3Dモデルを用意しなくても大丈夫です!! hedやdepthは優秀ですが、背景を塗りつぶしてもsimple backgroundになる弱点があります。
背景も用意すればまっとうな背景を描画できますが、それではただのi2iです。

AIに構図を提案してもらいたいので、ポーズだけを指定してあとはキャラも含めてガチャりつつ、最後にグチャった手を直します。
Feb 25, 2023 5 tweets 1 min read
Web UIのControlNetで利用する観点でのDesignDollの評価です。

DesignDollのいいところ

・無料

・デザイナー向けでポーズをつける以外の機能がないので悩まない

・絵が得意でなくても人体モデルが表示されるので、画面をイメージしやすい

・ポーズ検出に手足の形が対応されても対応できる (無料版の)DesignDollのよくないことろ

・保存できない
 ・パッとポーズを作って持ってくだけなら問題なし

・関節のガビガビをControlNetのPreprocessorが拾う
 ・openposeなら問題なし

・モデルやテクスチャが変えられないので髪が生やせない
 ・openposeなら問題なし
Feb 25, 2023 7 tweets 2 min read
Multi ControlNetのdepthとhedで画像から形状のみを取り出して、モデルの絵をのっける実験です。
1枚めの絵は2枚めDesign Dollの絵から形状を取り出して、モデルの絵をのせています。
同じ形状にいろんなモデルで絵をのせているのが3枚目です。 ImageImageImage 1枚目のdepthは奥行きの情報を取り出せますが画面のXY平面上の処理が弱いので、そこを2枚めのhedにサポートしてもらいます。
ZのdepthとXYのhedで簡易3Dモデリングみたいですね。
各種設定は最初の絵の下部を参考にしてください。 ImageImage