「web UIでSDXL 1.0用のControlNetはもう利用できるの？」 「ControlNet用モデルが多くて、意味がわからない・・・」 このような場合には、この記事の内容が参考になります。 この記事では、SDXL 1.0版ControlNetの利用方法を解説しています。 本記事の内容 SDXL 1.0版ControlNetSDXL 1.0版ControlNetのインストールSDXL 1.0版ControlNetの動作確認 それでは、上記に沿って解説していきます。 SDXL 1.0版ControlNet SDXL 1.0版ControlNetとは、SDXL 1.0用のControlNetを指します。 ControlNetについては、もう説明は不要ですね。 もしControlNet自体を知らない場合は、以下をご覧ください。 このControlNetですが、SDXL 1.0版がweb
毎日アプデが来てるんじゃないかってぐらいアプデが来てるControl Net。 Control Netの機能であるopen poseを使う上で欠かせないのがopenpose-editor。 新しいopenpose-editor従来のopenpose-editor(https://github.com/fkunn1326/openpose-editor) では、顔や、手をいじることはできませんでしたが、新しいopenpose-editorで対応しました。 それがGitHub - huchenlei/sd-webui-openpose-editor: Openpose editor for ControlNet. https://github.com/huchenlei/sd-webui-openpose-editorをurlからインストール 再起動の後、使えます。 （使うときの注意点） st
This package contains 900 images of hands for the use of depth maps, Depth Library and ControlNet. Usage: Place the files in folder \extensions\sd-webui-depth-lib\maps ControlNet Preprocessor: lineart_realistic, canny, depth_zoe or depth_midas ControlNet Model: Lineart, Canny or Depth ControlNet Starting Control Step: 0.1~0.2 You could drag the image corner to mirror a hand. Depth Library: https:/
2023/05/13 (更新日: 2023/09/29) 【Stable Diffusion】手・指だけ修正できる拡張機能『depth library』の使い方！ AIイラスト ※当ブログはアフィリエイト・アドセンスによる収益で運営されています。 Stable Diffusionのイラストで指がうまく描けない ガチャ回しまくるのめんどくさい なんか便利な拡張機能ないの？ こういったお悩みにお答えします。 Stable Diffusionは手や指を正確に描くのがとても苦手です。指が4本になったり変な形になったり。 そのせいで何回もガチャを回すことになり、時間ばかりが過ぎ去っていくことも。 この記事では 【Stable Diffusion】手・指だけ修正できる拡張機能『depth library』の特徴とは？ depth libraryの導入方法 depth libraryの使い方 もっとスム
WebUIが起動したら、ブラウザで指定されたローカルURLにアクセスします。 起動したら、「Extensions」のタグから「Install from URL」のタグを選択し、「URL for entension’s git repository」に「https://github.com/jexom/sd-webui-depth-lib.git」を入力し、「Install」ボタンをクリックします。 上記により、depth libraryがインストールされます。「Installed」のタグから、「sd-webui-depth-lib」が登録されていることを確認し、「Apply and restart UI」をクリックして、WebUIを再起動します。 新たに「Depth Library」がタグに追加されていたら成功です。 Depth liabraryで手の生成 今回は下の画像を元画像として、右
画像生成AI「StableDiffusion」の進化が止まりません。昨年8月にオープンソースとしてリリースされてから、世界中のプロアマ問わず多数の人たちが様々な研究成果を反映させ、毎日と言っていいほど新機能を誰かが発表するという状況が起きています。 StableDiffusion登場当初は、画像の品質のランダム性が高く、構図やポーズなどを指定できないという弱点を抱えていました。1枚の画像をもとに画像を生成する「i2i（image2image）」である程度コントロールすることはできても、「キャラクターに特定のポーズをとらせる」といったことは非常に難しかったんですね。 その状況を一変させる新機能が今年2月に登場しました。その名も「ControlNet」。プロンプトによる制約を克服するための、とてつもないポテンシャルを持つ技術でした。Stable Diffusionに次ぐ「2度目の炸裂」と言って
の使い方をご紹介するという内容になっています。 Stable Diffusion系のモデルを使って美少女イラスト等を生成している方であれば、キャラクターの手や指がグチャグチャになってしまう問題に悩むことが多いと思います。この問題に関しては今まで多くの解決策が模索されていましたが今一つ決定打と呼べる案がありませんでした。 しかしそんな中で「ControlNet」と呼ばれる新技術が登場し、これを活用して手や指の問題をある程度解決する方法が考案されました。そして先日にはこの方法をStable Diffusion web UIで簡単に使える無料の拡張機能が登場したので、ぜひ情報を共有しておこうと思った次第です。 ここではその拡張機能「Depth map library and poser」について、インストール方法や使い方を解説していきますね。 ※2023/04/17追記： 最新のControlN
人物の姿勢推定(Human pose stimation)は、人の頭部の検出だけでなく、肩、肘、手、腰、膝、足を検出し、人がどのような姿勢を取っているかを推定する技術です。数年前まではDeformable part modelなどの技術が用いられていましたが、近年Deep Learningが用いられるようになり飛躍的に性能が向上しました。最も注目を集めたのが、カーネギーメロン大学のZhe CaoらによってCVPR2017で発表された「Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields」1)が実装されたライブラリであるOpenPoseです。すでにご存知の方も多いと思いますが、知っておくべき技術ですので本連載でも紹介したいと思います。 OpenPoseは、動画像を入力するだけで、画像内の複数人物のポーズをほぼリ
画像から姿勢・セグメントを抽出し出力画像に反映させるcontrolnetには、姿勢・セグメント認識処理の種類が複数あるため、各Preprocessorの特徴を知ると用途に応じて適切に使い分けることができるようになります。 ControlNet ver1.1に伴い大幅な加筆修正を行いました。 Preprocessorが20以上増加したため、ページが大変長くなってしました。 ここではt2i用モデルのみ実演しています。i2i用のInpaint系はノータッチです。 ご了承ください なお、v1.1用モデルはこちらからダウンロードしてください。 fp16,safetensors版で問題ありません（723MBくらいのやつ) モデル配置場所はこちらです。
こんにちは。だだっこぱんだです。 今回は、AIイラスト界隈で最近話題のControlNetについて使い方をざっくり紹介していきます。 モチベが続けば随時更新します。 StableDiffusionWebUIのインストール今回はStableDiffusionWebUIの拡張機能のControlNetを使います。 WebUIのインストールに関してはすでにいろんな解説記事や動画があると思うのでそちらをご参照ください。 一応僕が作った簡単にWebUIを起動できるソフトも紹介しておきます（せんでん）
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
