2023-03-01から1ヶ月間の記事一覧

【Diffusers】個人的ToDoリスト

未解決の問題github.com 今後試してみたいものlong video(AnimateDiff)github.com long-prompt weightinggithub.com TextToVideoZeroSDXLPipelinegithub.com ReferenceOnly for SDXLgithub.com Tune-A-Videogithub.com UniDiffuserVersatile Diffusionの進化…

WSL2上のUbuntuに zoxide と fzf をインストールする

sudo apt install zoxide sudo apt install fzf その後「.bashrc」に以下の1行を書き込む。 eval "$(zoxide init bash)" 書き込み方 sudo nano ~/.bashrc ランキング参加中プログラミング

【Diffusers】Text-to-Video synthesis(テキストからビデオ合成)、たったの9行でした

最終更新日:2023年6月30日 はじめにテキストからショート動画が作れるとのことでさっそく試してみました。環境CUDA 11.8とPyTorch 2.0を使うためにWSL2を使用しました。 Ubuntu 22.04 on WSL2 CUDA 11.8.0 WSL2ではOS環境をいくらでも複製できるので新しい…

【Diffusers】Multi-ControlNetでスマホを持つ手をきれいに描く

はじめに以前からControlNetを使って手をきれいに描画することに挑戦してきました。 touch-sp.hatenablog.com touch-sp.hatenablog.com 何かを持つ手はさらに難易度が高いとのことで今回はそれに挑戦しました。 「スマホを持つ手」をきれいに描画することが…

【Diffusers】Stable Diffusion 2.1用の ControlNet が公開されていたのでさっそく Waifu Diffusion 1.5 Beta 2 - Frosty Aesthetic Ver と組み合わせて使ってみました

はじめにStable Diffusion 2.1用のControlNetが公開されていました。 →こちらです。 Stable Diffusion 2.1をベースとしたモデルを探していたらWaifu Diffusion 1.5 Betaに行きつきました。 中でもBeta 2 - Frosty Aesthetic Verはリアルに近い画像が出力され…

【Diffusers】Multi-ControlNetで人物をきれいに描く

SDXL版はこちら。はじめに前回の進化版です。 touch-sp.hatenablog.com 手をきれいに描くためにはcanny2imageでのエッジ検出の閾値を低く設定する必要がありました。 そうするとその他の部分も忠実に元画像が再現されてしまうので似たような画像が大量にでき…

【Diffusers】ControlNet + Inpainting が実装されていたので使ってみました

ControlNetとInpaintを組み合わせるとどのようなことが可能になるのか?実際に使ってみて一例を紹介しています。

【Diffusers】【ControlNet】【scribble2image】線の太さは画像に影響するか?

ControlNetのscribble2imageを使用するときに線の太さはどれくらいが適切か?いろいろなパターンを試してみました。

【Diffusers】【ControlNet】【canny2image】画像サイズについて

はじめにControlNetのcanny2imageについて深堀りしていきます。前回Canny法によるエッジ検出の設定が重要なことが分かりました。 touch-sp.hatenablog.com 今回は元画像が生成画像(今回は768x768とします)より大きい場合のリサイズについてです。 リサイズ…

【ControlNet】【canny2image】【Anything-V4】エッジ検出の違いで生成画像はどう変わるか?

はじめに前回ControlNetのcanny2imageにおけるCanny法によるエッジ検出の設定について書きました。 touch-sp.hatenablog.com 実際に結果がどう変わるかをAnything-V4を使って検証しました。 テーマは「手」をきれいに出力することです。元画像 元画像はぱく…