【Magic Clothing】顔写真と服の画像からバーチャル試着

はじめに

前回もバーチャル試着の記事を書きました。
touch-sp.hatenablog.com
今回はこちらを使わせて頂きました。
github.com
前回使用した「OOTDiffusion」と開発者が一部重複しているので何かしらの関連はあるのでしょう。

目的

命題：『この顔の人物にこの服を着させて下さい』



用意したのはこの2枚の画像のみです。

結果

髪の長さが変わってしまいました。

顔の再現にはIP-Adapterが使われています。

PC環境

Windowsで問題なく動作しました。

Windows 11
CUDA 11.8
Python 3.11

Python環境構築

pip install torch==2.0.1+cu118 torchvision==0.15.2+cu118 --index-url https://download.pytorch.org/whl/cu118
pip install numpy==1.25.1 diffusers==0.25.1 opencv-python==4.8.0.76 transformers==4.31.0 gradio==4.16.0 safetensors==0.3.1 controlnet-aux==0.0.6 accelerate==0.21.0
pip install onnxruntime-gpu==1.17.1 insightface==0.7.3