はじめに
MagicQuillは、HKUST、Ant Group、浙江大学、HKUによるオープンソースのAI対話型画像編集ツールである。MagicQuillはユーザーフレンドリーなインターフェースとAIによる提案を提供し、ユーザーが簡単に画像編集作業を行えるようにする。このプロジェクトにはCC BY-NC 4.0ライセンスが適用され、ユーザーは非商用目的でコードを使用・変更することができる。
機能一覧
- ブラシの追加プロンプトを通じて詳細や要素を追加することで、ユーザーは自分の筆で創造性を表現することができます。
- マイナスブラシ余分なディテールを削除したり、合図に合わせて領域を再描画します。
- カラーブラシ正確な彩色、ブラシの色とのマッチング。
- スマートキャンバスツール写真のアップロード、消しゴムツール、ドラッグ、回転、リサイズ機能。
- パラメタリゼーションベースモデル名、ネガティブヒント、ファインエッジコントロールなど、生成結果の詳細設定を調整します。
ヘルプの使用
設置プロセス
- クローン倉庫::
git clone --recursive https://github.com/magic-quill/MagicQuill.git
cd MagicQuill
- チェックポイントをダウンロードして解凍する::
wget -O models.zip "https://hkustconnect-my.sharepoint.com/:u:/g/personal/zliucz_connect_ust_hk/EWlGF0WfawJIrJ1Hn85_-3gB0MtwImAnYeWXuleVQcukMg?e=Gcjugg&download=1"
models.zipを解凍する。
- 環境の作成と依存関係のインストール::
conda create -n MagicQuill python=3.10 -y
conda MagicQuillをアクティブにする
pip install torch==2.1.2 torchvision==0.16.2 torchaudio==2.1.2 --index-url https://download.pytorch.org/whl/cu118
pip install gradio_magicquill-0.0.1-py3-none-any.whl
pip install -r requirements.txt
- MagicQuillを実行する::
python gradio_run.py
使用プロセス
- ブラシの追加ブラシを追加]を選択し、プロンプトに従って詳細や要素を追加します。例えば、数回のストロークで鹿を描いたり、キャラクターにネックレスを追加したりできます。
- マイナスブラシ不要なディテールを削除するには、減算ブラシを選択します。例えば、余分な尾びれや帽子を取り除きます。
- カラーブラシ正確な色付けをするためにカラーブラシを選択します。例えば、花を青く塗る。
- スマートキャンバスツールアップロードボタンで写真をアップロードし、消しゴムツールでエラーを消し、ドラッグ、回転、リサイズ機能で画像を調整します。
- パラメタリゼーション生成された結果の詳細設定(ベースモデル名やネガティブヒントなど)は、実行ボタンの横にあるパラメータを選択して調整します。
MagicQuillのWindowsワンクリックデプロイメント
プロジェクトをダウンロードして実行する:windows_setup.bat