IT

stable-diffusion-3.5でローカル画像生成(Upscale, Blur)

shimasan0x00

こんにちは,shimasan0x00(@shimasan0x00)です.

今回はComfyUIを用いたstable-diffusion-3.5でローカル画像生成する方法について整理したものを共有します.

Upscale, Blurを使用したWorkflowまで対応しています.

結論

ComfyUIのworkflowだけ知りたい方は以下のGitHubに飛んでjsonをダウンロードしてください.

環境

  • GPU
    • NVIDIA GeForce RTX 4070Ti(12GB)
  • 使用モデル
    • 基本
      • stable-diffusion-3.5-medium
    • Blur
      • stable-diffusion-3.5-fp8
  • ComfyUIの管理
    • StabilityMatrix

ComfyUIとは

AIモデルを使用した画像生成を簡単にしてくれるツールです.
ブラウザ上で操作することで自身の意図に近い画像を生成することができるようになります.

昔,Stable Diffusion web UIが有名でしたが現在はこちらが主流だったので構築に採用しました.

モデルや画像生成設定などの構成要素を「ブロック」として扱い,それらをつなげて自身の理想とする処理の流れを組み立てます.

Stable Diffusion web UIより直感的に操作することは難しいですが,細かい調整や自身の理想とする処理の流れ(workflow)にできます.

スポンサーリンク

インストールについて

現在はComfyUIやStable Diffusion web UI含めて様々なツールが存在しています.
それらのツールをまとめて管理するStabilityMatrixという管理ツールがあり,今回私はStabilityMatrixを使用してComfyUIをインストールしています.

拡張機能としてComfyUI-Managerは必ずインストールしてください.
あとの不足分はよしなに解決してくれると思います.

おすすめサイト

  • SD3.0の汚名返上なるか?!画像生成AI「Stable Diffusion 3.5」を試してみた
    • 超丁寧にステップバイステップでStable Diffusion 3.5のインストールとサンプルworkflowを動かすところまで紹介してくれています.
  • 【Stable-Diffusion】🔰どこよりも分かる🌱Comfy-UIの使い方<STEP1>
    • YouTube動画
      • これで私はComfyUIについて学びました.最低でもSTEP1は見たほうがよいです.
      • SD3.5ではなく,SDXLモデルを使用するかCIVITAIでモデルを用意してから視聴するのがおすすめです.
  • Stable Diffusionまとめ!プロンプトや使い方が丸わかり
    • プロンプトやその他SDで困ったことがあれば一旦こちらを見るでもいいかもしれません.

他の人が作成したworkflowを見るときは以下から探してみるのがオススメです.

参考workflow

  • stable-diffusion-3.5-medium
    • SD3.5M_example_workflow.json
    • SD3.5M_SLG_example_workflow.json
  • ComfyUI

インストールするファイル

作成したworkflow

作成したのは以下の2つ

  • SD35M-ALL.json
    • BLURもUPSCALEも全部混ぜた全部盛り
  • SD35M-BASE.json
    • UPSCALEのみで生成時間も短い
    • 基本はこっちで生成していく

作成したworkflowの左上に入力のグループがあるのでプロンプトを入力・管理しています.

入力のブロックには出力画像の比較もあるので何回か試行しながら好みの画像を作成していくことになります.

ALLの方は時間がとてもかかってしまうのでBASEを常用することをオススメします.

スポンサーリンク
ABOUT ME
shimasan0x00
shimasan0x00
Data Engineer
高専→大学編入→大学院→データエンジニア

専攻は計算社会科学,ウェブマイニング
趣味でSNSやVTuberのデータ集めたり分析しながら生活している
スポンサーリンク
記事URLをコピーしました