Lumina2SDXL-L-Ollama (AutoPrompt) -IP-Adapter

[https://openart.ai/workflows/indras_mirror/lumina2sdxl-l-ollama-autoprompt--ipa/AnnzsbhXmkc7K0AQzbCv

これは、アップロードされた画像を取得し、Ollama（Llava 1.6 がよく動作します）で画像を自動的に記述し、Lumina ComfyUIラッパーを使用して潜在変数をSDXL Lightningに送信するワークフローです。また、IP Adapterを使用して最終出力に影響を与えます。最大23GBのVRAMを使用しますが、Ollamaを削除して通常のプロンプトのみを使用することでこの問題を解決できます。また、SDXL-Lightningモデルを任意のモデル（例：SD 1.5）に変更することも可能です。

https://github.com/kijai/ComfyUI-LuminaWrapper/tree/main

https://huggingface.co/Alpha-VLLM/Lumina-Next-SFT

https://ollama.com/library/llava

https://ollama.com/library/llava-phi3