Qwen Next Scene LoRa

aliendalonealiendalone
13
90
#nextsceneaction#character#aiart#digitalart#animation#workflow#comfyui#imagetoimage
Qwen Next Scene

详情

下载文件

模型描述

🎨 完整指南：在 ComfyUI 中从图像生成下一场景

此工作流基于输入图像创建连续场景（下一场景生成），同时保留构图、风格和氛围。非常适合创作漫画、分镜脚本、书籍插图和视觉叙事。该工作流基于 Qwen 图像编辑 基础模型开发，并使用专用 LoRA 适配器，仅需 4 步即可实现超快速生成！

📦 开始前所需组件

1. 必需模型（强制要求！）

下载并放置到指定文件夹中：

📂 ComfyUI/

└── 📂 models/

├── 📂 diffusion_models/

│ └── qwen_image_edit_2509_fp8_e4m3fn.safetensors

├── 📂 loras/

│ ├── Qwen-Image-Lightning-4steps-V1.0.safetensors

│ └── next-scene_lora_v1-3000.safetensors

├── 📂 vae/

│ └── qwen_image_vae.safetensors

└── 📂 text_encoders/

└── qwen_2.5_vl_7b_fp8_scaled.safetensors

下载链接：

2. 硬件要求

  • 最低配置：8 GB 显存的 GPU

  • 推荐配置：12 GB 以上显存的 GPU（RTX 3080/4080 或更高）

  • 磁盘空间：所有模型约需 3.5 GB

  • 内存：16 GB 以上

🛠️ 分步设置与使用说明

步骤 1：将工作流导入 ComfyUI

  1. 将 JSON 代码保存为文件 next_scene_generation.json

  2. 在浏览器中打开 ComfyUI

  3. 右键点击空白处 → 加载 → 选择已保存的文件

  4. 工作流将自动加载并配置正确

步骤 2：上传源图像

  1. 找到左侧界面的组 “步骤 2 - 上传待编辑图像”

  2. 点击 LoadImage 节点（粉红色方块）

  3. 点击 📁 选择要上传的图像 按钮

  4. 从电脑中选择一张图像

    • 支持格式：PNG、JPG、JPEG、WEBP

    • 推荐尺寸：512×512 至 1280×720 像素

    • 提示：源图像质量越高，结果越好

步骤 3：加载模型

  1. 确认所有模型已正确安装在 ComfyUI 文件夹中

  2. 在 “步骤1 - 加载模型” 组中确保：

    • 在 UNETLoader 节点中，选择模型 qwen_image_edit_2509_fp8_e4m3fn.safetensors

    • 在 CLIPLoader 节点中，选择：

      • 模型：qwen_2.5_vl_7b_fp8_scaled.safetensors

      • Clip 类型：qwen_image

    • 在 VAELoader 节点中，选择模型 qwen_image_vae.safetensors

  3. 如有任何模型未加载，请安装后重启 ComfyUI

步骤 4：配置 LoRA 适配器（至关重要！）

  1. 在第一个 LoraLoaderModelOnly 节点中：

    • 选择 Qwen-Image-Lightning-4steps-V1.0.safetensors

    • 模型强度：1.0（最大影响）

  2. 在第二个 LoraLoaderModelOnly 节点中：

    • 选择 next-scene_lora_v1-3000.safetensors

    • 模型强度：0.8（推荐平衡值）

  3. 重要：请勿更改 LoRA 适配器的应用顺序！先应用 Lightning，再应用 next-scene。

步骤 5：编写提示词（关键步骤！）

  1. 找到 TextEncodeQwenImageEditPlus 节点（蓝色方块）

  2. 在提示词输入框中，输入以 “Next Scene:” 开头的文本
    正确提示词示例：

    Next Scene: The camera holds a tight close-up on the man's face as he lies in bed, eyes open. His head rests near the lower right corner of the frame, with the pillow sketched in soft, curved lines. The rest of the canvas is empty, emphasizing the quiet of morning.

    有效提示词规则：

    • 必须以 “Next Scene:” 开头（LoRA 强制要求）

    • 指定镜头方向：“close-up”（特写）、“wide shot”（广角）、“medium shot”（中景）、“low angle”（低角度）

    • 描述光线：“morning light”（晨光）、“dramatic shadows”（戏剧性阴影）、“soft golden hour glow”（柔和的黄金时刻光）

    • 说明氛围变化：“light morning mist”（薄雾）、“gentle breeze moving the curtains”（微风拂动窗帘）

    • 保持连贯性：提及源图像中的元素

    • 使用具体细节：人物姿势、物体位置、情绪表达

  3. 对于负面提示词（在 CLIPTextEncode 节点中）：

    • 基础版本可留空

    • 或添加：deformed, blurry, low quality, distorted perspective, extra limbs

    • 推荐 CFG 值：1.0（极低，因 LoRA 特性而必需）

步骤 6：确认图像尺寸

  1. GetImageSize 节点将自动识别源图像尺寸

  2. EmptySD3LatentImage 节点将创建相同尺寸的隐空间

  3. 重要：若需更改宽高比，请手动修改 EmptySD3LatentImage 节点中的宽高值，并断开输入连接

步骤 7：配置生成参数

  1. 找到 KSampler 节点（橙色方块）

  2. 检查关键参数：

    • Steps：4（不可更改，LoRA 最优值）

    • CFG：1.0（极低，但对质量至关重要）

    • Sampler：euler

    • Scheduler：simple

    • Noise Seed：randomize（或指定数字以复现结果）

  3. 工作流警告：切勿随意增加 Steps 和 CFG 值！这将破坏 LoRA 适配器功能。

步骤 8：开始生成

  1. 点击界面右上角的 QUEUE PROMPT 按钮

  2. 在 ComfyUI 控制台中监控进度：

    • 首先加载模型（约 10-15 秒）

    • 然后开始生成（在 RTX 3090/4090 上通常为 5-15 秒）

  3. 生成完成的图像将出现在右侧的 SaveImage 节点中

  4. 结果将自动保存至文件夹：ComfyUI/output/ComfyUI/

🎯 获得最佳效果的技巧

1. 下一场景提示词规则

为实现帧间最大连贯性：

  • 以镜头描述开头：
    "Next Scene: The camera slowly pulls back to reveal..."
    "Next Scene: Switching to a low angle shot, we see..."

  • 保留关键元素：
    "Next Scene: Maintaining the same warm sunset lighting, the character now stands near a window..."

  • 指定人物动作：
    "Next Scene: The woman has turned her head slightly to the left, her expression now showing concern..."

  • 避免剧烈变化：不要无故改变场景、光线风格或角度

2. 硬件优化

  • 弱 GPU（8 GB 显存）：

    • 将源图像分辨率降至 768×512

    • 在 SaveImage 节点中禁用预览

  • 强 GPU（24 GB 以上显存）：

    • 可将分辨率提升至 1280×720

    • 使用 batch size=2 进行并行生成变体

3. 常见问题与解决方案

  • 问题：结果模糊或噪点多
    解决：确保使用正确的 VAE（qwen_image_vae.safetensors），检查源图像质量

  • 问题：源图像与结果无关联
    解决：在提示词中加入更多源帧的具体细节

  • 问题：出现伪影或扭曲
    解决：将第二个 LoRA 强度降至 0.6–0.7

  • 问题：“CUDA out of memory”
    解决：降低图像分辨率或重启 ComfyUI 以释放内存

4. 进阶技巧

  • 创建迷你动画（3–5 帧）：

    1. 生成第一个下一场景

    2. 保存结果并作为新源图像上传

    3. 修改提示词，加入动作描述："Next Scene: Continuing the movement, the character now..."

  • 风格融合：

    • 在提示词中加入风格指令：in the style of impressionist painting（印象派风格）、with cinematic bokeh（电影级虚化）

    • 调整第二个 LoRA 强度（0.5–1.0）以控制风格影响程度

  • 创建全景场景：

    • 使用提示词："Next Scene: The camera pans horizontally to reveal..."

    • 通过全景拼接工具对生成图像进行后期处理

      🌟 有效提示词示例

      镜头角度变化：

      Next Scene: The camera pulls back to a medium shot, revealing the character standing on a cliff edge overlooking a misty valley at dawn. The morning sun casts long shadows behind him, highlighting the texture of his coat. The composition maintains the same left-to-right balance as the previous scene.

      动作延续：

      Next Scene: Following the character's movement, we now see him stepping through an ancient stone archway into a sunlit garden. The camera angle remains consistent, but the lighting shifts to warm afternoon tones. Butterflies flutter around blooming flowers in the foreground, maintaining the soft dreamlike atmosphere of the previous frame.

      时间变化：

      Next Scene: The scene transitions to night time. The same character sits by a window, but now illuminated only by candlelight and moonbeams. Outside, stars are visible in the clear night sky. The camera maintains the same close-up framing, but the color palette shifts to deep blues and warm yellows, preserving the emotional tone of quiet contemplation.

🚀 总结与最佳实践

此工作流代表了视觉叙事创作的革命性方法。成功的关键原则如下：

  1. 源图像质量至关重要：使用清晰、光线良好的照片

  2. 提示词是一门艺术：练习撰写详细、连贯的描述

  3. 尊重技术限制：4 步与 CFG=1.0 并非随意设定，而是 LoRA 的最优参数

  4. 尝试光线与角度变化，而非剧烈内容变更

  5. 保存中间结果，用于构建连续故事

专业提示：创建完整漫画或分镜脚本时：

  • 生成 3–5 个连续帧

  • 导出至 Photoshop 或 Canva 等软件

  • 添加对话气泡、转场和色彩校正

  • 保存为 PDF 或 PNG 序列用于动画

🎉 恭喜你！ 你现在拥有了一个强大的视觉叙事生成工具。从简单场景开始，逐步增加复杂度。请记住：最佳效果源于对工作流能力的深刻理解与精心打磨的提示词。

P.S. 别忘了多做实验！尝试上传你喜爱电影的截图，想象这个故事的下一帧会是什么样子。灵感往往在创作过程中涌现！ ✨🎬

此模型生成的图像

未找到图像。