多模态大模型实战10 第10章 图像生成进阶——ControlNet/IP-Adapter/LoRA学习目标掌握ControlNet的多种控制方式(姿态、深度、边缘)用IP-Adapter实现参考图像风格迁移训练和使用图像生成LoRA用ComfyUI构建工作流10.1 ControlNetControlNet让图像生成"听话"——按照姿态、深度图、边缘等条件生成图像。原理ControlNet在U-Net的每个Block上添加一个"零卷积"旁路:原始U-Net Block ──────────────→ 输出 ↓ ↑ ControlNet Block ──零卷积──→ 加到输出 ↑ 控制条件(姿态/深度/边缘)零卷积初始化为零,训练初期不影响原U-Net,逐步学会添加控制信号。Canny边缘控制fromdiffusersimp