1. ControlNet色彩分布约束与内容约束

1.1. 色彩分布 约束

• 什么是色彩分布约束：让生成图片的像素分布模仿色彩分布图
• 预处理器：t2ia_color_grid（自适应色彩像素化处理）
• 应用
  • 微调生成画面色调
  • 生成色彩分布类似的图像
• 缺点
  • 色彩分布约束无法做到非常准确的转移色彩
  • 开启色彩分布约束导致出图质量下降

1.2. 内容 约束

• 为什么要有内容约束
  • 之前学习的约束，都无法规定画面元素
• 什么是内容约束
  • 就是controlnet语义分割模块
  • 作用：用色彩分布控制生成图片的画面元素分布
  • 特点：精准保留外边缘轮廓的同时，控制元素类型的生成
• 预处理器区别
  • 使用默认预处理器
• Seg (语义分割)协议
  • Ade20k协议：ADE20K涵盖了场景、对象、对象部分的各种注释
  • coco协议
    • 颜色标注模式类似，标注颜色有所不同
    • 识别能力较弱，不建议使用
• 应用
  • 概念设计：从无到有画出画面结构
  • 室内设计：修改已有的画面内容