1. 项目概述从“图生图”到“精准控制”的进化如果你已经玩过Stable Diffusion的文生图体验过输入一段文字就能得到一张精美图片的惊喜那么恭喜你你已经迈入了AI绘画的大门。但很快你就会遇到一个几乎所有创作者都会碰到的“天花板”生成的图片整体氛围很棒但总有那么一两个细节让你抓狂——比如人物的手指扭曲了、背景里多出一根奇怪的柱子或者你想给角色换件衣服却无能为力。这时候仅仅依靠调整提示词Prompt就像用大炮打蚊子不仅效率低下而且结果往往不可控。这正是“图生图”功能特别是其核心子功能“局部重绘”和“涂鸦重绘”大显身手的时候。它们解决的正是从“整体生成”到“像素级精准控制”的关键一跃。你可以把文生图想象成一位才华横溢但天马行空的画家你只能通过语言描述来引导他。而图生图特别是局部/涂鸦重绘则像是一位技艺精湛的修图师你指着原图上具体的某个区域说“这里按我的想法改其他地方请保持原样。”我最初接触时也以为这只是个简单的“修补”工具。但深入使用后才发现这是将AI从“随机灵感生成器”转变为“可控创意生产力工具”的核心。无论是修复瑕疵、更换服装发型、改变场景元素还是进行天马行空的二次创作都离不开对这两个功能的深度掌握。网上教程虽多但往往只讲操作不讲底层逻辑和实战中的“微操”导致很多人用起来效果不稳定。今天我就结合自己踩过的无数坑为你拆解这套超强操作流程背后的门道。2. 核心概念拆解局部重绘与涂鸦重绘究竟有何不同很多人容易把局部重绘和涂鸦重绘混为一谈因为它们都在“图生图”标签页下操作界面也相似。但实际上它们的底层逻辑和适用场景有本质区别。理解这一点是你能否用得好的前提。2.1 局部重绘基于蒙版的“区域替换引擎”局部重绘的核心是“蒙版”Mask。你需要用画笔在图片上精确地涂抹出一个区域蒙版区域。AI的工作是仅对蒙版覆盖的像素进行重新绘制而蒙版之外的区域则会被严格保护几乎不发生改变。它的工作原理可以简单理解为识别与隔离AI会识别你涂抹的蒙版区域并将这块区域从原图中“挖”出来。内容生成结合你输入的提示词AI在这个被“挖空”的区域内生成全新的内容。边缘融合将新生成的内容无缝融合到原图的背景中。这里“融合”的质量是成败的关键。关键特性与适用场景高保真度非蒙版区域被高度保护适合修改图片中微小但关键的缺陷比如修复崩坏的手部、去掉画面中不想要的物体电线杆、水印、微调面部表情。提示词针对性极强你的提示词应该只描述你希望蒙版区域变成的样子。例如你想把一件T恤换成西装那么提示词就应该是“a black suit, tie, formal wear”而不是重新描述整个人物。对蒙版精度要求高蒙版涂得越精细AI越明白你要修改的范围生成结果就越精准。毛糙的蒙版边缘会导致融合生硬或影响周边区域。实操心得局部重绘像外科手术目标是精准切除并移植。你的提示词是手术方案蒙版就是手术刀划下的切口。切口越小、越精确术后恢复边缘融合就越好。2.2 涂鸦重绘基于笔触的“风格与内容引导器”涂鸦重绘的核心是“涂鸦色块”。你用不同颜色的画笔在图片上乱涂乱画AI的任务是参考你涂鸦的颜色和形状对整个图片或对应区域进行重新诠释和绘制。它的工作原理有所不同色彩与形状提示你涂上的颜色和大致形状成为AI生成时的重要参考条件。比如你在天空涂上红色AI就更倾向于生成晚霞你在衣服上涂上蓝色条纹AI就可能生成一件条纹衫。全局或局部影响根据设置涂鸦可以影响整个画面也可以只影响涂鸦覆盖的区域类似蒙版但逻辑更软性。创造性融合AI不会严格保护非涂鸦区而是试图理解你的涂鸦意图并将其与整张图的构图、风格进行创造性结合。关键特性与适用场景创意发散与风格探索适合快速改变画面整体色调如把夏日午后变成金色黄昏、尝试不同的服装纹理和图案、为场景添加新的色彩元素如给草地加上花朵。提示词更偏向氛围你的提示词可以更抽象描述整体氛围。例如涂了红色后提示词可以是“dramatic sunset, warm glow”让AI去发挥。控制力相对较弱由于AI对涂鸦的解读有创造性最终结果的不确定性比局部重绘更高。它可能改变你涂鸦区域之外的关联部分。实操心得涂鸦重绘像给画家一个色彩和构图的灵感提示。你不需要画得多好只需要传递“感觉”。它更适合艺术风格转换、概念草图快速上色或者当你没有明确修改目标只想探索可能性时使用。简单对比表格特性局部重绘涂鸦重绘核心输入黑白蒙版指定修改区域彩色涂鸦提供色彩/形状提示AI任务替换蒙版区域内容根据涂鸦重新诠释画面保护原图强非蒙版区基本不变弱整个画面都可能被影响提示词重点精确描述蒙版内的新内容描述整体氛围或风格控制精度高像素级精准中低偏向引导和发散典型应用修复缺陷、更换物体、微调改色调、换风格、加纹理、创意探索3. 超强操作流程全解析从准备到出图理解了原理我们进入实战环节。一套稳定、高效的流程能极大提升你的出图质量和成功率。以下流程以 Stable Diffusion WebUI 为例但核心思路通用。3.1 前期准备模型、提示词与参数预设很多人拿到图就直接开涂结果总是不理想问题往往出在准备阶段。选择合适的大模型Checkpoint这是最重要的基础。如果你想重绘的是二次元人物却用了写实风格的大模型结果必然违和。原则是重绘使用的模型最好与原始图片的生成模型一致或风格相近。如果不确定原图模型就选择一个与你期望输出风格最匹配的模型。构思提示词Prompt局部重绘采用“焦点描述法”。提示词应紧紧围绕你要修改的部分。例如修改头部发型提示词就写“short silver hair, detailed hair strands, anime style”。负面提示词Negative Prompt同样重要可以加入“bad hands, deformed fingers, extra limbs”来避免在重绘区域产生新的瑕疵。涂鸦重绘采用“氛围描述法”。提示词可以更整体如“fantasy landscape, magical forest, glowing mushrooms, night time”。你的涂鸦颜色比如给蘑菇涂上荧光蓝会和这些氛围词协同工作。参数预设模板在WebUI的设置中保存一套针对重绘的优化参数预设能节省大量时间。我常用的基础预设包括采样方法SamplerDPM 2M Karras 或 Euler a。前者更稳定细腻适合复杂修改后者出图快适合简单尝试。采样迭代步数Steps20-30步。重绘不需要像文生图那样追求极高步数足够清晰融合即可。重绘幅度Denoising strength这是核心中的核心我们后面单独详解。3.2 局部重绘实战以“修复扭曲的手部”为例假设我们有一张很棒的人物图但手部崩坏了。目标是修复手部保持其他部分不变。步骤一上传与蒙版绘制将原图拖入“图生图”标签页。在下方选择“局部重绘上传蒙版”或直接在图片上使用画笔工具。强烈建议使用“局部重绘上传蒙版”模式因为它允许你在外部用PS等工具制作更精确的蒙版。这里我们用内置画笔。调整画笔大小仔细地、完全地涂满整个崩坏的手部区域。关键技巧可以适当将蒙版区域画得比实际缺陷区域大一点点比如包含部分手腕给AI一些“上下文”进行融合但绝不能画到其他完好的部位。步骤二关键参数设置详解蒙版模式选择“重绘蒙版内容”。这告诉AI只处理你涂白的部分。蒙版模糊Mask blur通常设置为4-12。这个参数决定了蒙版边缘的羽化程度。数值越大边缘过渡越柔和融合更自然但AI可能“侵蚀”到蒙版外一点。对于手部这种需要精细对齐的部位建议从4-8开始尝试。重绘幅度Denoising strength这是最重要的杠杆。概念它控制AI对原图信息的舍弃程度。0完全保留原图无变化1完全舍弃像在蒙版区重新文生图。如何设置对于小范围修复如修一根手指、去一个痘痘幅度要低0.2-0.4。因为原图结构大部分是好的只需要微调。对于大范围或结构性修改如换发型、换衣服幅度需要提高0.5-0.7。因为需要AI发挥更多创造力来生成新结构。对于我们的“修手”案例由于手部结构已完全崩坏需要AI重新生成合理结构幅度可以设为0.6-0.75。可以先从0.65开始试。仅蒙版区域勾选此选项。这会让AI的采样仅针对蒙版区域进行计算能节省显存、加快速度并且使生成内容更专注于蒙版内与周围环境的协调性交由“蒙版模糊”参数处理。对于绝大多数局部重绘都应该勾选。填充/原图/潜空间噪声这是“蒙版处理”的三种模式。填充fillAI会先猜测蒙版区域原本应该是什么根据周围像素然后在此基础上生成。适合修复背景、移除物体。原图original直接在蒙版区域的原图像素上添加噪声并重绘。适合修改物体本身如换衣服颜色、改表情。潜空间噪声latent noise用纯噪声填充蒙版区域再生成。创造性最强但与原图连贯性最差慎用。对于修手选择“原图”或“填充”都可以尝试。“原图”可能对手部残留结构利用更多“填充”可能更彻底地重新构建。步骤三生成与迭代点击生成。第一版效果可能不完美常见问题有融合生硬提高“蒙版模糊”值或轻微降低“重绘幅度”。手部依然畸形提高“重绘幅度”或在负面提示词中加强“bad hands, deformed”。颜色/光照不协调可以轻微调整提示词加入“consistent lighting with the whole image”或者使用“SD upscale”等插件后处理时统一色调。3.3 涂鸦重绘实战以“将白天场景改为黄昏”为例我们有一张白天街道的图片想通过涂鸦快速改为黄昏暖色调。步骤一上传与涂鸦绘制将原图拖入“图生图”标签页。切换到“局部重绘涂鸦”模式。选择一个大尺寸的软边画笔用橙色、红色、紫色在天空区域随意涂抹几笔。可以在地面也涂上一些暖色模拟夕阳照射的光影。记住涂鸦不是画画是“暗示”。步骤二关键参数设置详解重绘幅度涂鸦重绘的幅度通常需要比局部重绘更高因为你要改变的是整体氛围。建议从0.6-0.8开始尝试。太高0.85可能导致画面完全失控太低0.5可能颜色变化不明显。蒙版模式这里通常选择“重绘蒙版内容”并不勾选“仅蒙版区域”。因为你的涂鸦是色彩提示希望它能影响整个画面的色调调整。如果只想改变涂鸦部分比如只给一件衣服加花纹则可以勾选。提示词输入“beautiful sunset, golden hour, warm sunlight casting long shadows, cinematic lighting, street view”。这些词会和你的暖色涂鸦产生共鸣。步骤三生成与选择点击生成。由于随机性可以一次生成多张如4张。你会得到从“微微泛黄”到“浓烈晚霞”不同效果的作品。选择一张最符合你预期的如果觉得色调还不够可以将这次的结果作为新原图重复涂鸦过程进行二次强化这就是迭代创作。4. 高阶技巧与插件加持让控制力再上一个台阶掌握了基础操作你已经能解决80%的问题。但要成为高手下面这些技巧和插件能让你如虎添翼。4.1 ControlNet的梦幻联动锁定姿态与构图这是局部重绘的“终极外挂”。想象一下你想把一个人的站姿改为坐姿只用局部重绘几乎不可能因为姿势是全局的。这时就需要ControlNet。OpenPose如果你有另一张想要的坐姿参考图可以将其输入到ControlNet的OpenPose预处理器中提取骨骼姿态。然后在局部重绘时将这个姿态图作为约束。这样即使你只重绘了身体部分区域AI也会按照新的坐姿来生成保证人体结构合理。Canny/Depth如果你想改变背景但保持场景的轮廓或景深结构可以先用Canny边缘检测或Depth深度图提取原图的线条或空间信息然后在重绘时作为约束。这样AI生成的新背景会完美贴合原有的建筑轮廓或空间层次。操作流程在图生图页面展开ControlNet单元上传原图或姿态参考图选择对应的预处理器和模型如openpose, canny勾选“启用”和“像素完美”。然后在重绘蒙版时AI就会在遵守ControlNet约束的前提下进行创作。4.2 Inpaint模型的专项优化除了通用的大模型社区还有专门为修复和重绘训练的模型称为“Inpaint模型”。它们通常对物体边缘的融合、细节的连贯性有更好的表现。在WebUI中你可以在“Stable Diffusion模型”下拉框旁边选择“Inpaint模型”进行加载。当进行高难度修复如复杂纹理衔接、面部精细修复时使用这类专用模型效果往往更出色。4.3 多蒙版分层处理对于复杂的修改不要试图用一个蒙版解决所有问题。例如你想同时换掉人物的衣服和背景。更稳妥的做法是第一次重绘蒙版只覆盖衣服提示词描述新衣服生成。将第一次得到的结果作为新原图第二次重绘蒙版只覆盖背景提示词描述新背景生成。 这种分而治之的方法让AI每次只专注解决一个问题可控性大大增强也方便单独调整每一步的参数。5. 常见问题排查与避坑指南在实际操作中你会遇到各种各样奇怪的问题。这里我整理了一份“急救手册”。问题现象可能原因解决方案重绘区域与周围严重不融合有明显接缝1. 蒙版模糊值太低。2. 重绘幅度太高新内容与原图差异过大。3. 未勾选“仅蒙版区域”导致整图被轻微重绘焦点偏移。1. 逐步提高“蒙版模糊”8-16。2. 适当降低重绘幅度0.4-0.6。3.确保勾选“仅蒙版区域”。重绘区域内容完全扭曲不符合提示词1. 重绘幅度过高接近1。2. 提示词过于简略或与模型风格不搭。3. 蒙版区域太小缺乏生成上下文。1. 大幅降低重绘幅度0.3-0.5。2. 丰富提示词加入更具体的细节描述。3. 适当扩大蒙版区域包含更多周边像素。涂鸦重绘后整张图都变了面目全非重绘幅度设置过高AI过度“发挥”。将重绘幅度降至0.5以下先观察效果。涂鸦重绘更适合中低幅度下的色彩引导。人物重绘后肤色或光影与周围不协调1. 大模型本身肤色倾向强。2. 重绘时未考虑环境光。1. 在提示词中加入“consistent skin tone”、“same lighting as the original”。2. 使用“ADetailer”等面部修复插件后处理或生成后手动校色。想重绘的区域总是被AI“忽略”变化不大重绘幅度太低AI不敢修改原图。提高重绘幅度特别是对于结构性修改尝试0.7以上。使用ControlNet后重绘内容僵硬或扭曲ControlNet权重过高限制了AI的创造力。在ControlNet单元中降低“控制权重”如从1.0降至0.7-0.8或提高“起始控制步数”让AI在生成后期才受约束。最后几个私藏技巧“低幅度迭代”策略对于非常精细的修改如修复眼角细节可以设置重绘幅度为0.3连续生成2-3次每次以上一次结果为基准。这比一次性用高幅度更平滑可控。利用“VAE”改善色彩切换不同的VAE模型可以显著影响输出色彩的饱和度和对比度。如果重绘部分颜色发灰或不正尝试更换VAE如使用840000后缀的VAE。PNG Info是你的后悔药从SD生成的图片用“PNG Info”功能可以读取其生成参数。重绘前先把原图拖进去看看用了什么模型、提示词和参数尽量保持一致这是成功率最高的方法。局部重绘和涂鸦重绘绝不是简单的“修补工具”它们是通往精准控制AI绘画的桥梁。核心在于理解“重绘幅度”这个拨杆以及清晰地区分“替换”与“引导”两种思维模式。多练、多试、多分析失败案例你很快就能凭直觉判断出不同场景下该用哪个功能、参数该如何调配。当你能随心所欲地修改画面中的任何细节时AI才真正成为了你手中如臂使指的创作工具。