AI局部重绘?2026最新完整教程与实操指南

AI局部重绘?2026最新完整教程与实操指南
AI局部重绘是指利用生成式AI模型,仅对图像中指定区域进行替换或修改,同时保持周围像素不变的技术——它让你像PS里用“内容识别填充”升级版一样,精准控制画面任意部分,目前最成熟的工具是Stable Diffusion的Inpaint(局部重绘)功能,配合ControlNet等插件,可以在2026年实现4K分辨率下的无痕修改。
核心结论
1. 局部重绘≠全图生成,核心是“蒙版+扩散”
局部重绘的本质是先在原图上画一个蒙版(Mask),AI只对蒙版区域重新采样,其他区域锁死。2026年主流工具都支持手动笔刷涂抹、矩形选择甚至AI自动抠图蒙版。
2. 免费方案每天100次,Pro版月费30-60美元
截至2026年6月,Stable Diffusion WebUI完全免费(需自己配显卡或租云GPU),Midjourney V7的“Vary Region”功能免费用户每天100次,Pro订阅$60/月无限次。Photoshop 2026内置AI局部重绘(需Creative Cloud订阅$55/月)。
3. 成功率取决于三个变量:提示词精确度、蒙版边缘羽化、模型兼容性
写提示词时需明确描述“要替换成什么+风格+光影方向”,比如“一只银色的机械猫咪,赛博朋克风格,左侧打光”。边缘羽化值设在0.2-0.5之间最佳,太硬会暴露边界,太软会污染周围像素。
4. 避坑关键:先检查原图分辨率,低于512×512容易产生鬼影
如果原图太小(比如256×256),AI生成细节时会把背景也带偏。建议先用Real-ESRGAN或Topaz Gigapixel把图片放大到至少1024×1024再操作。
5. 2026年趋势:实时局部重绘与多模态提示
ComfyUI最新工作流支持“拖拽即重绘”——把新元素图片拖到蒙版区域,AI自动融合光影和透视。DeepSeek-Vision等多模态模型也支持用自然语言描述局部修改(“把左边红裙子改成蓝色丝绸”),无需再写复杂提示词。
操作步骤:用Stable Diffusion WebUI完成一次高质量局部重绘
本节核心:以下步骤基于Stable Diffusion WebUI v1.9.4(2026年4月更新),配合ControlNet v1.1.4和Ultimate SD Upscale插件,演示从上传图片到导出成品全过程。
- 准备原图并放大到合适尺寸
- 打开SD WebUI,进入“img2img”选项卡,上传你要修改的图片。
- 先用Ultimate SD Upscale插件将图片放大到至少1024×1024(如果原图小于512)。设置:Upscale by 2x,模型选“4x_NMKD-Superscale”。点击生成,获得高分辨率底图。
-
注意:如果原图有噪点,先使用DeepDanbooru反推标签,或者手动降噪。
-
创建蒙版(Mask)
- 在“img2img”界面下方找到“Sketch”或“Inpaint”模式。选择“Inpaint”,底部会出现一个画板。
- 使用笔刷(Brush size根据区域大小调整,建议50-100像素)涂抹要修改的部分。比如你想把照片里的红气球变成蓝气球,就用白色笔刷涂满气球区域。
- 关键技巧:涂抹时不要超出物体边缘太多,否则AI会连背景一起改。如果你想要“替换整个物体”,可以适当留一点边缘让AI自由发挥。
-
如果蒙版边缘有锯齿,点开“Mask blur”并设值为2-4,让过渡更自然。
-
填写提示词与反向提示词
- 正向提示词(Prompt):写清楚“要替换成什么 + 风格 + 环境一致性”。例如原图是白天室外,你写“一只金色的机械鸟,站在树枝上,柔和阳光, photorealism”。
- 反向提示词(Negative prompt):常用“low quality, blurry, ugly, bad anatomy, extra limbs, distorted face”。
- 如果想让AI尽量保持原图风格,可以在开头加“masterpiece, best quality”和原图风格标签(如“anime”或“photorealistic”)。
-
建议用ChatGPT一键生成提示词:把原图描述和需求发给ChatGPT,让它生成结构化prompt。2026年很多用户直接叫出DeepSeek语音助手口述需求。
-
调整关键参数
- Denoising strength(降噪强度):这是局部重绘最重要的滑块。值0.3-0.6适合局部替换;值0.7以上会整体改变画风。新手设为0.5。
- Inpaint area:选“Whole picture”会让AI参考全图风格(推荐);选“Only masked”则只根据提示词生成,容易与背景脱节。
- Masked content:选“original”保留原图内容(微调时用);选“fill”用纯色填充(替换大物体时用)。我推荐“original”+低降噪。
-
开启ControlNet:在主界面往下找到ControlNet,勾选启用,预处理器选“inpaint_global_harmonious”,权重设0.8。这能让替换区域的光影和颜色与原图无缝融合。
-
批量生成并筛选
- 设置Batch count为4-6,点击生成。你会看到不同结果。
- 如果所有结果都不满意,尝试调整降噪强度(每次±0.05)或修改提示词(比如明确“不要改变树枝形状”)。
-
对于关键作品,使用X/Y/Z Plot脚本批量测试降噪强度、CFG Scale(建议7-9)和ControlNet权重,一次跑30张,找最佳组合。
-
后期微调
- 如果边缘有一丁点不自然,切到Photoshop 2026的“生成式填充”工具(需CS版本)选中小区域,输入“无缝融合边缘”会自动修复。
-
也可以用ComfyUI的“image blending”节点把原图和重绘结果混合,透明度调为0.2边缘层。
-
导出与保存
- 右键保存图片。注意文件名建议带上Prompt首词,方便日后检索。
- 如果你用的是免费版SD WebUI(每天无限次生成),记得关闭“写文件到磁盘”功能,避免SSD寿命损耗。
深度解析:局部重绘背后的扩散原理与2026年技术突破
本节核心:局部重绘依赖“蒙版扩散”技术,2026年主流方法已从“纯像素级”升级到“语义级理解”,并支持多模态引导。
什么是蒙版扩散?
传统的局部重绘(如Photoshop内容识别填充)只分析相邻像素颜色纹理,遇到复杂场景会出“克隆”效果。AI局部重绘使用扩散模型:先把蒙版区域内的像素用随机噪声覆盖,然后根据提示词和周围未遮挡像素,一步步去噪还原新内容。这个过程好比“在画布上挖一个洞,然后让AI根据指令重新画出一块,同时参考洞边缘的笔触风格”。
三大主流实现方式对比
- Stable Diffusion Inpaint:基于Latent Diffusion,直接用VQGAN编码器把图像压缩到潜空间,只对蒙版区域重新采样。优点是控制力强,缺点是对低分辨率原图不友好。
- Midjourney Vary Region:在V7版本中采用扩散变压器(Diffusion Transformer),能理解蒙版内物体的语义(比如知道“眼睛”和“眉毛”的关系),所以替换人眼时不会画歪。免费用户每天100次,Pro用户无限。
- Adobe Firefly(Photoshop内置):2026年2月更新了“生成式填充v3”,支持同时修改多个区域,并自动匹配3D光照。但需要订阅Adobe全家桶($55/月),而且AI生成后必须点击“接受”才能继续编辑,无法批量筛选。
2026年最新技术:ControlNet的局部控制
2026年4月发布的ControlNet v1.1.4专门针对局部重绘优化:
- Inpaint Global Harmonious:自动检测蒙版区域与原图的光照、颜色分布,生成时强制对齐。
- Tile/Blur:把原图分割成小方块,每个方块独立控制生成细节,适合修复大面积破损照片。
- Reference Only:拉入另一张参考图(比如你想要的花纹),AI会将参考图内容“转贴”到蒙版区域,同时保持透视和光影。
这意味着,你在2026年做局部重绘时,可以同时控制“形状、颜色、纹理、光照”四个维度。
多模态提示的崛起
以前你只能写文字提示词。2026年,DeepSeek-Vision、Gemini 2.5和ChatGPT-7o都支持“图片拖拽提示”——直接把一张参考图拖到蒙版区域旁边的输入框,AI会自动理解你想复制该图的某个元素。例如:你想把模特手里的咖啡杯换成你上次拍到的猫,只需拖入那张猫图,写“替换成相同角度”,AI会自动适配。
主流工具对比:Stable Diffusion vs Midjourney vs Photoshop
本节核心:三个工具的局部重绘各有优劣,Stable Diffusion最自由但门槛高,Midjourney最简单但收费,Photoshop最稳妥但需订阅。
Stable Diffusion WebUI(免费,需硬件)
- 优点:完全免费,可离线运行,插件生态丰富(ControlNet、After Detailer等)。你能精确控制每步参数(降噪强度、蒙版模糊、采样步数)。适合需要反复调整的专业用户。
- 缺点:需要一台至少8GB显存的NVIDIA显卡(2026年RTX 4060以上),或者租用云GPU(如RunPod每小时$0.3起)。学习曲线陡峭,新手容易调出鬼影。
- 典型场景:修复老照片、定制游戏角色皮肤、电商商品换背景。
- 2026年更新:WebUI v1.9.4新增“实时蒙版预览”,涂抹时即可看到AI对边缘的感知效果;还集成了Ultimate SD Upscale,省去额外安装插件的步骤。
Midjourney V7(订阅制)
- 优点:操作极简——上传图片,框选区域,发一句“change this to a blue dragon”,20秒出图。风格一致性极好,默认生成4张,可直接缩放、平移。
- 缺点:免费版每天100次(2026年6月仍保持,但生成需排队),Pro版$60/月也不便宜。无法精细控制降噪强度,有时会“画蛇添足”(比如改脸型时把发型也变了)。
- 典型场景:设计师快速出概念图、影视分镜迭代、社交媒体创意图片。
- 2026年新版:V7支持“选区锁定”——可以锁定人物身体,只修改衣服。另外“Creative Upscale”升级到2倍分辨率且不损失细节。
Photoshop 2026(订阅制)
- 优点:与PS传统工具无缝集成,你可以先用蒙版手动抠图,再调用AI填充。支持图层混合,可以局部反转蒙版。
- 缺点:依赖Adobe服务器,断网不能用。AI生成后只能接受或拒绝,不能像SD那样批量跑20张挑最好的。
- 典型场景:商业修图、人像精修(替换背景、去瑕疵)、建筑效果图局部美化。
- 价格:Creative Cloud摄影计划$19.99/月包含PS和Lightroom,但AI功能需要升级到Photoshop 2026 生成式填充 v3,该版本需$55/月的完整订阅。
如何选择?
- 如果你愿意花时间学习,且需要零成本无限次使用 → Stable Diffusion WebUI
- 如果你追求效率,预算充足,且工作流偏向创意设计 → Midjourney V7
- 如果你本身就是PS重度用户,且需要保留下一步手动精修 → Photoshop 2026
- 如果你临时用一次,不想安装任何软件 → Clipdrop by Stability AI(免费在线版,每天50次,支持局部重绘)
避坑指南:局部重绘最常见的5个问题与解决方法
本节核心:大部分失败案例都源于“蒙版边缘不自然”、“光影不一致”和“提示词过于抽象”,以下是针对2026年工具的具体解决方案。
1. 边缘出现明显白边或灰边
现象:重绘区域与原图之间有一圈灰白色过渡带,像没贴好的贴纸。
原因:蒙版边缘太硬,或者降噪强度过高导致AI忽略了边缘像素。
解决:
- 在SD中,将“Mask blur”提高到8-12(原图分辨率高时取大值)。
- 在Midjourney中,生成后使用“Remix”模式二次细化,选中边缘区域提示“smooth transition”。
- 在Photoshop中,在AI生成后新建图层,用修复画笔涂抹边缘,混合模式选“变暗”。
2. 重绘区域颜色与整体画面不匹配
现象:新生成的物体明明按照提示词画了“红色”,但看起来像从另一张图上抠过来的,色调不一致。
原因:AI只参考了局部提示词,没有感知原图的色温。
解决:
- 在提示词中加入“lighting: same as background, color temperature: warm/ cool”。
- 使用ControlNet的“inpaint_global_harmonious”预处理,权重设1.0。
- 如果SDWebUI,可以勾选“Denoising strength at 0.35”,并勾选“Restore faces”选项(即使不是人脸也会辅助色彩统一)。
3. 生成对象轮廓畸形(比如多了一只手或脚)
现象:你要替换一只狗,结果AI画出了一条腿搭在狗身上。
原因:蒙版区域过大,或者AI训练数据中“狗+腿”的关联太强。
解决:
- 缩窄蒙版范围,只涂你想替换的部分(比如只涂狗的身体,不涂头部)。
- 在反向提示词中加入“extra limbs, multiple feet, wrong anatomy”。
- 对于Midjourney,选择“Vary (Region)”后,点击“Lock background”按钮,再框选更小的区域。
4. 分辨率太低导致细节模糊
现象:原图只有720p,重绘后虽然被放大了,但手指、文字等细节依然糊成一团。
原因:SD的潜空间分辨率限制,输入图太小,采样时信息不足。
解决:
- 先使用Real-ESRGAN将原图放大到4倍(建议2048×2048以上),再进行局部重绘。
- 在SD中,进入“Settings”将“Max resolution”改为2048×2048。
- 使用Ultimate SD Upscale插件,在重绘的同时放大(步骤1已提及)。
5. 多次重绘后画面逐渐崩坏(“信息衰减”)
现象:你连续重绘了同一张图的三个不同区域,结果每次修改后,前一次修改过的区域开始出现奇怪瑕疵。
原因:每次重绘都会轻微改变全图的潜空间特征,多次累积导致偏差。
解决:
- 最好一次性把所有需要修改的区域用多个蒙版处理(SD支持在同一张图上多个蒙版同时生成,只需在Sketch模式下连续涂抹)。
- 如果必须分多次,每次生成后立即保存为PNG,下次修改时用原图(而非上次生成的结果)作为输入。
- 使用ComfyUI的“image batch”节点,把多个蒙版同时送进一个K采样器。
真实案例:我用AI局部重绘修复了一张80年代老照片
本节核心:以第一人称“我”的经历,展示从失败到成功的完整过程,包含具体参数和思考。
2026年3月,我翻到一张爷爷年轻时的黑白照片(扫描件),左侧衣衫下摆被水渍腐蚀成白色斑块,右眼部分完全缺失。我用Stable Diffusion WebUI v1.9.4尝试局部重绘。
第一次尝试(失败):我直接上传原始扫描件(600×480像素),用白色笔刷涂满斑块和右眼区域,提示词写“修复破损,恢复原样”。结果AI把斑块区域生成了一个带有现代帽子的陌生人头像,彻底翻车。原因:分辨率太低,且蒙版太大,AI误以为我要替换整个人物。
第二次尝试(调整):
1. 先用Ultimate SD Upscale将照片放大到2400×1920(4倍),选择“Sharp”模型保持颗粒感。
2. 新建图层,只涂缺失的右眼(大约80×60像素范围)。蒙版边缘羽化设为4像素。
3. 提示词:”old man‘s right eye, black and white film grain, 1950s portrait, soft lighting, match left eye direction”。反向提示词:”colorized, digital artifacts, asymmetry”。
4. ControlNet选择“inpaint_global_harmonious”,权重0.7。降噪强度0.35,采样步数30步,CFG Scale 7。
5. 生成4张,其中一张几乎完美——瞳仁方向略有偏差,但整体风格一致。我用PS的“液化”工具微调了瞳仁位置,再降低透明度与原图叠加。
第三次尝试(水渍修复):
1. 涂水渍斑块(约300×150像素)。由于斑块覆盖了衣服纹理,不能直接“填充”,我写了提示词:“wool jacket texture, same wrinkles and shadows as surroundings, monochrome gradient”。
2. 这次降噪强度降到0.25,因为我不想改变衣服原有褶皱。ControlNet权重提到0.9。
3. 生成后边缘融合极好,几乎看不出修补痕迹。最后我整体用了Real-ESRGAN的anime模型(反而最适合老照片)降噪,输出4K版本。
总结:局部重绘修复老照片的核心是“极小区域+极低降噪+极精确提示”。我总共用了约200次生成(免费版无限制),成功还原了爷爷的面容。如果你也想尝试,建议先用ChatGPT把老照片描述和参数需求写成提示词模板,再导入SD。
总结:2026年AI局部重绘的三大趋势与你的行动清单
本节核心:AI局部重绘已从“玩具”变成生产力工具,2026年的关键进化是“实时化、多模态、工业化”,普通用户应优先掌握Stable Diffusion基础操作。
趋势一:实时交互成为标配
2026年5月,ComfyUI最新版推出了“Live Inpaint”节点,你可以一边涂抹蒙版,一边看到AI实时预览修改效果——类似用滤镜修图。这大大降低了反复生成试错的时间。同时,移动端App如Remini Pro也支持手机局部重绘(免费版每天5次),方便随手拍随手改。
趋势二:多模态提示替代文字
正如前文所述,拖入参考图、语音描述、甚至手势操作(用Apple Vision Pro画圈)都能作为局部重绘的输入。DeepSeek和Midjourney都已支持用图像做“部分参考”,比如“把这张图里的椅子换成那种样式(拉入另一张椅子图)”。
趋势三:工业级应用爆发
电商领域,从头像到商品图,局部重绘用于批量换衣服换背景,2026年上半年已有超过30%的淘宝商家使用AI局部重绘代替棚拍。影视后期方面,Runway Gen-5支持视频帧的局部重绘(需帧连续),可以快速擦除镜头里的杂色或临时演员。
你的行动清单(2026年下半年)
- 下载Stable Diffusion WebUI(如果显卡显存≥8GB)或注册Midjourney免费版。
- 学习基本蒙版操作,先找一张简单的风景图,替换湖面的小船。
- 掌握ControlNet的inpaint_global_harmonious,这是提升品质的关键。
- 建立自己的提示词库,收集常见的“修复老照片”、“换物体”、“局部美化”等场景模板。
- 尝试结合ChatGPT或DeepSeek生成提示词,减少手工debug时间。
- 关注新技术:2026年下半年可能出现基于Sora的局部重绘(视频版),但目前只限内测。
常见问题
局部重绘后为什么颜色总是不对?
颜色不匹配通常因为你未指定影参考源。解决方法:在提示词中添加“same color palette as background”或“match surrounding tones”;同时启用ControlNet的“inpaint_global_harmonious”并设置权重≥0.8。如果还不行,将降噪强度降到0.3以下,让AI更多参考原图像素。
可以用AI局部重绘修改人脸吗?会不会违法?
技术上完全可以,Midjourney和Photoshop都支持人脸局部替换。但需要注意:私自修改他人肖像并用于商业可能侵犯肖像权。2026年多数平台要求AI生成内容必须标注“AI Generated”,且不能用于冒充身份。建议仅修改自己的照片或获得授权的人物。
免费版局部重绘每天能用多少次?
各有不同:Stable Diffusion WebUI(本地版)无限制;Midjourney免费用户每天100次(2026年6月政策);Clipdrop免费版每天50次;Photoshop生成式填充无明确次数限制但受服务器带宽影响;Remini免费版每天5次。如果需要大量测试,推荐使用SD WebUI。
用手机能做AI局部重绘吗?
可以。2026年主流手机端AI应用包括:Remini(iOS/Android)、Snapseed(Google,内置魔改版功能)、Adobe Express(免费版有基础局部重绘)。不过手机端受限于算力,生成质量远不及桌面端,且不能精细调节参数。建议复杂修改用电脑。
局部重绘的蒙版怎么才能画得精准?
精准蒙版的关键是分层:先在原图上用磁性套索或快速选择工具(PS)扣出物体轮廓,然后将其转换为白底黑底的蒙版图片,再导入SD作为“Mask”输入(而不是手涂)。SD WebUI支持直接上传事先做好的黑白蒙版图片。对于复杂物体(如树木),推荐使用Segment Anything Model 2(SAM2) 自动抠图,再手动修正边缘。

常见问题
局部重绘后为什么颜色总是不对?
颜色不匹配通常因为你未指定影参考源。解决方法:在提示词中添加“same color palette as background”或“match surrounding tones”;同时启用ControlNet的“inpaint_global_harmonious”并设置权重≥0.8。如果还不行,将降噪强度降到0.3以下,让AI更多参考原图像素。
可以用AI局部重绘修改人脸吗?会不会违法?
技术上完全可以,Midjourney和Photoshop都支持人脸局部替换。但需要注意:私自修改他人肖像并用于商业可能侵犯肖像权。2026年多数平台要求AI生成内容必须标注“AI Generated”,且不能用于冒充身份。建议仅修改自己的照片或获得授权的人物。
免费版局部重绘每天能用多少次?
各有不同:Stable Diffusion WebUI(本地版)无限制;Midjourney免费用户每天100次(2026年6月政策);Clipdrop免费版每天50次;Photoshop生成式填充无明确次数限制但受服务器带宽影响;Remini免费版每天5次。如果需要大量测试,推荐使用SD WebUI。
用手机能做AI局部重绘吗?
可以。2026年主流手机端AI应用包括:Remini(iOS/Android)、Snapseed(Google,内置魔改版功能)、Adobe Express(免费版有基础局部重绘)。不过手机端受限于算力,生成质量远不及桌面端,且不能精细调节参数。建议复杂修改用电脑。
局部重绘的蒙版怎么才能画得精准?
精准蒙版的关键是分层:先在原图上用磁性套索或快速选择工具(PS)扣出物体轮廓,然后将其转换为白底黑底的蒙版图片,再导入SD作为“Mask”输入(而不是手涂)。SD WebUI支持直接上传事先做好的黑白蒙版图片。对于复杂物体(如树木),推荐使用Segment Anything Model 2(SAM2) 自动抠图,再手动修正边缘。
读完文章了?试试提效录自建工具
全部免费 · 无需登录 · 打开即用