跳到正文
阿里雲開發者社區 AI·· 8 天前AI 評分62

GPT Image 局部改圖:遮罩為何容易出現黑塊,如何用畫圈標註配合提示詞

AI局部改图:遮罩为什么容易出黑块,画圈标注加提示词怎么写

AI 導讀

GPT Image 2.6 和 GPT Image 2.5 支援用圖上標註配合提示詞進行局部改圖,文章並以客廳圖片示範修改抱枕、沙發旁的小桌和落地燈。實測顯示遮罩可能出現黑塊,標註也不是硬邊界,圈外細節仍可能一併改動;文中建議按標註形狀描述對象、説清修改內容,並檢查修改邊緣。

正文

2026-11-14 5

版权

版权声明:

本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写 侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

简介: GPT Image这类模型的遮罩容易出黑块,改动也会越过边界。本文用一张客厅图片实测另一种做法:在图上画圈、画框做标注,再用一句提示词说明改成什么,并总结提示词的写法。

用AI改图,难的往往不是改,而是让模型知道改哪里。客厅里摆着四个抱枕,你说「换成绿色的抱枕」,它可能改错一个,也可能四个全改了。

要告诉模型「改哪里」,常见的有两种办法:一种是传统的遮罩(mask),一种是直接在图上画圈、画框做标注。下面先说遮罩在GPT Image这类模型上的问题,再用一张客厅图片实测标注的做法和提示词写法。

遮罩:文档怎么说,实际会怎样

用过Stable Diffusion或Photoshop的人都熟悉局部重绘(inpainting):在图上涂一块遮罩,只重画涂到的像素,遮罩外一个像素都不动。

GPT Image系列模型的编辑接口也能接收遮罩,规则是:遮罩是一张和原图同尺寸的PNG,完全透明(alpha为0)的地方是要改的区域。但OpenAI的图片生成指南里也写着,GPT Image的遮罩完全靠提示词起作用,模型不一定严格按遮罩的形状来改。也就是说,它和传统的局部重绘不是一回事。

我们测试时,遇到最多的问题是:遮罩的地方会变成一块黑。

在OpenAI开发者论坛上,也有开发者反映遮罩的位置返回了一整块黑色。有开发者发现,改用完全不透明的黑白遮罩(要改的地方涂黑,不改的地方涂白),可能能避开黑块,但也达不到只重绘遮罩区域的效果:模型只把遮罩当作参考,改动可能越过边缘,遮罩外的地方也可能有细微变化。而且这种做法和官方文档不一致,文档里写的是遮罩上透明的地方才是要改的。论坛里OpenAI员工的回复和文档也有矛盾,各家第三方平台对遮罩该怎么用,也是众说纷纭。

所以在这类模型上,遮罩给不了硬边界,还多了出黑块的风险。

标注:把要改的地方直接画在图上

另一种做法更直观:在图片上用红色画圈、画框或画箭头,把要改的东西标出来,再在提示词里说「圆圈里的……改成……」。

标注和遮罩一样,对模型来说也只是提示,不是硬边界。区别是,标注就画在图上,你指的是哪儿一眼就看得到;一次修改里还可以同时用圆圈、方框和箭头,在提示词里分别说明。生成出来的图里,红色标注会被去掉。

GPT Image 2.6和GPT Image 2.5支持这种标注。下面是一次完整的实测。

实测一:一次改两处

我们想改两处:黄抱枕换成绿的,沙发右边的小边桌换成一盆植物。所以抱枕画了个圆圈,边桌画了个方框。

image.png

提示词用标注的形状来指代要改的东西:

Change the circled yellow pillow to a dark green velvet pillow, and replace the boxed side table with a small potted plant.

(意思是:把圆圈里的黄抱枕换成深绿色丝绒抱枕,把方框里的边桌换成一小盆绿植。中文提示词也可以。)

结果,左边是原图,右边是改后的图:

before-after-1.png

两处都改了。绿色丝绒抱枕放在原来黄抱枕的位置,白色花盆里的绿植站在原来边桌的地方。房间其余部分,落地灯、另外几个抱枕、墙上的画和地板,看起来都没变。红圈和红框也没有留在结果里。

实测二:在结果上接着改,去掉一样东西

房间里有了盆栽,左边的落地灯就显得多余了。去掉一样东西和改一样东西的做法一样:圈出来,然后说「去掉」。

这次在第一次的结果上标注,用手画的线把整盏灯圈了一圈,从灯罩到灯脚:

marked-lamp.png

提示词很短:

Remove the circled floor lamp.

(意思是:去掉圈里的落地灯。)

左边是第一次的结果,右边是第二次:

before-after-2.png

灯没了,后面的墙和踢脚线补得很干净。不过仔细看墙角的地板:灯的插头和沿着踢脚线走的电线也一起没了,它们其实在圈外一点点。模型把它们当成了灯的一部分。这里正合心意,但也说明标注是很强的提示,不是一条硬边界。

从原图到这里,改了两次,写了两句短提示词。

标注改图的提示词怎么写

  • 用形状指代:「圆圈里的抱枕」「方框里的桌子」「箭头指着的东西」。用了不同的标注,模型就分得清哪句话对应哪里。
  • 说清改成什么:「深绿色丝绒抱枕」比「换个颜色」好用。要去掉东西,写「去掉」通常就够了,空出来的地方模型会按周围补上。
  • 一处改动一句话:两处标注,就写两个清楚的分句。
  • 圈得比东西稍大一点:我们圈落地灯时,灯罩和灯脚周围都留了空。
  • 看看边缘:用之前,把结果和原图放大对比一下。

几点经验

  • 标注用红色,被标的东西最好不是大红色:不然模型分不清哪些是标注、哪些是原图。
  • 一次改几处也可以:实测一就是一次改两处。如果某一处总改不好,就单独改它。
  • 在结果上接着改,别回到原图:像实测二那样一步步叠上去,前面满意的改动不会丢。
  • 标注以外不是逐像素不变:通常很接近,但模型是重新生成整张图,不会锁住其余部分。对细节要求高的地方,用之前看一下边缘。

來源:阿里雲開發者社區 AI · developer.aliyun.com