阿里和华东师范大学团队近日推出了一款名为 “画家”（Painter）的 AI 工具。Painter 能够在图像的局部添加新元素或改变原有图像，几乎兼容所有的文生图（text-to-image）模型。用户只需输入提示词并在图像上绘画，即可实现所需效果。例如，输入书的提示词并在桌子上绘画，桌子上就会出现一本书；输入皇冠提示词并在猫头上绘画，猫头上就会出现皇冠。即使是复杂的要求，如让人物的一半头发变红色，另一半变蓝色，Painter 也能准确实现。该工具需要下载代码到本地运行，在线 Demo 将很快上线。
例如，MimicBrush 是阿里巴巴、香港大学和蚂蚁集团的研究人员推出的 AI 图像编辑融合框架，允许用户通过简单的操作，在源图像上指定需要编辑的区域，并提供一个包含期望效果的参考图像进行图片编辑。MimicBrush 能够自动识别和模仿参考图像中的视觉元素，将其应用到源图像的相应区域，支持如对象替换、样式转换、纹理调整等图像编辑操作。
此外，ReplaceAnything 是由阿里巴巴智能计算研究院推出的一款开源 AI 图像内容替换框架，能够实现对照片或图像中物体的智能替换。用户可以通过简单的操作，只需框选想要保留的图像部分，输入提示词或描述来替换想要更改的图像区域，如更换人物发型、服装、背景等。
Painter 的应用场景非常广泛，几乎涵盖了所有需要图像编辑的领域。在产品设计中，设计师可以使用 Painter 修改产品设计图，例如改变产品的颜色、纹理或形状，以匹配设计概念或满足特定需求。在时尚界，Painter 可以用来改变服装的图案、颜色或风格，帮助设计师和营销人员预览不同设计选项。在美容和肖像编辑方面，个人用户可以利用 Painter 来美容肖像，例如改变发型、妆容或肤色，而无需专业的图像编辑技能。
从技术原理上看，Painter 利用了深度学习和图像识别技术。其核心算法能够分析用户输入的提示词和绘画区域，自动生成符合要求的图像元素。这一过程涉及到图像处理和生成对抗网络（GANs）技术，使得生成的图像在视觉上逼真，而且在细节上高度精确。Painter 的技术优势还在于其兼容性。无论用户使用的是哪种文生图模型，Painter 都能集成并发挥其功能。