阿里通义实验室最新开源的ACE++ —— 这个被称为“AI图像编辑革命”的工具,彻底颠覆了传统设计流程!只需一张图,无需训练,就能实现角色换装、品牌迁移、场景重构。
ACE是什么?
ACE++ 是一款基于扩散模型的图像生成与编辑工具,支持通过自然语言指令或视觉参考,实现高质量、高一致性的图像创作。其核心能力包括:
- 一致性生成:保持人物肖像、主题物体的跨场景一致性(如虚拟试穿、品牌标志迁移);
- 精准编辑:局部重绘、风格转换、元素增减,且不破坏原图结构;
- 多模态输入:支持文本指令、参考图像、掩码等多种条件组合,灵活适配复杂需求。
ACE++ 的主要功能
- 高质量人物肖像生成:通过 ACE++ Portrait 模型,可以根据用户输入的指令生成高质量的人物肖像,同时保持人物面部特征和风格的一致性。
- 主题一致性保持:ACE++ Subject 模型可以在不同的场景中生成具有特定主题的图像,例如将某个标志或物体放置在不同的背景中。
- 局部图像编辑:ACE++ LocalEditing 模型支持对图像的特定区域进行重新绘制或修改,同时保留原有图像的结构和风格。
- 风格化编辑:用户可以通过指令对图像进行风格化处理,例如将普通照片转换为艺术风格或特定的视觉效果。
- 上下文感知内容填充:根据图像的上下文信息,智能地填充缺失或需要修改的部分,确保生成的图像在视觉上自然且一致。
- 指令驱动的交互:用户可以通过简单的自然语言指令来控制图像的生成和编辑过程,例如指定生成特定风格的人物肖像或要求在图像中添加、删除或修改某个元素。
- 多任务支持:ACE++ 支持多种图像处理任务,包括虚拟试穿、标志粘贴、照片修复、电影海报编辑等。
三大Lora模型介绍
1. comfyui_local_lora16.safetensors : 主要用作本地蒙版编辑内容,涂抹区域即可增删物体
2. comfyui_portrait_lora64.safetensors: 主要用作人物肖像迁移
3. comfyui_subject_lora16.safetensors: 主要用作物体特征保留迁移,商品 logo 迁移等
三个模型分别对应不同的使用场景,下面会依次对三种模型进行测试,我们下载对应模型放在 Comfyui>>models>>loars
目录下即可
模型下载:(尾部有下载)
核心能力演示
电商场景Logo打印
使用lora模型:comfyui_subject_lora16.safetensors
参考图:
目标场景迁移
使用lora模型:comfyui_subject_lora16.safetensors
人物特征迁移
使用lora模型:comfyui_portrait_lora64.safetensors
局部编辑
使用Lora模型:comfyui_local_lora16.safetensors
参考图:
以上就是对 ali 新发布的ACE++ 的简单使用了,不得不说阿里的模型发布真的是实际生产力服务的啊,想一想这一套模型下来,在阿里自己的电商领域得发挥多大的价值哇