最近 Flux 官方虽然开源了风格参考模型:Redux,但是 Redux 和 IPAdapter 还是有些区别的,Redux 不依赖于提示词,生成的图像会保留原图的风格和构图。简单来讲就是 Redux 不可控,IPAdapter 可控。
今天介绍的 Flux-IPAdapter 模型是目前用过的效果最好的一个 Flux-IPAdapter 模型,可以真正填补 Flux 中关于 IPAdapter 的一部分了。效果相当不错!Flux下的 Ipadapter一直都不大好用,就算XLabsAI发布了IPA V2版本,效果也是差强人意,今天去测试了一下,发现效果挺不错,风格迁移能力好用。IPAdapter 则是一种风格参考,至于最终的构图是可以根据提示词来进行控制的。
ComfyUI的IPAdapter插件基础使用教程:https://www.2020web.cn/924.html(用于SD1.5模型ipadapter)
一、IPAdapter-Flux介绍:
IPAdapter Flux是专为Fllux AI绘画模型设计的适配组件,主要用于实现图像风格一致性迁移和创作控制。该工具通过集成ControlNet与IPAdapter模型,显著提升了FLUX模型在内容生成过程中对参考图像风格的捕捉能力。
二、ComfyUI-IPAdapter-Flux安装
git clone https://github.com/Shakker-Labs/ComfyUI-IPAdapter-Flux
2.秋叶启动器:
在版本更新–安装新扩展处安装。输入:ComfyUI-IPAdapter-Flux
三、模型安装(文末网盘有合集)
模型1下载:ip-adapter.bin
https://huggingface.co/InstantX/FLUX.1-dev-IP-Adapter/tree/main
模型安装路径:
ComfyUI/models/ipadapter-flux
模型2下载:siglip-so400m-patch14-384.safetensors
https://huggingface.co/google/siglip-so400m-patch14-384/tree/main
模型安装路径:
modelsclip_vision
注:这里有一个小坑,如果大家有遇到可以参考
siglip-so400m-patch14-384 这个模型好像放在 clip_vision下没用,该模块读取Hugging Face缓存目录的路径,而不是clip_vision文件夹。
应该放入Hugging Face缓存路径(文末网盘有具体路径指引)
三、使用介绍
该插件使用起来不复杂,节点未知如下:
核心就两个节点,没啥难度,默认强度0.75,不需要调整。
示例:
四、总结
以上就是这个FLux Ipadapter的使用介绍了,这次效果不错,比我预期的好。