组件

说明

图像编码器

使用 CLIP Vision 模型提取参考图像的视觉特征

解耦交叉注意力

将图像特征与文本特征分离处理，避免互相干扰

特征注入

将图像特征注入扩散模型的交叉注意力层，引导生成方向

轻量适配

仅训练适配器参数，不修改主模型权重

分类

侧重点

代表模型

适用底模

说明

IP-Adapter（基础版）

通用图像参考，风格+内容混合

ip-adapter_sd15 / ip-adapter_sdxl

SD 1.5 / SDXL

最早期版本，效果基础

IP-Adapter Plus

更强的图像理解，细节保留更好

ip-adapter-plus_sd15 / ip-adapter-plus_sdxl

SD 1.5 / SDXL

推荐版本，质量显著提升

IP-Adapter Plus Face

专精面部特征保持和迁移

ip-adapter-plus-face_sd15 / ip-adapter-plus-face_sdxl

SD 1.5 / SDXL

换脸、人物一致性首选

IP-Adapter Full Face

全脸特征提取，更完整的面部保持

ip-adapter-full-face_sd15

SD 1.5

面部细节最完整，但计算量更大

IP-Adapter FaceID

基于人脸 ID 特征，身份保持极强

ip-adapter-faceid_sd15 / ip-adapter-faceid_sdxl

SD 1.5 / SDXL

需要 InsightFace 提取人脸特征

IP-Adapter FaceID Plus

FaceID 升级版，结合 Plus 优势

ip-adapter-faceid-plus_sd15 / ip-adapter-faceid-plus_sdxl

SD 1.5 / SDXL

当前面部一致性最佳方案

IP-Adapter FaceID Portrait

专精肖像生成，保持人物身份

ip-adapter-faceid-portrait_sd15

SD 1.5

肖像画、证件照风格

IP-Adapter SDXL Refiner

配合 SDXL Refiner 使用

ip-adapter_sdxl_refiner

SDXL

SDXL 双模型流程专用

IP-Adapter Flux

适配 Flux 架构

ip-adapter-flux（社区适配版）

Flux

Flux 生态快速跟进中

InstantID（IP-Adapter 扩展）

单图高保真换脸，无需训练

instantid 节点包

SDXL

2024 爆款，一张图实现高质量换脸

PhotoMaker（同类技术）

多图堆叠生成特定人物

photomaker 节点包

SDXL

用 3–5 张图生成一致人物形象

模型

面部保持

风格迁移

计算开销

使用难度

推荐场景

IP-Adapter Plus

⭐⭐⭐

⭐⭐⭐⭐⭐

低

简单

风格迁移、构图参考

IP-Adapter Plus Face

⭐⭐⭐⭐

⭐⭐⭐

中

简单

面部特征参考、换脸

IP-Adapter FaceID

⭐⭐⭐⭐⭐

⭐⭐

中

中等（需 InsightFace）

严格身份保持、多图一致性

IP-Adapter FaceID Plus

⭐⭐⭐⭐⭐

⭐⭐⭐

中

中等

身份+风格兼顾，当前最优

InstantID

⭐⭐⭐⭐⭐

⭐⭐⭐

高

中等

单图高保真换脸、肖像生成

PhotoMaker

⭐⭐⭐⭐⭐

⭐⭐

高

中等（需多图）

自定义虚拟人物、角色一致性

技术

原理

特点

与 IP-Adapter 区别

IP-Adapter

图像特征注入交叉注意力

轻量、灵活、可叠加

基础图像参考方案

LoRA

微调模型权重

精准控制特定概念，需训练或下载

LoRA 是"修改模型"，IP-Adapter 是"临时参考"

ControlNet

结构控制（姿态/边缘/深度）

控制构图结构，不控制外观

ControlNet 管"结构"，IP-Adapter 管"长相/风格"

Reference Only

纯参考图特征

简单直接，但控制弱

IP-Adapter 效果更强更稳定

InstantID

基于 IP-Adapter + InsightFace

面部保持极强，单图即可

IP-Adapter 的面部特化增强版

FaceSwap（ReActor/Roop）

直接替换面部像素

换脸效果直接，但可能不自然

IP-Adapter 更融入生成流程，更自然

节点

功能

IPAdapterModelLoader

加载 IP-Adapter 模型

IPAdapterAdvanced

高级应用，支持权重、起始步数调节

IPAdapterBatch

多图参考（风格混合）

IPAdapterFaceID

FaceID 专用，需配合 InsightFace

IPAdapterTiled

大图分块处理，降低显存需求

InstantIDFaceAnalysis

InstantID 面部分析

InstantIDApply

InstantID 换脸应用

技巧

说明

权重调节

IP-Adapter 权重 0.5–1.0，过高会导致过度模仿、失去创意

起始/结束步数

可设置 IP-Adapter 在哪些采样步骤生效，前期控制后期放开

参考图预处理

面部类建议裁剪为正脸、清晰、无遮挡的图像

多图叠加

使用 Batch 模式上传 2–3 张参考图，实现风格混合

与 ControlNet 配合

IP-Adapter 管"长什么样"，ControlNet 管"什么姿势"，互不冲突

与 LoRA 配合

LoRA 增强细节，IP-Adapter 保持参考特征，效果更精准

FaceID 需 InsightFace

使用 FaceID 系列需先安装 InsightFace 并下载对应模型

InstantID 显存要求

InstantID 计算量较大，建议 12GB+ 显存

Flux IP-Adapter

Flux 生态的 IP-Adapter 适配仍在快速迭代，关注社区更新

模型类型

存放路径

IP-Adapter 模型

ComfyUI/models/ipadapter/

CLIP Vision 模型

ComfyUI/models/clip_vision/

InsightFace 模型（FaceID/InstantID）

ComfyUI/models/insightface/ 或系统目录

平台

地址

说明

Hugging Face（腾讯 ARC 官方）

huggingface.co/h94/IP-Adapter

IP-Adapter 全系列官方模型

Hugging Face（InstantID）

huggingface.co/InstantX/InstantID

InstantID 官方模型

GitHub IP-Adapter

github.com/tencent-ailab/IP-Adapter

官方代码和文档

Civitai

civitai.com

社区整理的工作流和模型包

ComfyUI-IPAdapter-Plus

github.com/cubiq/ComfyUI-IPAdapter-Plus

必装节点包，功能最全