IP-Adapter是什么？如何在ComfyUI从0中搭建基于IP-Adapter的垫图工作流基础工作流下载 IP-Adapter图生图工作原理 ComfyUI IP-Adapter系列教程第一期

Рет қаралды 6,749

5 ай бұрын

IP-adapter，官方解释为用于文本到图像扩散模型的文本兼容图像提示适配器，是不是感觉这句话每一个字都认识，但是连起来看就是看不懂。
这期视频呢我们就来从基础讲起，来了解一下IP adapter。那在视频的前半部分，我们先直接上实操，在comfyui中一步一步搭建一套基于IP adapter的节点系统，从搭建的过程中我们可以很清晰的看到IP adapter参与到SD中的作图流程。后半部分我们来说一下IP adapter的出图原理。如果不出意外的话这个IP adapter应该会做成一个小系列，这是这个系列的第一集。
相关链接：
端脑云一键部署（🔥新用户注册独家赠送4000脑力值体验）
💥 bit.ly/duannao
本节课相关节点（下载图片拖入ComfyUI即可如遇节点确实请自行安装IP-Adapter相关插件和模型）：drive.google.com/file/d/1MAin...
IP-Adapter GitHub：github.com/tencent-ailab/IP-A...
manager管理器： • 🐼在ComfyUI中搭建controlnet...
IP-Adapter相关模型下载：huggingface.co/h94/IP-Adapter
𝕏 我的推特： / ytkexue
💎加入频道会员享视频优先观看：www.youtube.com/@kexue/join
热门AI应用：
💎ChatGPT Plus会员合租平台：bit.ly/hezu888
🔥 输入优惠码kxj 享全场95折
🔥 MJ、Netflix等会员均可使用优惠码
视频语言翻译（含对口型）
💎Heygen：bit.ly/Hey-Gen
💎Rask.AI：bit.ly/xRaskAI
💎Elevenlabs：bit.ly/11elevenlabs
💥AI作画群： / discord
✅相关链接：
Stable Diffusion入门到精通教程系列：
• Stable Diffusion教程从入门到精通
谷歌账号注册教程：
• 🐼100%成功！Google账号2023注册...
Stable Diffusion汉化包：
github.com/VinsonLaro/stable-...
短信接码平台：
bit.ly/3uxXNAJ
Midjourney入门到精通教程系列：
• Midjourney教程入门到精通

Пікірлер: 67

@sleepdyang9366 5 ай бұрын

yeah~~第一次頭香，每次氪老師開課都不能錯過~~

@kexue 5 ай бұрын

哈哈

@inb1734 5 ай бұрын

优秀🎉🎉🎉

@kexue 5 ай бұрын

哈哈感谢支持

@mishavouse1840 5 ай бұрын

天啊，最后的方便面，确实饿了

@kexue 5 ай бұрын

深夜食堂哈哈

@liuyao-kr6mn 5 ай бұрын

这是一个正经的频道

@liuyao-kr6mn 5 ай бұрын

有一说一，comfyui 的确用3090 就可以

@mishavouse1840 5 ай бұрын

识别图的特征关键词，可以直接用于生图prompt。这种好一点工具不知道有没有

@kexue 5 ай бұрын

fooocus也有类似功能可以我首页搜fooocus看下相关教程

@lilillllii246 5 ай бұрын

Hello! Is there a way to integrate two json files with different functions in comfyui? One is to do the inpaint function, and the other is to maintain a consistent character through faceid, but I'm having trouble linking the two.

@kexue 5 ай бұрын

You can check out kzfaq.info/get/bejne/bdNpjb13upmsh6M.html at 19:10. The example in the video uses the PlusFace model, but it can also work by changing the model to FACEID (you will need to change the "apply ip-adapter" node to "apply IPAdapter FaceID" as well).

@xfu6627 4 ай бұрын

大佬我用ip adapter老是报错哇是模型的问题吗？

@shanpoyang 5 ай бұрын

咦，没发出去吗，今天刚好搜索这个插件的用法，大佬就发了，真是太及时了

@kexue 5 ай бұрын

哈哈这个会做成系列确实好用

@shanpoyang 5 ай бұрын

谢谢大佬，我会出多点正经图片悄悄回报这个频道@@kexue

@kexue 5 ай бұрын

看得出你是懂正经的@@shanpoyang

@4689alex 5 ай бұрын

你會開 RActor Face Swap Node 的課程嗎? 這節點我用各種方法裝了一個禮拜一直裝不成功! 謝謝!

@kexue 5 ай бұрын

可能后期会吧用IP-Adapter faceID换脸效果也还可以（这个下周五）会出。然后一般插件安装不成功大概率是某些环境的版本不兼容。可以看下那个插件的requirements（github.com/Gourieff/comfyui-reactor-node/blob/main/requirements.txt）来升级或者降级一些环境的版本试一下

@4689alex 5 ай бұрын

該試的都試了還是不成功就等你開課了我會先試 IP-Adapter faceID 謝謝

@4689alex 5 ай бұрын

依照各方高手所演示一一照做但還是: 當 install batch file 時出現； note: This error originates from a subprocess, and is likely not a problem with pip. error: subprocess-exited-with-error × Getting requirements to build wheel did not run successfully. 當重新啟動 ComfyUI 時出現: ModuleNotFoundError: No module named 'insightface' Cannot import F:\ComfyUI_windows_portable\ComfyUI\custom_nodes\comfyui-reactor-node module for custom nodes: No module named 'insightface' (IMPORT FAILED): F:\ComfyUI_windows_portable\ComfyUI\custom_nodes\comfyui-reactor-node 已經搞了一個禮拜就是搞不定它真不知如何是好? 謝謝

@user-hb7se9cz2x 5 ай бұрын

感谢大佬，一直等能有人系统分享IP-Adapter呢，要是能再讲讲关于本地部署IP-Adapter的faceID时的那个依赖包的安装，我就爱死你了大部分都卡在insightface 库这，就因为这一个库，我都不知道我给电脑装了多少东西了，什么C++，CUDA 工具包，跟GPT探讨了好久，还学会了添加系统变量。。。至今还没有安装好，卡在了一个叫pandou的东西上运行pandoc --version 指令有输出版本号，系统变量也有添加，不知为什么还是不行......

@kexue 5 ай бұрын

额我倒是下一期会讲FaceID，但是我是直接用的端脑的一键部署，他家那个我直接吧IP-adapter更新到最新版就能用，因为他家环境里有insightface。说实话我对环境部署也不是很懂，因为涉及到太程序专业的东西之前我在腾讯云上跑的时候也是请教我一个程序的朋友做的。我本地的显卡很烂所以一直没本地跑过，所以可能帮不上您，实在是抱歉。。。

@user-hb7se9cz2x 5 ай бұрын

感谢您的回复，我也就是随口说说，还是非常感谢你的教程的，通俗易懂的厨子理论让我学会了很多，感谢@@kexue

@ethanhorizon Ай бұрын

我找不到 Apply IPAdapter。我只有IPAdapter Advanced，我照着教程做了一遍，没有问题。应该是一样可以用吧。只是不明白Clip Vision 到底是什么意思？CLIP-ViT-H-14 和 CLIP-ViT-bigG-14 有什么区别？

@timesurging-kf1dt Ай бұрын

我也没有，也用IPAdapterAdvanced搭建。应该是更新了，老节点就被放弃了。

@user-ly1vs3bo3d Ай бұрын

出现这种问题

@micechao9140 4 ай бұрын

您好，請問我照著這個做了，可是出來的圖跟原本的差很多😢

@kexue 4 ай бұрын

是模型不一样吗？还是参数调整的过高如果参数和模型完全一样应该结果是一样的

@lausoul3503 2 ай бұрын

怎么安装？、

@liuyao-kr6mn 5 ай бұрын

这个工作流怎么和 control net 结合呢？是个大模型那块做延伸么

@kexue 5 ай бұрын

不好描述简单搭建了一个 drive.google.com/file/d/1Isjkjb1ICyWfzfaOV3KOx_45MEOGFYaq/view?usp=sharing

@liuyao-kr6mn 5 ай бұрын

嗯嗯感谢感谢我瞅一瞅 @@kexue

@kexue 5 ай бұрын

@@liuyao-kr6mn

@user-sj3no3yo3o 3 ай бұрын

运行到IPAdapter节点报紫色是什么原因呀，报错提示“Error occurred when executing IPAdapterApply: 'NoneType' object has no attribute 'patcher'”

@kexue 3 ай бұрын

额安装有问题吧。。。

@user-cl3rl4io9h 3 ай бұрын

我在端脑云上，为啥没有IP adapter的模型

@user-cl3rl4io9h 3 ай бұрын

IP adapter文件后面显示undefined

@kexue 3 ай бұрын

看一下现在有了嘛他们今天端脑云氪学家版更新了

@user-di9kj9vk8t Ай бұрын

ipa的模型要放到什么目录下面呀。我放进去了为什么没反应

@Kei-jb4zs Күн бұрын

models里面新建文件夹名字就是ipadapter 把模型放里面刷新重新进入

@leileo3156 2 ай бұрын

大佬我没有Apply IPadapter这个节点是什么原因呢

@kexue 2 ай бұрын

需要单独安装插件看下我视频详情有插件地址

@Hamburger56788p 22 күн бұрын

@@kexue 安装了也没有，只有IP Adapter Apply.是不是更新了？

@kexue 21 күн бұрын

@@Hamburger56788p 是的可以往后看几期

@user-mx7ww9jp5d 3 ай бұрын

博主，你要考研啊？🙃

@kexue 3 ай бұрын

哈哈

@user-yi5ho4dc7e 4 ай бұрын

我的CLIP没有对应模型

@kexue 4 ай бұрын

在我评论区的描述里有链接可以下载

@user-yi5ho4dc7e 4 ай бұрын

@@kexue 放置在哪个文件夹呢？

@Gamer__L 2 ай бұрын

@@user-yi5ho4dc7e E:\ComfyUI\ComfyUI-aki-v1.2\ComfyUI-aki-v1.2\models\clip_vision

@shanpoyang 5 ай бұрын

我安装了，但是搜索的时候没显示这个节点是这么回事

@kexue 5 ай бұрын

不能把双击然后搜索试试？

@shanpoyang 5 ай бұрын

后来我重新找了个地址下载安装了，这下可以找到节点了，但是clip那里还是空的，我蒙了，我是不是要下载一个clip，但是我有点不知道要放什么位置@@kexue

@shanpoyang 5 ай бұрын

还有还有，我现在搜索只有IPDAPTER plus,能一样用吗@@kexue

@kexue 5 ай бұрын

模型应放在model -> clip_vision 文件夹下载地址在github.com/cubiq/ComfyUI_IPAdapter_plus 可以找到@@shanpoyang

@kexue 5 ай бұрын

能跑出图就是能用。。。@@shanpoyang