今天花点时间,给大家介绍一下IP-Adapter-FaceID新发布的“portrait”模型,“portrait”翻译成中文是“肖像”的意思
概述
这个模型在所有的faceID模型中是一个很特别的模型,特别之处在于,第一,它的体积是所有faceID模型中最小的,只有64.6MB;第二,它可以独立使用,不需要搭配lora模型,而其他的faceID模型都需要搭配特定的lora模型一起使用!第三,它的效果非常棒,至少在我有限的对比测试里面,我认为它具备plusV2同级别的效果!
轻量、独立作战、效果显著,“portrait”模型的这些特点,让我一下子就喜欢上了它!对于很多机器配置不高的小伙伴来说,使用“portrait”模型可能比使用其他FaceID模型更加丝滑!
安装与使用
下面我就带着大家一起来学习一下怎样使用“portrait”模型!
首先从huggingface将portrait模型下载下来,将模型剪切到comfyui的models文件夹下面的ipadapter文件夹中,为了与其他ipadapter的模型做区分,我一般会在该文件夹中新建一个子文件夹,命名为“FaceID”,然后将所有的FaceID模型都放在该子文件夹中,系统也是可以识别到的!
工作流的逻辑其实就非常简单了,通过一个FaceID的适配应用,将portrait模型、clip vision模型和checkpoint模型以及参考图片和insightface桥接到K采样器的模型接入点,其他的正反提示词和普通的文生图没有任何区别!
在参数的设置上面,大多数的参数保持默认即可,insightface根据你自己机器的实际情况选择CPU或者CUDA,由于portrait模型是基于SD1.5的模型,因此clip_vision模型和checkpoint同样也要选择SD1.5版,生成图片的宽高度也是要根据SD1.5版的规格来相匹配的设置,比如512*768
完成了上面所有的设置,我们上传一张刘天王的照片来测试一下,点击“添加提示词列队”,如果是第一次运行,需要加载模型,需要的时间大概是不到50秒,之后生成的速度基本上是2秒钟一张!这个速度还是非常奶思的!
再来看图片的相似度,人物的主要特征基本上都还原了,美人尖、鹰钩鼻、独特的嘴唇和突出下颚以及棱角分明的脸型,这些特征的还原度都非常高!只有眼睛的还原度比较欠缺,缺少了一些刘天王本人的亲和力!也许缺失的正是人工智能还不具备的人类特有的温度!
需要工作流的可以直接下载↓↓↓
原创文章,作者:朋远方,如若转载,请注明出处:https://caovan.com/ipadapter-faceiddezhegexinmoxinghenxiaodanshichaojinihai-portrait-aihuihuajiaocheng/.html
Comments(3)
下载后打开了这个:{
“last_node_id”: 26,
“last_link_id”: 53,
“nodes”: [
{
“id”: 15,
“type”: “CLIPVisionLoader”,
“pos”: [
546.5496940177609,
174.14255803594926
],
“size”: [
430,
60
],
“flags”: {},
“order”: 0,
“mode”: 0,
“outputs”: [
{
“name”: “CLIP_VISION”,
“type”: “CLIP_VISION”,
“links”: [
13
],
“shape”: 3,
“label”: “CLIP视觉”
}
],
“properties”: {
“Node name for S&R”: “CLIPVisionLoader”
},
@lib:另存为json文件,就可以导入到comfyui了
加载失败的节点 怎么办呢