技术爆炸!AI一图换脸新王者,Instant ID保姆级安装与使用教程!
画画的小强 2024-06-19 10:31:02 阅读 62
大家好,我是画画的小强
在AI绘画Stable DIffusion中有很多人物换脸的新技术,比如像之前的Roop还有ReActor,它们都可以实现仅凭一张图进行人物换脸,后来又出现了EasyPhoto,可以通过快速炼制的小模型来对人物进行模仿。而最近,controlnet中又加入了一个新成员——Instant ID。
它可以仅通过一张图片进行完美换脸,可能是目前最强的脸部迁移模型。
与现有的免调谐先进技术进行比较。InstantID 实现了更好的保真度,并保留了良好的文本可编辑性(面孔和样式融合得更好)。
可以用于特定人物生成广告大片和艺术照,或者是进行视频中的人物换脸。
01、一键部署启动
接下来,我们来讲一下如何使用这个功能。
首先将controlnet升级到最新的版本,目前我的是V1.1.440,可以看到在控制选项中多了一个Instant_ID,这就是我们今天的主角了。
点开预处理器选项,可以看到有两个新的选项——instant_id_face_embedding 和 instant_id_face_keypoints。
与此配套的,我们还需要下载一下最新的controlnet模型。这里我已经给大家整理好了,只需要到我的云盘里就可以直接下载了,然后将下载好的模型放入到以下路径中——E:\sd-webui-aki-v4.4\extensions\sd-webui-controlnet\models
除此之外,我们还需要下载5个insightface的模型,我也在云盘里给大家准备好了,看文末直接获取哦。
将模型放到如下的路径当中,如果没有此文件夹可以新建一下——E:\sd-webui-aki-v4.4\extensions\sd-webui-controlnet\annotator\downloads\insightface\models\antelopev2
重启软件,这样,我们的Instant_ID就安装好了。
02、使用方法
Instant ID 使用 ControlNet 和 IP-Adapter 的组合来控制扩散过程中的面部特征。
要使用Instant_ID,我们需要开启两个controlnet进行控制。
在第一个单元中,我们主要进行的是人脸的参考,放入一张人物的正脸照片,因为 ControlNet 模型从 ipadapter 模型获取输出。
预处理器选择instant_id_face_embedding,模型选择ip-adapter_instant_id_sdxl 。
第二个单元是进行人物面部朝向的参考,可以放入一张动作的照片,这个模块参考的主要是头的朝向,脸部是谁并不重要,至于人物的姿态动作会随机生成。
预处理器选择instant_id_face_keypoints,模型选择control_instant_id_sdxl 。
03、生图测试
目前Instant_ID只适用于sdxl大模型,经过我的测试,并不所有的sdxl模型都能产生很好的效果,这里我先选择一个turboDiffusion大模型,并将vae切换为自动。
我输入一段油画风格的提示词内容。
提示词引导系数这里不能设置为太高,一般在2-4之间效果会比较好。
看一下出图效果,还是挺不错的,脸部也很像。
由于sdxl拥有很多种不同的风格,我们可以试试其他的提示词控制和参考图片,以下是我的一些测试。
赛博朋克风格。
日常生活照。
影楼写真照。
素描绘画风格。
古装造型。简直太像了!她果然还是非常适合这个造型。
关于Instant ID模型的使用方法就介绍到这里,总体测试下来感觉,人物的相似度还是非常高的,比起之前的一图换脸插件roop的效果提升了不止一点点,甚至可以与lora模型不相上下。不过缺点是,需要使用sdxl模型,对电脑配置有一定的要求,并且大模型的选择和图片选择也会对图片质量产生很大的影响,所以要出好图还是需要多多地尝试。
需要配套模型的话,可以看下方扫描获取哦
写在最后
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
若有侵权,请联系删除
上一篇: 【人工智能】探秘OpenAI神奇接口 - ChatCompletion (6)
下一篇: AI之T2I:Stable Diffusion 3的简介、安装和使用方法、案例应用之详细攻略
本文标签
声明
本文内容仅代表作者观点,或转载于其他网站,本站不以此文作为商业用途
如有涉及侵权,请联系本站进行删除
转载本站原创文章,请注明来源及作者。