AI终于会画手了!AI绘画最强开源工具FLUX测试与安装
SD教程菌 2024-09-01 17:31:01 阅读 99
大家好,我是SD教程菌
此前发布的Stable Diffusion 3模型,因为过度审核,导致人体结构的生成能力“退步”,被喷得不轻。
现在一款优秀的平替出现了,那就是黑森林实验室的FLUX模型,该团队由Stability AI前核心成员组成。FLUX一经推出,好评如潮,被封为“最强开源文生图模型”。
先来感受一下FLUX的出图效果:
特朗普和一个女性机器人跳舞,机器人全身金属材质,模特身材,周围有许多人在围观
Trump dances with a female robot, the robot is made of metal and has a model figure, surrounded by many people watching
1920年的黑白照片:20多岁的女性历史学家站在一个满是古代文物的储藏室里,手里拿着一本书,她带着困惑的神情进行研究
Black and white photo from 1920: A female historian in her twenties stands in a storage room filled with ancient artifacts, holding a book and conducting research with a puzzled expression
海怪张着嘴游向镜头,正要吞下一个也面对镜头的潜水员
Kraken swimming towards camera with mouth open, about to swallow a scuba diver who is also facing the camera
聚焦森林中的木制舞台,以cinema4d风格呈现,舞台背景充满活力,平衡优雅,生态优美,色调优美
Focus on wooden stage in forest, rendered in cinema4d style, vibrant stage background, elegant balance, ecology, tones
Facebook帖子风格的高细节写实照片,航拍中国一座绿草山的俯视图,上面雕刻着形状像头骨的巨大龙骨。这是一张非常奇怪但美丽的恐龙骨骼风格的写实照片。
high-detail realistic photograph in the style of a Facebook post, Aerial photography of the top view of a green grassy mountain in China carved with huge dragon bones shaped like a skull. It is a very strange but beautiful realistic photo in the style of dinosaur bones.
关于金合欢树的信息图细节,包括根系、古董环境笔记、素描、科学论文、咖啡渍。
Infographic details on a wattle (acacia) tree including root system, antique environmental notes, sketch, scientific paper, coffee stains.
漫画书页面,插图为身穿白色长袍的幻想精灵公主在夜晚穿过鲜花和藤蔓的神奇森林,地平线上的植物山,以Moebius的风格高度详细,4k
Comic book page with panels featuring fantasy elven princess in white robes walking through magical forest with flowers and vines at night, mountains of plants on the horizon, highly detailed in the style of Moebius, 4k
以上是各种风格图片的测试,主要考察对提示词的遵从性,相比头部闭源工具诸如Midjourney、DALLE,FLUX的表现依然可圈可点。
目前FLUX已支持ComfyUI图形用户界面,接下来介绍本地部署的方法:
第一步:安装ComfyUI的最新版本
1、进入下面网址:https://github.com/comfyanonymous/ComfyUI?tab=readme-ov-file#installing
2、点击Direct link to download下载大约1.5G的压缩包。(不想下载也可以扫描文末二维码免费获取)
3、将压缩包解压到你指定的硬盘。
4、进入安装好的目录,运行run_nvidia_gpu.bat,接下来系统会自动下载必需的文件。
5、之后会自动弹出类似这样的网页,说明安装成功。
注意:这个后台窗口要保持开启,否则ComfyUI无法正常使用。
第二步:下载FLUX模型
模型我已经打包好了,需要的小伙伴可以看文末扫描免费获取哦
1、进入FLUX的抱抱脸页面:
https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main
点击Files按钮:
2、在文件列表中,下载主模型文件和VAE自编码器:
flux1-dev.sft:23.8 GB,将此文件放入ComfyUI/models/unet/ 目录下
ae.safetensors:335 MB,将此文件放入ComfyUI/models/vae/ 目录下
3、进入ComfyUI抱抱脸页面:https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main
4、在文件列表中,下载CLIP预训练模型:
t5xxl_fp16.safetensors: 9.79 GB
t5xxl_fp8_e4m3fn.safetensors: 4.89 GB
clip_l.safetensors: 246 MB
以上文件均放入ComfyUI/models/clip/ 目录下,其中9GB和4GB的文件至少下载其中一个。
5、进入以下网址:https://openart.ai/workflows/maitruclam/comfyui-workflow-for-flux-simple/iuRdGnfzmTbOOzONIiVV,点击右边Download按钮下载工作流。
6、将工作流文件拖到ComfyUI页面上,得到下图的结果:
7、确保你选择了正确的模型和编码器(参考下图),然后就可以开始绘画了!
需要注意的是,FLUX对硬件要求较高。测试过程中,最高占用了近30G内存:
FLUX生图速度也较慢,即使用4090显卡,默认设置,生成一张1024x1024的图像,也要20多秒:
但考虑到一次性成功的几率提高了,速度慢似乎也可以接受?
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
若有侵权,请联系删除
声明
本文内容仅代表作者观点,或转载于其他网站,本站不以此文作为商业用途
如有涉及侵权,请联系本站进行删除
转载本站原创文章,请注明来源及作者。