使用 LCM 加速生图

Tooosky 2024-07-10 16:13:00 阅读 76

LCM 是什么

在人工智能领域,图像生成技术一直是研究的热点。然而,尽管取得了显著进展,现有技术如 Stable Diffusion 等在生成高质量图像时仍面临速度瓶颈。多步迭代采样过程不仅耗时,而且增加了推理成本,限制了这些技术在实时应用场景中的潜力。

为了解决上述问题,清华大学交叉信息研究院的研究者们提出了一种创新的模型——Latent Consistency Models(潜在一致性模型),简称 LCM。与传统的迭代求解不同,LCM 采用直接的单步求解方法,理论上能够在单步内生成图片,显著减少了生成时间。LCM 能够实现 1~4 步内生成高质量图片,相比现有技术在实际推理时间上实现了约 4 倍的加速。

如何在 ComfyUI 中使用

将以下图片拖入 ComfyUI 页面

导入后工作流如下图:

需要注意的是 cfg 应使用很小的值,可以 1~3

Sample 使用 lcm, scheduler 使用 sgm_uniform 或者 simple

Steps 设置 5~8 即可

模型下载

官方地址:

SDXL: <code>https://huggingface.co/latent-consistency/lcm-lora-sdxl

SD1.5: https://huggingface.co/latent-consistency/lcm-lora-sdv1-5

夸克网盘:

SDXL+SD1.5: https://pan.quark.cn/s/cdb9e71513ce



声明

本文内容仅代表作者观点,或转载于其他网站,本站不以此文作为商业用途
如有涉及侵权,请联系本站进行删除
转载本站原创文章,请注明来源及作者。