如何使用ComfyUI与Stable Diffusion XL AI艺术生成器

How-to-use-ComfyUI-with-Stability-AI-SDXL-AI-art-generator.webp

如果您一直在使用稳定 AI 以Stable Diffusion 形式创建的 AI 艺术生成器,并且一直在享受 SDXL 形式的最新版本。但是希望对扩散模型有更多的控制,本指南将概述如何安装定制的图形用户界面

ComfyUI用户界面是一个很棒的工具,允许用户使用基于图形/节点/流程图的界面设计和执行高级稳定的扩散管道。这个创新平台是由一位匿名开发人员开发的,他试图了解Stable Diffusion 的复杂性,并希望有一个干净、强大的工具,使他们能够不受限制地试验Stable Diffusion 。

ComfyUI 专为任何有兴趣使用Stable Diffusion 创建复杂工作流程的人或希望更深入地了解Stable Diffusion 如何运作的人而设计。该界面紧密地反映了Stable Diffusion 的工作原理,并且代码比其他Stable Diffusion 用户界面更容易理解。

ComfyUI的突出功能之一是其节点/图形/流程图界面,它允许用户实验和创建复杂的Stable Diffusion 工作流程,而无需编码。对于那些想要深入研究Stable Diffusion 世界但缺乏传统上所需的编码技能的人来说,此功能将改变游戏规则。

如何安装 ComfyUI

ComfyUI 支持 SD1.x、SD2.x 和 SDXL,它还具有异步队列系统。它拥有许多优化,包括仅重新执行在执行之间更改的工作流部分的能力。此功能可显著提高效率并减少不必要的计算负载。

对于 GPU vram 小于 3GB 的用户,ComfyUI 提供了一个命令行选项:–lowvram。此选项在具有低 vram 的 GPU 上自动启用,确保广大用户仍可访问该接口。此外,即使没有带有–cpu选项的GPU,ComfyUI也可以运行,尽管这确实会减慢该过程。

ComfyUI 可以加载 ckpt、safetensor 和扩散器模型/检查点、独立 VAE 和 CLIP 模型。它还支持嵌入/文本反转、Loras(常规、定位和 loha)、超网络以及从生成的 PNG 文件加载完整的工作流(带有种子)。用户可以将工作流保存和加载为 Json 文件,节点界面可用于创建复杂的工作流,例如用于 Hires 修复的工作流,甚至更高级的工作流。

ComfyUI : XY绘图教程

该界面还支持区域合成、常规模型和修复模型的修复、ControlNet 和 T2I-Adapter、高档模型(ESRGAN、ESRGAN 变体、SwinIR、Swin2SR 等)、unCLIP 模型、GLIGEN、模型合并以及使用 TAESD 的潜在预览。ComfyUI启动速度非常快,并且完全离线工作,确保它永远不会下载任何内容。配置文件也可用于设置模型的搜索路径。

对于那些希望提高生成速度的人,ComfyUI 建议使用常规加载器/加载检查点节点来加载检查点。这将根据您的 GPU 自动选择正确的设置。用户可以设置此命令行设置,以在某些交叉注意力操作中禁用对 fp32 的上播,这将提高速度。但是,请务必注意,这可能会导致 SD2.x 型号上出现黑色图像。如果用户选择 xformers,此选项将没有任何效果。

原创文章,作者:校长,如若转载,请注明出处:https://www.yundongfang.com/Yun257013.html

(0)
打赏 微信扫一扫不于多少! 微信扫一扫不于多少! 支付宝扫一扫礼轻情意重 支付宝扫一扫礼轻情意重
上一篇 2023年9月20日 下午8:58
下一篇 2023年9月20日 下午9:02

相关推荐

  • 一亿上下文长度的 LLM:LTM-2-Mini

    一亿上下文长度的 LLM:LTM-2-Mini Magic 发布了一个具有 1 亿 Token 上下文的模型 LTM-2-mini。1 亿 Token相当于大约 1000 万行代码…

    工具软件 2024年9月20日
  • Open AI 新的推理模型已经训练完成

    Open AI 新的推理模型已经训练完成 高质量合成数据的重要性再一次被证明。 Open AI 的逻辑是使用一个足够庞大且非常不经济的推理模型(Strawberry)生产优质合成数…

    工具软件 2024年9月20日
  • PackPack:保存和收集内容 AI 整理

    PackPack:保存和收集内容 AI 整理 PackPack是一个为用户提供一键保存网页内容的浏览器扩展插件。用户可以通过扩展按钮快速保存页面、捕获帖子、通过悬停图片气泡保存图片…

    2024年9月20日
  • Polymet :AI 生成前端界面

    Polymet :AI 生成前端界面 YC 投了一个类似V0 的前端代码生成项目 Polymet。 这个比 V0 多了很多很实用的功能对设计的还原也很好。 自定义主题色、字体、圆角…

    2024年9月20日
  • xAI 发布 Grok-2 系列模型

    xAI 发布 Grok-2 系列模型 老马的 XAI 发布 Grok-2 Beta 版本。在LMSYS的成绩超过了Claude 3.5 Sonnet 和 GPT-4-Turbo。 …

    2024年8月31日
  • Jamba 1.5系列模型:非 Transformer 模型首次追上先进模型

    Jamba 1.5系列模型:非 Transformer 模型首次追上先进模型 AI21 推出了新的 Jamba 1.5 模型家族,包括 Jamba 1.5 Mini 和 Jamba…

    2024年8月31日
  • Ideogram 发布了 2.0 图像生成模型

    Ideogram 发布了 2.0 图像生成模型 图像生成质量大幅提高,产品易用性改善,最强的文字生成能力。尝试了一下发现真的很离谱,不只是文字生成这么简单,可以实现复杂排版搭配色彩…

    2024年8月31日
  • Vercel V0:AI 前端代码和界面生成

    Vercel V0:AI 前端代码和界面生成 Vercel 升级了 V0,加入对话式 UI 界面。这才是 Claude Artifact 的完全体,太强了。 集成了最新的 Next…

    2024年8月31日
  • Google Gemini 登陆 Opera,以下是使用方法

    像Microsoft和谷歌这样的大型科技公司正在全力以赴地整合各自的人工智能模型。根据最近的发展,Opera 的 Aria AI 现在可以访问 Google Cloud 的 Gem…

    谷歌Google 2024年5月30日
  • FeaturesVote:利用用户反馈帮助增长

    FeaturesVote:利用用户反馈帮助增长 FeaturesVote 是一个帮助企业通过用户反馈来驱动产品增长的工具。其主要功能包括: 用户投票板:用户可以发布和投票他们希望看…

    2024年5月20日
  • Google I/O 发布会的内容

    Google I/O 发布会的内容 Google 紧随 Open AI 开了今年的 I/O 发布会,一个字概括就是全。模型层面所有的指标都在卷,同时也发布了所有现在主流的模型类型。…

    2024年5月20日
  • 关于GPT-4o 模型更新

    关于GPT-4o 模型更新 它可以接受任意组合的文本、音频和图像作为输入,并生成任意组合的文本、音频和图像输出。 它可以在 232 毫秒内响应音频输入,平均为 320 毫秒,这与人…

    工具软件 2024年5月20日
  • AFFiNE AI:AI 笔记功能

    AFFiNE AI:AI 笔记功能 AFFiNE AI是一个全面的人工智能平台,旨在通过一系列强大的功能来提升用户的写作、绘图和演示能力。这个平台提供了一个集成的工作环境,用户可以…

    2024年5月20日
  • DeepSeek 发布 DeepSeek-V2 模型

    DeepSeek 发布 DeepSeek-V2 模型 DeepSeeK 上周发布了DeepSeek-V2模型,将现在优秀 LLM 的价格战又抬上了一个新的高度,百万 Token 输…

    2024年5月20日
  • Indigo关于发布会预测的整理

    Indigo关于发布会预测的整理 GPT-4 的新版应该会按照参数规模不同分化成多个版本,这个和 Claude 还有 Gemini 多版本的逻辑一样; 前两周出现在 llmsys …

    工具软件 2024年5月20日
  • Mindtrip:AI 驱动的旅游聚合应用

    Mindtrip:AI 驱动的旅游聚合应用 Mindtrip 是一个旅行相关的服务平台,它通过汇集成千上万的资源,并根据用户的独特偏好,提供定制化的旅行体验和灵感。该平台能够在几秒…

    工具软件 2024年5月10日
  • Simulon:混合现实 3D 模型软件

    Simulon:混合现实 3D 模型软件 只需要下载app扫描周围环境,然后选择对应的模型。之后等几分钟就会渲染好跟现实环境融合的MR视频。没有官网只有申请测试的表单。 &nbsp…

    工具软件 2024年5月10日
  • Synthesia:EXPRESS-1 模型驱动的数字人

    Synthesia:EXPRESS-1 模型驱动的数字人 EXPRESS-1 模型驱动,以实现逼真的头像表现。通过训练模型理解我们说什么以及我们如何说的微妙关系,表达力化头像现在可…

    工具软件 2024年5月10日
  • 生数科技发布Vidu 视频生成模型

    生数科技发布Vidu 视频生成模型 生数科技不声不响整了个大活。发布 Vidu 视频生成模型,支持长达 16 秒 1080P 视频直接生成。 从演示视频来看一致性、运动幅度都达到了…

    2024年5月10日
  • Adobe 发布 Firefly Image 3 模型及对应新功能

    Adobe 发布 Firefly Image 3 模型及对应新功能 Adobe 发布了Firefly Image 3模型,Photoshop(测试版)也大规模更新了很多功能。包括文…

    2024年5月10日
  • 微软发布 phi-3-mini 微型模型

    微软发布 phi-3-mini 微型模型 微软发布 phi-3-mini 模型,4 位量化之后可以部署在 iPhone 14 上,只占用 1.8G 内存,每秒输出 12 个 Tok…

    2024年5月10日
  • Mixtral8X22B 模型开源

    Mixtral8X22B 模型开源 Mixtral8X22B在只公布了一个磁力链接之后,又正式发布了模型的技术报告: Mixtral 8x22B是一个稀疏混合专家(SMoE)模型,…

    2024年5月10日
  • Meta 正式发布 Llama3 8B 、 70B 模型

    Meta 正式发布 Llama3 8B 、 70B 模型 Meta 在上周终于发布了 Llama3,目前先发布的是 8B 以及 70B 两个模型,还有多模态以及一个 400B 规模…

    工具软件 2024年5月10日
  • AI画图应用Ideogram发布模型更新

    AI画图应用Ideogram发布模型更新 Ideogram 发布了一大波更新,模型能力再次增强,平时做海报和普通图片挺好用的。 主要升级内容有: 增强的文字渲染和照片写实效果:减少…

    2024年5月10日
  • 谷歌发布了一堆AI能力和升级

    谷歌发布了一堆AI能力和升级 Google Next 2024上周放出了不少狠货,这次 Open AI 没能够压下去热度。 首先是 Gemini Pro 1.5 进行了一大波升级,…

    2024年5月10日