智源社区 2024年07月18日
双Buff加持!无GPU畅玩ControlNet Union,一个模型搞定10+图像控制
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

ComfyUI用户福音!Controlnet Union集成了10+种控制模型,实现All in one,简化操作流程。硅基流动团队开源的云节点BizyAir,让用户丝滑畅享Controlnet Union,生成任意长宽比的高分辨率图像,并支持SDXL、Lora模型。BizyAir还提供超过20个ControlNet Preprocessing节点,方便用户直接执行图像到图像的生成等任务。

🤔 **Controlnet Union:一站式控制模型** Controlnet Union集成了10+种控制模型,涵盖轮廓、深度、动作姿势、颜色等多种控制效果,用户无需安装多个独立模型,简化了操作流程,并节省了本地存储空间。Controlnet Union支持多种控制类型,性能无明显下降,并兼容SDXL、Lora模型。

🚀 **BizyAir云节点:无缝衔接** 硅基流动团队开源的BizyAir云节点,专为ComfyUI打造,让用户在云端轻松使用Controlnet Union,无需考虑硬件与环境限制。BizyAir提供了超过20个ControlNet Preprocessing节点,涵盖Line Extractors、T2I-Adapter Only、Semantic Segmentation、Normal and Depth Estimators、Face and Pose Estimators、Tile六大类,方便用户直接执行图像到图像的生成等任务。

💡 **一键直达:轻松上手** BizyAir上线的Controlnet Union节点“☁️BizyAir Controlnet Union SDXL 1.0”集成了controlnet-union-sdxl-1.0,用户只需在ComfyUI Manager中搜索“BizyAir”即可完成安装,并通过设置API密钥即可快速开始使用。BizyAir云节点可以与ComfyUI本地节点混合使用,提供更大的灵活性。

🙌 **示例:大白鲨与赛博朋克潜水艇** 例如,用户可以将一张大白鲨的照片转换为深度图,然后绘制一个赛博朋克风格的潜水艇,实现创意图像生成。

🌐 **BizyAir:更多功能** 除了Controlnet Union,BizyAir还上线了SiliconCloud LLM、可图Kolors等功能,为ComfyUI用户提供更丰富的功能和体验。

双重Buff加持,ComfyUI用户的生产力大升级。

以往,为了实现轮廓、深度、动作姿势、颜色等多种控制效果,你可能需要安装不同的控制模型来独立实现,并且大大占用了你本地的存储空间。

现在,Controlnet Union的推出让所有这些控制模型实现All in one,大大简化了用户操作流程,备受社区用户的推崇。
更重要的是,不用考虑硬件与环境限制,在硅基流动团队开源的专用于ComfyUI的云节点BizyAir中,你可以丝滑畅享Controlnet Union,
生成与Midjourney效果相当的任意长宽比的高分辨率图像,再一次大幅降低了使用门槛。

一键直达传送门:

代码:github.com/siliconflow/bizyair

文档:bizyair.siliconflow.cn


这次BizyAir上线的Controlnet Union节点“☁️BizyAir Controlnet Union SDXL 1.0”集成了controlnet-union-sdxl-1.0,这是由xinsir团队发布的用于图像生成和编辑的一站式控制模型
通过一个模型实现了10+种控制效果。

具体而言,与独立控制模型相比,支持多种控制类型的Controlnet Union的性能无明显下降。支持多条件生成,无需设置超参数或设计提示。由于使用了与原始ControlNet几乎相同的参数,它的模型参数与计算量没有明显增加。此外,Controlnet Union兼容SDXL、Lora模型。

在ControlNet的工作流中,通常需要有图像预处理节点将图像转换为ControlNet网络可以使用的图像提示(Image Prompt)。BizyAir提供了超过20个ControlNet Preprocessing节点,包括Line Extractors、T2I-Adapter Only、Semantic Segmentation、Normal and Depth Estimators、Face and Pose Estimators、Tile六大类。用户可以直接执行图像到图像的生成等任务。

一个示例:将一张大白鲨的照片转换为深度图,然后绘制一个赛博朋克风格的潜水艇。

除了这次上线ControlNet节点,此前,BizyAir已经上线SiliconCloud LLM、可图Kolors

那么,如何在ComfyUI中使用Controlnet Union?

一、安装BizyAir

在ComfyUI Manager中搜索“BizyAir”即可完成安装。此外,你还可以通过源码、Comfy-cli安装。Windows新手可以下载独立的压缩包。具体可见:

bizyair.siliconflow.cn/getting-started/installation.html

二、快速开始

1. 设置API密钥

首次使用,你需要通过“Set SiliconCloud API Key(设置SiliconCloud API密钥)”来生成API密钥。具体可见:bizyair.siliconflow.cn/getting-started/quick-start.html

2. 使用Controlnet Union节点

所有BizyAir节点都在“☁️BizyAir”目录下。可以使用 github.com/siliconflow/BizyAir/blob/master/examples/bizyair_controlnet_union_workflow.json

3. 支持与本地节点混合使用

BizyAir云节点可以与ComfyUI本地节点混合使用。比如,如果你不想使用AI自动生成的图片,也可以用本地图片做预处理。


其他人都在看


扫码加入BizyAir用户交流群
(请备注暗号“BizyAir”)

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

ComfyUI Controlnet Union BizyAir AI图像生成 云节点
相关文章
卧槽,期待的东西终于来了,AnyNode 这个 ComfyUI 节点牛哇。 你可以输入提示词让 LLM 帮你编写任何功能的节点。 AnyNode 会根据你的要求编写一个 Python 函数,...
黑丝还是白丝,ComfyUI局部重绘助你实现丝袜自由!
因为一直被几个好朋友问 comfyui 怎么入门,我给朋友录了几节 comfyui 基础课,顺手分享给大家~ 看完这5节应该就基本入门啦,然后可以看互联网上任何的进阶教程...
SD3-LoRA Loader Workflows-ComfyUI-CADS-AiARTiST
Reddit 上的一个玩法,用 SD 实时重绘谷歌街景的场景。 把世界上任何地方的地标变成动漫风格。 用的 canny controlNet 模型,toyxyz的网络摄像头 ComfyUI插件捕...
Runway: ↩️ Prompt: A school of fish swimming in the air past a mountain. Avant-garde, black and white, 35mm, dynamic movement. (3/9)
我的 ComfyUI 基础七课录完了! 其实起初只是教身边的朋友如何用 comfyui 文生图组件入门,但问我的朋友实在太多了,决定直接放到 B 站。 以后没看完这些视频不...
和 @Simon阿文 一起搞了一个 SeasonYou 工作流,输入一张照片,输出你的穆夏四联画海报。 » 工作流地址: https://openart.ai/workflows/ladybird_musty_24/sea...
『SD』薅羊毛!用4090显卡跑图
新版的 AutoGPT 开源了。 关键功能之一是用了可视化节点编辑的形式,而且可以自定义添加节点 。 自定义节点的编写也比较简单,难道会成为 LLM 版本的 ComfyUI 吗...