掘金 人工智能 07月18日 17:56
Wan2.1-14B-T2V-FusionX-VACE基础使用指南:基于ComfyUI
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

本文详细介绍了阿里开源的Wan2.1-14B-T2V-FusionX-VACE模型在ComfyUI上的本地部署教程。内容涵盖了基础操作,包括界面介绍、快捷方式和快速上手指南,提供了预设工作流并指导用户如何下载缺失的模型。同时,文章还对ComfyUI中的基础节点(如Load checkpoint, Load CLIP, Load ControNet Model, KSampler, VAE)和自定义节点(Manager)进行了详细介绍,重点说明了Manager在节点管理、模型下载及ComfyUI更新后的IP端口修改等方面的实用功能,帮助用户高效地进行模型部署和使用。

🚀️ 模型部署基础:文章基于ComfyUI平台,提供了阿里开源的Wan2.1-14B-T2V-FusionX-VACE模型的本地部署教程。教程从初识界面、快捷方式到快速上手,为用户提供了预设工作流,并详细指导了模型下载的命令行操作(如使用modelscope库)及常见模型存放路径,确保用户能够顺利完成模型的基础配置。

💡 核心节点解析:文章深入介绍了ComfyUI的核心节点功能,包括加载基础大模型(Load checkpoint)、引导图像生成的Load CLIP、加载ControlNet功能的Load ControNet Model、K采样器KSampler以及变分自编码器VAE。这些节点的详细解释帮助用户理解模型生成过程中的关键环节。

🔧 自定义节点Manager详解:文章重点突出了名为Manager的自定义节点,该节点集成了ComfyUI的节点管理功能,支持节点的安装、删除、启用和禁用。此外,Manager还提供了一千多个拓展节点的下载入口,能够帮助用户快速安装缺失的节点,并能解决因网络问题导致的模型下载失败,建议使用国内镜像进行下载,并提供了ComfyUI更新后的IP端口修改指南,以支持外部访问。

🔄 模型下载与管理:文章提供了使用modelscope库下载模型的核心命令和具体示例,指导用户在终端激活虚拟环境并指定下载路径,解决了模型依赖问题。同时,文章也提及了通过ComfyUI页面直接下载或复制链接在终端下载的替代方式,并列出了模型在ComfyUI中的常见存放目录,方便用户进行模型管理和查找。

本镜像基于 ComfyUI 进行部署,具体部署教程可参考以下文章或进入算家云“镜像社区”查看。

阿里开源黑科技!Wan2.1-14B-T2V-FusionX-VACE本地部署教程:基础模型+专项优化模块“实现质变!

下面将带您快速了解本模型的基本使用:

1.基本操作

初识界面

刚进操作界面时如下:

快捷方式

快速上手

我们已经预设了两个工作流供您使用,您也可以选择案例中的其他工作流或者自己搭建,选择其他工作流可能会缺少模型,需要您自行下载。

</center?

下面是下载其他基础模型的命令,如有其他模型需求,请在终端(小黑屏)处粘贴以下命令。缺少模型时您也可以选择直接在ComfyUI页面下载,或者复制链接,在终端下载完毕后重启ComfyUI。

基本命令:

pip install modelscope#安装modelscope库conda activate comfyenv #激活虚拟环境modelscope download --model 您要下载的模型仓库链接 需要下载的模型名称 --loacl_dir 指定下载路径#下载示例conda activate comfyenvcd /ComfyUI/models/diffusion_modelsmodelscope download QuantStack/Wan2.1_T2V_14B_FusionX_VACE Wan2.1_T2V_14B_FusionX_VACE-FP16.safetensors --local-dir ./#不同模型下载位置不同,请根据仓库描述选择,以下列出了几个常见路径#/ComfyUI/models/chechpoints/#/ComfyUI/models/vae/#/ComfyUI/models/loras/#/ComfyUI/models/diffusion_models#ComfyUI/models/text_encoders

2.节点介绍

(1)基础节点介绍

Load chekpoint:基础大模型加载器,用于加载模型。

Load CLIP:作用是将输入的内容与生成式大模型结合,从而引导图片生成。

Load ControNet Model:用于加载 contronet 各功能的节点

KSampler:K 采样器。

VAE :变分自编码器,类似滤镜。现在很多模型都自带 VAE,VAE 分为 Decode(解码)和 Encode(编码)。其中 编码器将输入数据压缩成一个潜在向量,解码器则根据这个潜在向量重构原始输入。

(2)自定义节点介绍

Manager(管理器)提供了 对 ComfyUI 各种自定义节点的安装、删除、禁用、启用 等管理功能。同时还提供了中心功能和便利功能,用来访问 ComfyUI 中各种信息

① 打开后能够实时预览图片生成过程

② 提供了一千多个拓展节点的下载,只需点击“install”即可安装(会通过 github 下载,安装失败就多试几次)

③ 导入别人的工作流时可能会缺失本分节点,管理器能检索出来,点击“install”快速安装

④ 提供许多模型

注:使用 Manager 安装某些节点后,该节点会从 hugging face 下载自己需要的模型,但是由于 hugging face 被墙,因此可到该节点下换

huggingface 的国内镜像(hf-mirror)重新下载。网址:hf-mirror.com

🚀️ 🚀️ 意:使用 manager 更新 comfyui 之后如果需要通过外部访问,那么需修改/ComfyUI/main.py 中的 ip 和端口号,修改为如下图:

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

ComfyUI Wan2.1-14B-T2V-FusionX-VACE AI模型部署 阿里开源 本地部署教程
相关文章