DeepSeek开源多模态模型Janus-Pro的ComfyUI使用教程

星辰聊技术
437 阅读2分钟

安装方法

1. 通过 ComfyUI Manager 安装（推荐）

  • 安装 ComfyUI-Manager
  • 在管理器中搜索 "Janus-Pro"
  • 点击安装

2. 手动安装

将此仓库克隆到你的 ComfyUI 的 custom_nodes 文件夹中：

cd ComfyUI/custom_nodes
git clone https://github.com/CY-CHENYUE/ComfyUI-Janus-Pro

安装所需依赖： Windows系统：

# 如果你使用ComfyUI便携版
cd ComfyUI-Janus-Pro
......\python_embeded\python.exe -m pip install -r requirements.txt

# 如果你使用自己的Python环境
cd ComfyUI-Janus-Pro
path\to\your\python.exe -m pip install -r requirements.txt


# 使用ComfyUI的Python环境
cd ComfyUI-Janus-Pro
../../python_embeded/bin/python -m pip install -r requirements.txt

# 或者使用你的环境
cd ComfyUI-Janus-Pro
python -m pip install -r requirements.txt

安装注意

如果你遇到安装问题可以从一下几个方面排查问题：

  • 确保已安装 git
  • 尝试更新 pip：
python -m pip install --upgrade pip
1.
  • 如果使用代理，确保 git 可以访问 GitHub
  • 确保使用的是与 ComfyUI 相同的 Python 环境

模型下载

  • 将模型文件放在 ComfyUI/models/Janus-Pro 文件夹中：
  • 在 ComfyUI 的 models 目录下创建 Janus-Pro 文件夹
  • 从 Hugging Face 下载模型：
  • 将模型解压到各自的文件夹中：
ComfyUI/models/Janus-Pro/Janus-Pro-1B/
ComfyUI/models/Janus-Pro/Janus-Pro-7B/

工作流下载

需要的小伙伴可以在公众号发送以下内容获取工工作流：

DeepSeek工作流

这个工作流节点包含了图像描述和图像生成

image.png

  • 在序号1 选择 1B 或者 7B 模型
  • 在序号2 上传你需要用于 Janus Pro 解读的图片
  • 在序号3 可以调整用于图片描述的 Prompt, - 我测试过中文、英文、日语输入都没有问题，但是如果你需要特定语言的输出，请你在 prompt 中声明，类似 请使用日语输出 这样的要求
  • 序号4 是一个展示 文本的节点，我这里使用的是ComfyUI-Custom-Scripts 插件中的 Show Text 节点
  • 在序号5 中输入用于图像生成的 prompt
avatar
文章
阅读
粉丝