Sign in

Nodes Browser

ComfyDeploy: How ComfyUI-MiniCPM-o works in ComfyUI?

What is ComfyUI-MiniCPM-o?

ComfyUI custom nodes for MiniCPM

How to install it in ComfyDeploy?

Head over to the machine page

  1. Click on the "Create a new machine" button
  2. Select the Edit build steps
  3. Add a new step -> Custom Node
  4. Search for ComfyUI-MiniCPM-o and select it
  5. Close the build step dialig and then click on the "Save" button to rebuild the machine

ComfyUI-MiniCPM

English | 简体中文

这是一个 ComfyUI 的自定义节点，用于在 ComfyUI 中使用 MiniCPM-o 的多模态能力。

还在增加这个节点的功能，希望能用这个模型实时音视频能力在ComfyUI里做一些有趣实用的事情。

当前支持的模型版本：MiniCPM-o 2.6 (2024年1月发布)

alt text

功能

单图i2t提示词反推。

可以选择预设的提示词或者自己输入提示词。

alt text

多图i2t提示词反推，输出融合后的提示词

alt text

安装步骤

方法一：使用 ComfyUI Manager（推荐）

  1. 在 ComfyUI 中安装 ComfyUI Manager
  2. 打开 ComfyUI，点击右上角的 "Manager" 标签
  3. 在搜索框中输入 "MiniCPM-o"
  4. 点击安装按钮完成安装

方法二：手动安装

  1. 克隆此仓库到你的 ComfyUI 的 custom_nodes 文件夹下：
cd ComfyUI/custom_nodes
git clone https://github.com/CY-CHENYUE/ComfyUI-MiniCPM-o.git
  1. 使用 ComfyUI 的 Python 安装依赖：
..\..\..\python_embeded\python.exe -m pip install -r requirements.txt

安装说明

  1. 下载模型文件

  2. 放置模型文件

    • 将下载的模型文件放在 ComfyUI 的模型目录下：
    ComfyUI
└── models
    └── MiniCPM
        └── MiniCPM-o-2_6
            ├── image_processing_minicpmv.py
            ├── configuration_minicpm.py
            ├── modeling_minicpmo.py
            └── 其他模型文件...

  3. 模型文件结构

    • 确保所有必要的文件都在模型目录中
    • 不要修改文件结构和文件名

  4. 注意在ComfyUI 的 Python 安装依赖

Contact Me