ComfyUI YoloWorld-EfficientSAM 技术文档

ComfyUI YoloWorld-EfficientSAM 技术文档

ComfyUI-YoloWorld-EfficientSAM Unofficial implementation of YOLO-World + EfficientSAM for ComfyUI ComfyUI-YoloWorld-EfficientSAM 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-YoloWorld-EfficientSAM


安装指南

使用 ComfyUI Manager 安装(即将推出)
  • 正式支持通过ComfyUI Manager进行一键安装的方式还在开发中,请稍候。
手动安装步骤
  1. 克隆项目: 在ComfyUI的custom_nodes目录下执行以下命令:

    cd custom_nodes
    git clone https://github.com/ZHO-ZHO-ZHO/ComfyUI-YoloWorld-EfficientSAM.git
    
  2. 安装依赖: 切换到项目目录并安装Python依赖:

    cd ComfyUI-YoloWorld-EfficientSAM
    pip install -r requirements.txt
    
  3. 下载模型: 访问Hugging Face下载efficient_sam_s_cpu.jitefficient_sam_s_gpu.jit, 确保将它们放置在custom_nodes/ComfyUI-YoloWorld-EfficientSAM目录内。

  4. 重启ComfyUI: 完成上述步骤后,重启您的ComfyUI以确保节点正确加载。


项目使用说明

V2.0核心特性
  • 图像与视频处理: 全新版本支持对图像和视频应用目标检测和分割。
  • 蒙版操作: 引入蒙版分离和提取功能,可以单独输出特定蒙版。
  • 定制配置: 用户可以根据需要调整如置信度阈值、IoU阈值等参数。
使用流程
  1. 导入工作流: 从V2.0的工作流文件中选择适合您需求的JSON文件导入ComfyUI。

  2. 配置节点: 根据项目需求,调整节点如YOLO-World ESAM中的各类参数,例如confidence_threshold, iou_threshold等。

  3. 输入数据: 提供测试图片或视频作为输入,并设置相应的检测类别。

  4. 执行检测: 点击运行,查看目标检测和分割结果。


项目API使用文档

  • YOLO-World Model Loader

    • 作用: 自动加载三种预训练模型之一(yolo_world/l, m, s)。
  • ESAM Model Loader

    • 支持: 可选择CUDA加速或CPU模式运行。
  • YOLO-World ESAM

    • 参数:
      • yolo_world_model: 选择YOLO-World模型。
      • esam_model: 加载EfficientSAM模型。
      • categories: 设定检测目标类别。
      • confidence_threshold, iou_threshold: 控制检测精度。
      • with_segmentation: 开启/关闭分割功能。
      • 更多详细参数见节点说明,支持高度自定义输出。
  • Yoloworld ESAM Detector Provider

    • 新增特性: 提供额外集成选项,特别适配Impact-Pack。

项目安装方式(重复信息,参照安装指南)

已包含在上方的安装指南中,手动安装和未来计划通过ComfyUI Manager的安装方法皆有涉及。


通过遵循以上步骤,您可以成功部署并开始利用ComfyUI YoloWorld-EfficientSAM进行高效的目标检测和实例分割任务。记得,根据实际需求调整参数以优化您的应用体验。如有疑问,可通过提供的联系方式与开发者取得沟通。

ComfyUI-YoloWorld-EfficientSAM Unofficial implementation of YOLO-World + EfficientSAM for ComfyUI ComfyUI-YoloWorld-EfficientSAM 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-YoloWorld-EfficientSAM

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

### 如何部署 YOLOWORLD 项目 #### 安装依赖项 为了成功部署YOLOWorld模型,确保环境已经安装必要的Python库。通常情况下,在`ComfyUI-YoloWorld-EfficientSAM`项目的根文件夹下存在一个名为`requirements.txt`的文件[^1]。 ```bash pip install -r requirements.txt ``` 这一步会自动下载并安装所有必需的包来支持YOLOWorld和其他组件的功能。 #### 下载预训练权重 对于想要快速上手的人来说,可以直接使用官方提供的预训练权重文件。这些权重可以通过指定路径加载到YOLO类实例中: ```python from ultralytics import YOLO model = YOLO("yolov8s-world.pt") # 加载小型版本的世界模型 ``` 如果需要其他尺寸(如中型或大型),只需更改参数即可[^3]。 #### 设置工作区 创建一个新的子目录用于保存处理后的数据以及输出结果是非常好的实践方式之一。可以按照个人喜好命名此文件夹;这里假设命名为`output`: ```bash mkdir output ``` 之后所有的操作都可以在这个新建立的工作区内完成,保持原始代码结构不变有助于维护和更新。 #### 执行目标检测任务 当一切准备就绪后,就可以调用`.track()`函数来进行实时追踪了。下面是一个完整的例子展示如何读取本地视频流并对其中的对象进行标记: ```python results = model.track( source="path/to/video.mp4", save=True, # 是否将带有标注框的结果另存为新的媒体文件 project='output', # 输出位置,默认当前目录下的runs/detect/exp/ name='exp' # 实验名称 ) ``` 上述命令将会把经过分析处理过的帧序列存储在一个由`project`和`name`共同定义的新文件夹里。 #### 使用 ComfyUI Manager (可选) 除了手动执行以上各步之外,《ComfyUI YoloWorld-EfficientSAM 技术文档》还提到过一种更简便的方式——借助于图形界面工具ComfyUI Manager实现一键式安装与管理[^2]。不过具体的操作流程需参照该软件本身的指引说明。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

乌林潮Grace

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值