ComfyUI中MuseTalk插件显存不够的解决方法

原创 已于 2024-05-14 11:18:02 修改 · 4.4k 阅读 · 7 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#AIGC

于 2024-05-14 11:13:53 首次发布

我的显卡是4060ti 8G的显卡，我看他们有的可以用，但是我不能够使用，所以就研究了一下

1、打开ComfyUI直接显存爆到7G的情况

这个原因是因为还没有跑模型的时候，直接就预先加载了模型了，把ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MuseTalk这个文件夹里面的nodes.py第34行的模型加载的代码

audio_processor,vae,unet,pe = load_all_model()

这一行代码，放到76行左右的run函数里面

    def run(self, video_path,audio_path,bbox_shift,batch_size)
最低0.47元/天 解锁文章
ComfyUI 提示Allocation on device 显存占满的解决方法及秋叶整合包的优化方法
代码简单说 Vue、JAVA、PHP、Node.js 熟练运用，接口、架构、性能全搞定。
03-11 8609
最近在玩ComfyUI的时候，发现一个让人崩溃的问题——VRAM一直占满，最终报错： 简单来说，就是显卡显存溢出了，导致程序无法继续运行。尤其是一些大模型或者复杂工作流，很容易让显存飙升到极限。那怎么办？直接在启动命令后加上 ，例如： 这个参数的作用是啥？ 默认情况下，ComfyUI会尽量让模型一直留在显存里，即使有些部分暂时用不到，导致显存迟早被填满。而 可以强制让ComfyUI把数据卸载到常规内存，减少显存占用。如果你的显存真的不够用，还可以再加 参数： 这个参数的意思就是开启低显存模式，进一步优化
AI 绘画 | Stable Diffusion LCM和FP8 显存不足的福音
洛阳泰山的博客
12-06 1327
LCM 是一个用于 Stable Diffusion 模型的新型采样器（Sampler）。Stable Diffusion 是一种生成式人工智能模型，主要用于文本到图像的转换，即根据给定的文本提示生成相应的图像。采样器是这种模型中的一种重要组成部分，它负责从概率分布中抽取样本以生成最终的输出。LCM 代表了 “Lora Consistency Model”，其中 Lora 是一种新的采样方法，而 Consistency Models 强调的是在生成过程中保持一致性。
Stable Diffusion｜黑白老照片修复
xiaolinyui的博客
05-24 1644
在这个时代，我们习惯于拥有高清、色彩丰富的照片，然而，那些古老的黑白色老照片由于年代的久远，往往会出现模糊、破损等现象。
ComfyUI内存优化技术：低显存运行大模型的智能方案
最新发布
gitblog_00826的博客
10-01 2039
大模型生成时遭遇"显存不足"错误？ComfyUI通过智能内存管理技术，让低配设备也能流畅运行Stable Diffusion模型。本文详解四大核心优化策略及实操方法，帮你突破硬件限制。 ## 显存状态智能识别系统 ComfyUI启动时自动分析硬件配置，通过[comfy/model_management.py](https://link.gitcode.com/i/4ca0ae8b8e12ecf...
comfyUI可遇到节点报错可以直接更换整个节点文件夹
m0_48985565的博客
05-11 1379
环境1的comfyUI运行工作流A时候，某个节点运行报错问题，某个.py文件需要入参是数字不是image环境2comfyUI可以正常运行工作流A。
ComfyUI Flux，必装节点， 缓解你显存不足的超有用节点FluxExt-MZ，显存占用5G左右的分层加载技术
11-28 7396
注意：本节点主要是针对于显存不足的用户的，4090的用户请略过。用于缓解显存不足导致炸显存OOM，或崩溃的情况。Flux 是出了名的大模型，模型是真的大，原版的23G模型，没有个24G显存真心跑不动。随着发展，社区出现了量化fp8版本，这个是效果仅次于原版Flux大模型的，8G显存的用户就不要想了，肯定会导致ComfyUI的崩溃退出的。后来又出现了NF4版本、GGUF版本，届时8G显存的用户，已经能用GGUF的Q4版本来跑Flux模型了。
手把手教你搭建更节省显存的AI绘画工具ComfyUI
白帽阿叁的博客
03-08 7476
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
comfyUI-MuseTalk用户交互体验的参数设计和设置
pulledup的博客
08-04 2529
comfyUI-MuseTalk的参数设置......该视频的原始帧率会导致输出到缓存中的帧图片的数量的多少，即总批次数batch-sizes（这里简称bss）；最后，参考视频的帧率ref-fps，经验值，英伟达显存等于16G的显卡芯片，1帧
ComfyUI-UltraEdit插件部署在服务器
qq_51796357的博客
07-25 1295
解决方法：将模型文件放在数据盘中，使用软连接进行路径映射，在linux中命令为ln -s 源文件路径 软链接文件路径(路径为绝对路径，加上/root)。解决方法：将图片resize后，若尺寸不满足4的倍数，则进行裁切或填充(实测4的倍数不一定行，改为16的倍数则可以适应所有图片)可能原因：在该插件的UltraEdit.py文件中，将输入的图片进行resize,导致图片大小不满足4的倍数。解决方法：将UltraEdit.py 文件最后的。6.使用不同图片时，有可能会出现维度错误，如下。
ComfyUI进阶：Crystools插件全解析，让工作流监控与调试更高效
2301_78150483的博客
08-06 2504
ComfyUI-Crystools插件通过“监控-调试-追溯”三位一体的功能设计，填补了ComfyUI在工作流可控性上的空白。无论是资源瓶颈排查、参数差异对比，还是生成信息追溯，都能通过节点化操作轻松实现，大幅提升进阶用户的创作效率。掌握Crystools后，你将告别“盲目调整参数”“资源突然崩溃”“忘记生成配置”的困境，让工作流创作更有序、更高效。尤其在团队协作、批量生产、风格调试等场景中，其价值会更加凸显。随着插件的迭代，未来可能会支持更多高级功能（如资源预警、自动优化建议）。
Controlnet在ComfyUI中的常见问题与解决方法
04-01 9426
熟练地在ComfyUI中使用Controlnet，为你的Stable Diffusion创作过程带来更高的精确度和灵活性。不断实践和探索，你将能够充分发挥Controlnet的潜力，本文介绍使用Controlnet的常见问题，现象和解决方法，供大家查阅。
如何用4G显存畅玩SDXL？终极解决方案——ComfyUI！
libaiup的博客
01-04 3336
A1111 虽好，但是对 SDXL 的兼容情况却不佳，往往需要占用大量的显存，且跑图的速率低下。而使用 ComfyUI 来跑 SDXL 模型往往速度更快，占用显存也更低。即使你的电脑只有4G 显存，ComfyUI 也可以完美运行 SDXL。下面就来详细看看什么是 ComfyUI 以及其安装和使用方法。
ComfyUI-SUPIR项目内存不足问题分析与解决方案
gitblog_07863的博客
06-26 925
在使用ComfyUI-SUPIR项目时，用户遇到了一个棘手的问题：系统在加载SDXL模型时突然崩溃，且没有任何错误提示。具体表现为： 1. 在Google Cloud的L4实例上部署环境 2. 安装必要的NVIDIA驱动和ComfyUI环境 3. 尝试加载不同版本的SDXL模型(包括1.0 Base、Juggernaut XL V8/V9) 4. 系统在模型加载阶段崩溃，日志仅显示"Loadin...
ComfyUI-SUPIR项目中的显存优化与OOM问题解决
gitblog_07643的博客
06-26 914
ComfyUI-SUPIR项目中的显存优化与OOM问题解决 在图像处理领域，ComfyUI-SUPIR作为一个基于ComfyUI的扩展项目，为用户提供了强大的图像超分辨率处理能力。然而，在实际使用过程中，用户可能会遇到显存不足(OOM)的问题，特别是在处理高分辨率图像时。本文将深入分析这一问题及其解决方案。 问题现象分析 当用户尝试在配备16GB显存的NVIDIA 4060Ti显卡上运行Comfy...
如何清空Comfyui的gpu缓存
向来缘浅，奈何情深
06-28 3884
本文介绍了解决ComfyUI绘图服务显存未释放的方法。作者发现ComfyUI在不同模型任务间会自动清空显存，于是提出在每次绘图后自动执行空载任务来释放显存。文章提供了空载工作流JSON文件和Java实现代码，并对比了其他两种方法（启动参数和插件）的无效测试结果。最后简要介绍了基于ComfyUI开发的AI绘图项目功能及源码地址。该方法有效解决了双ComfyUI服务并行时的显存泄漏问题。
ComfyUI-SUPIR项目中的显存优化与常见问题解析
gitblog_07775的博客
06-26 668
ComfyUI-SUPIR是基于SUPIR模型的图像超分辨率实现方案，该项目在图像处理领域展现出强大的能力。然而，由于其模型架构复杂，对显存资源有着较高要求，特别是在使用NVIDIA显卡进行加速时，显存管理成为许多用户面临的主要挑战。 ## 显存不足问题的技术分析 在实际运行过程中，用户反馈即使在12GB显存的RTX 3060显卡上也会遇到显存不足的问题。通过技术分析，我们发现这主要涉及以下几...
ComfyUI安装包运行前准备：增加虚拟内存
阿道夫的博客
03-10 2581
在comfyui绘图时，部分模型文件、中间数据和用户输入等都会被加载到内存中，尤其是一些特别大的模型，系统本身的显存不够用的时候，也会把一部分模型放到内存中来避免爆显存（代价是速度变慢），而一些用户内存可能也不太够用，比如说只有16G，那么这个时候内存也不够用了，就需要再牺牲一部分速度来换取可行性，就需要把模型放到虚拟内存中了。虽然虚拟内存可以扩展系统的可用内存，但它也有缺点。通常，建议将虚拟内存设置在系统盘以外的分区，并根据物理内存的大小合理分配虚拟内存的容量（例如，物理内存的1.5倍到2倍）。
Windows11配置ComfyUI插件MuseTalk
qq_49511810的博客
04-29 2985
解决musetalk报错
ComfyUI自定义节点插件：UI功能优化增强工具
ComfyUI-自定义节点-UI优化是一款专为提升ComfyUI使用体验而设计的插件，其核心目标是通过对Comfy原生用户界面（UI）进行一系列精细化的功能增强与视觉优化，来改善AI绘图工作流中的操作效率与交互逻辑。ComfyUI作为...
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值