使用nccl 编译运行程序，nccl 的lib出错 undefined reference to `ncclCommInitAll'

最新推荐文章于 2025-07-03 14:07:51 发布
最新推荐文章于 2025-07-03 14:07:51 发布
阅读量2.7k 收藏
点赞数 1
CC 4.0 BY-SA版权
分类专栏： c-c++ 机器学习 cuda
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/TH_NUM/article/details/81089723
本文介绍了解决CUDA程序中出现的NCCL未定义引用错误的方法。通过正确的编译选项和链接步骤，确保NCCL库正确加载。适用于遇到NCCL相关编译错误的开发者。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

undefined reference to ncclCommInitAll'
undefined reference toncclGetErrorString’
undefined reference to `ncclGroupStart’

需要加载nccl的动态库：
编译方法：

nvcc -o first_cuda singleProcess.cpp  
-I/usr/local/nccl/include -L/usr/local/nccl/lib -l nccl
import caffe，报错Error: /usr/lib/x86_64-linux-gnu/libatk-1.0.so.0: undefined symbol: g_log_structur
热情、奔放、快乐编程！
09-10 1909
按照这个方法（https://blog.youkuaiyun.com/CAU_Ayao/article/details/83901287）修改没用，反而报新的错误 新错误为： Traceback (most recent call last): File “”, line 1, in File “/home/caffe-master/python/caffe/init.py”, line 1, in from .pycaffe import Net, SGDSolver, NesterovSolver, AdaGr
Distributed package doesn‘t have NCCL built in
jacke121的专栏
05-08 1万+
Distributed package doesn't have NCCL built in 问题描述： python在windows环境下dist.init_process_group(backend, rank, world_size)处报错‘RuntimeError: Distributed package doesn’t have NCCL built in’，具体信息如下： File "D:\Software\Anaconda\Anaconda3\envs\segmenter\lib\.
libnccl.so
04-16
tensroflow为了提高多模型训练速度，需要多个GPU同时工作，而且我们一般使用的工作站都是8块tesla K80，如果能将8块显卡的计算力充分利用起来，将会大大提高模型训练的速度，缩短模型训练时间。这几天看到tensorflow的morroredstrategy特别好用，就想试试，所以写了代码，想看看多个GPU的效能怎么样，就仿照github上tensorflow的一些例子写了一些教程，但是出现了一个错误： tensorflow.python.framework.errors_impl.NotFoundError: libnccl.so.2: cannot open shared object file: No such file or directory。 根据报错的内容，我们知道，缺少一个文件，libnccl*** 类似的东西，看到nccl立马想到是nvidia的东西，经过查找资料发现，这个东西应该放在cuda文件夹下，在出现需要多个GPU同时工作时来调用的，如果cuda对应的lib64文件下没有找到该文件，就需要下载一下，默认的cuda并不直接安装该功能的，但是如果已经有cuda的情况下，只需要将对应的文件复制进cuda文件夹下的lib64 这个库里。
nccl 03 记 回顾：从下载，编译到调试 nccl-test
eloudy的专栏
06-20 1251
1> 修改 nccl/makefiles/common.mk。将 nccl-test/ 下载到与 nccl/ 并列。（为了开发nccl本身的话，也可以不安装）A100系列的为 sm_80;先回顾到这里吧，明天继续...只debug 主机代码。
NCCL的基本使用和常用通信算法源码分析
最新发布
fjfdg666的博客
07-03 1101
理解 NCCL 中的“通道”概念是掌握其高性能通信设计的关键。它本质上是实现空间并行性的一种机制，用于更充分地利用网络硬件资源（链路带宽、网络接口卡、交换机端口），从而加速大型集合通信操作（尤其是像 AllReduce 这样需要传输大量数据的操作）。这个例子对应的就是PyTorch Distributed Data Parallel里面的AllReduce操作。这个例子对应的就是PyTorch Data Parallel里面的AllReduce操作。
【解决】报错：RuntimeError: Distributed package doesn‘t have NCCL built in
qq_39635835的博客
07-06 1679
定位到文件：E:\ProgramData\anaconda3\envs\pytorch_envs\lib\site-packages\torch\distributed\distributed_c10d.py。原因：windows系统不支持nccl，采用gloo；
【报错解决】RuntimeError: Distributed package doesn‘t have NCCL built in
风巽·剑染春水的博客
04-15 2547
windows系统不支持nccl，采用gloo；
使用MMdetecion时出现RuntimeError: Distributed package doesn’t have NCCL
weixin_41653613的博客
02-28 671
使用MMdetecion时出现RuntimeError: Distributed package doesn’t have NCCL
undefined reference to `google::protobuf::Message::InitializationErrorString() const'
mudooo的博客
07-23 1万+
/usr/bin/ld: .build_release/lib/libcaffe.so: undefined reference to `google::protobuf::Message::DebugString() const' /usr/bin/ld: .build_release/lib/libcaffe.so: undefined reference to `google::protob...
ImportError: /home/yang/anaconda3/envs/sar/bin/../lib/libgio-2.0.so.0: undefined symbol: g_unix_get_
qq_37612496的博客
04-22 3916
ImportError: /home/yang/anaconda3/envs/sar/bin/…/lib/libgio-2.0.so.0: undefined symbol: g_unix_get_passwd_entry 使用caffe时出现如下错误： Traceback (most recent call last): File “/home/yang/project/sar_project/darknet_caffe/model/train.py”, line 10, in import caffe
lib100UD.so
07-01
**症状**：编译时报`undefined reference` **解决**： ```makefile # Makefile配置示例 LDFLAGS += -L/path/to/lib -l100UD LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/path/to/lib ``` > 参考引用[3]的编译参数设置方法[^...
Jetson tx2 上源码安装 pytorch1.0.0（真. 血泪史）
sunshinefcx的博客
01-18 2993
Jetson tx2 上源码安装 pytorch1.0.0（真. 血泪史） 在安装之前说明以下： 重点一：平台 Jetson TX2平台版本：Jetpack 3.3, cuda 9.0.252, cudnn7.6.5, TensorRT4.0.2, python2.7, python3.5 系统内核：tegra-ubuntu 4.4.38-tegra aarch64, ubuntu 16.04 ...
nvidia-nccl 学习
TH_NUM的博客
07-18 2710
1.ncclResult_t ncclGetUniqueId(ncclUniqueId* uniqueId) 创建一个被初始化函数（ncclCommInitRank）使用的Id。该函数只能被调用一次（在整个分布式计算中只能被一个地方调用），调用后产生的Id需要分发给分布式任务中其他所有的任务，然后在进行ncclCommInitRank初始化操作（该初始化操作需要使用全局统一Id）。 comm...
已解决RuntimeError: Distributed package doesn‘t have NCCL built in
qq_52381360的博客
03-17 3547
已解决RuntimeError: Distributed package doesn‘t have NCCL built in
nvidia-nccl 学习笔记
TH_NUM的博客
08-07 1万+
NCCL 资料 NCCL官方说明： https://devblogs.nvidia.com/fast-multi-gpu-collectives-nccl/ https://developer.nvidia.com/nccl http://docs.nvidia.com/deeplearning/sdk/nccl-developer-guide/index.html NCCL1 ...
nvidia nccl安装和测试的实战教程
热门推荐
weixin_43178406的博客
06-20 4万+
本文主要介绍了nvidia nccl安装和测试的实战教程，希望能对安装和使用NCCL的同学们有所帮助。 文章目录 1. 问题描述 2. 实战教程 2.1 安装NCCL 2.2 验证NCCL
[deepstream][原创]deepstream:5.1-21.02-triton的docker无法使用pytorch
FL1623863129的博客
10-28 2029
deepstream:5.1-21.02-triton的docker安装pytorch后会提示 libtorch_cuda_cpp.so: undefined symbol 参照Unable to Import PyTorch - #4 by mchi - DeepStream SDK - NVIDIA Developer Forums解决方法 it’s caused by PyTorch version incompatibilities. After installing torch, remov
Pycharm中import torch报错解决方案(2)
2401_83703866的博客
04-07 1821
**
解决 error：identifier “xxx” is undefined
wefaj的博客
10-19 3964
分析：出现这种情况一般就是没有加入相应头文件，导致系统找不到xxx。
nccl-rccl-parser：解析RCCL/NCCL性能瓶颈工具
rccl-parser：基于应用程序运行rccl-tests/nccl-tests的工具”揭示了本文介绍的内容是关于一个工具，该工具能够帮助用户在运行分布式应用程序时，使用RCCL（NVIDIA Collective Communication Library）或NCCL...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

蓝鲸123

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值