[fairseq] 报错：TypeError: _broadcast_coalesced(): incompatible function arguments

最新推荐文章于 2024-08-29 15:09:16 发布
原创 最新推荐文章于 2024-08-29 15:09:16 发布 · 1.2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#机器翻译

本文介绍了一个在fairseq中使用自定义state_dict方法导致DistributedDataParallel组件出现错误的问题，并提供了通过更改--ddp-backend参数来解决该问题的方法。

前言

我通过👇复写了模型的state_dict方法，具体就是给其增加了dynamic_mask（字典类型，里面是tensor），allocated_neuron_num（整型）。

def state_dict(self, destination=None, prefix='', keep_vars=False):
    state_dict = super().state_dict
最低0.47元/天 解锁文章
TypeError:__init__() got an unexpected keyword argunent ‘executable_path‘解决方案
weixin_43178406的博客
06-30 8万+
本文主要介绍了TypeError:__init__() got an unexpected keyword argunent 'executable_path’解决方案，希望能对学习selenium的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案 2.1 方案一 2.2 方案二
从mxnet .rec文件中解压出图片数组，报错：TypeError: __call__(): incompatible function arguments. The following argum
Hello Word!
01-04 4421
目的：从mxnet train.rec文件中解压还原出图片数组，送入dlib做人脸检测 报错： TypeError: call(): incompatible function arguments. The following argument types are supported: 1. (self: _dlib_pybind11.fhog_object_detector, image: array, upsample_num_times: int=0) -> _dlib_pybind11.rec
TypeError: _queue_reduction(): incompatible function arguments.
01-20
使用pytorch的DDP分布式训练的时候遇到错误： TypeError: _queue_reduction(): incompatible function arguments. The following argument types are supported: 1. (process_group: torch.distributed.ProcessGroup, grads_batch: List[List[at::Tensor]], devices: List[int]) -> Tuple[torch.distributed.Work, at::Tensor] Invoked
解决pybind报错TypeError: useOp(): incompatible function arguments.
liubaosen的专栏
01-28 4459
第一次运行pybind，结果总是报错 TypeError: useOp(): incompatible function arguments. The following argument types are supported: 1. (arg0: cost_model.OpInfo) -> None Invoked with: <class 'cost_model.OpInfo'> 我的代码大概如下： //C++ struct OpInfo { std::strin
TypeError: z_(): incompatible function arguments. The following argument types are supported: 问题解决
Chris_zhangrx的博客
04-02 1万+
一般运行 python 脚本遇到这种问题都是给的参数不是严格匹配函数需要的输入的，这种需要具体情况具体分析，但是主要解决就是好好检查自己的代码，函数输入哪里会存在不匹配的地方。 以我下面的代码为例，注册 Pytorch plugin 算子时： //修改前 def symbolic_plugin(g, arg0, arg1, arg2): return g.op('plugin, g, arg0, arg1, arg2) 这个可能之前某些情况下确实可以正常运行，但是随着代码更新或者接口调
解决：TypeError: z_(): incompatible function arguments. The following argument types are supported
nings666的博客
12-02 3788
背景 在使用之前的代码通过Dlib进行人脸识别时，报错： Traceback (most recent call last): File "FaceRecognizeHaarCascade copy.py", line 13, in return g.op('plugin', g, arg0, arg1, arg2) TypeError: __call__(): incompatible function arguments. The following argument ty
pytorch分布式训练TypeError: _queue_reduction(): incompatible function arguments.
DRACOYU的博客
03-16 1279
使用pytorch分布式训练遇到报错 TypeError: _queue_reduction(): incompatible function arguments. The following argument types are supported: 1. (process_group: torch.distributed.ProcessGroup, grads_batch: List[List[at::Tensor]], devices: List[int]) -> Tuple[tor
【yolo系列：运行报错TypeError: __init__() takes from 3 to 4 positional arguments but 6 were given，最全】
weixin_47869094的博客
08-19 5852
这是一个示范例子，也就是说，你在排除其他错误的前提下来找这个错误的原因，可以仔细看看你的配置文件的新网络，是加了哪一行，哪一个模块，导致出现这样的错误，同理，不光是CA，别的模块也有可能出现这个错误，一般都是后面的不对，不应该是1，1在后面导致的传参错误。因此，[-3, 1, CA, [128]] 表示使用 DropBlock 模块，设置每个区块丢弃比例为负数，丢弃块大小为 1x1，使用 Crop 数据增强策略，特征图大小为 128。这可能是因为在初始化类的实例时传递了多余的参数。
[动画Mesh重建报错解决/pybind11/numpy] incompatible function arguments. Invoked with: {
Bartender_VA11的博客
04-23 676
这个方法挺冷门的，只有外网上有解决方案，故搬运过来方便后来者。
fairseq错误：‘Please build Cython components with: pip install --editable ‘
weixin_43142450的博客
07-01 2067
fairseq错误：'Please build Cython components with: pip install --editable '
TypeError: create_bool(): incompatible function arguments. The following argument types are supporte
gzy13477的博客
09-22 527
在运行肢体关键点检测代码过程中，出现报错。添加模型复杂度modComplexity。
fairseq安装错误【ModuleNotFoundError: No module named ‘examples‘】
dongbidsaxue的博客
11-23 2379
以下是非常可能的一种解决方法。
安装fairseq报错omegaconf 2.0.6 has a non-standard dependency specifier PyYAML＞=5.1
sl530311的博客
07-31 1591
降低pip版本为19.2后解决。
return torch._C._broadcast_coalesced(tensors, devices, buffer_size)RuntimeError: NCCL Error 2:unhand
沉迷单车的追风少年
05-11 1056
目录 项目场景： 问题描述 原因分析： 解决方案： 方案一： 方案二： 项目场景： pytorch 多卡训练 torch.nn.DataParallel 问题描述 完整报错： Traceback (most recent call last): File "/root/sketchMultimodal/ddpm/retrain.py", line 49, in <module> inference.retrain() File "/root/sket...
安装fairseq和遇到版本不匹配问题的解决方法
weixin_43579015的博客
10-29 6329
第二步，安装上一个版本（制定版本安装，上文安装的0.12，如下测试0.11版本是否适配你的代码）使用如下命令重新下载（2022年10月默认下载的fairseq0.12.1版本）如果还不行，就安装fairseq==0.10.1版本，并测试你的代码。就是让其检测延迟的时间变长，以防止因为你的网络问题而直接报错。第一步，卸载当前fairseq。
TypeError: compute_face_descriptor(): incompatible function arguments. The following argument types
weixin_55999079的博客
05-06 3058
我们采集的图片是3通道的：image shape:(120, 160, 3)；采集的图片格式并没有出错，然后就上github看了一下issue;今天使用Jetson nano来配置人脸识别。至于想知道为什么，百度np.ascontiguousarray()就可以了吧。
TypeError: __array__(): incompatible function arguments. The following argument types are supported:
qq_42544924的博客
08-29 1284
配置GPU版的paddle环境：没有报错。验证是否正常安装时，执行：报错如下：发现是Python版本的问题，将python3.10降低至3.9，再执行：反馈如下：
NCCL填坑
热门推荐
卟灵卟灵哒的博客
08-21 2万+
NCCL填坑简介篇章一篇章二篇章三篇章四篇章五篇章五 简介 简单介绍一下，我这新鲜热乎的坑。真的是太少见的了。本人在做pytorch分布式训练，晚上找了个小demo准备先让服务器热一下身。 顺手将共享文件传输改成了tcp传输dist.init_process_group(init_method='file:///home/****/nfstest',backend="gloo",world_size=4,group_name="pytorch_test")变为dist.init_process_group(
Pandas1.0.5函数报错：TypeError: reset_index() got an unexpected keyword argument 'name'
最新发布
10-22
Pandas的`reset_index()`方法是在版本升级中可能会引入变化的功能。如果你正在使用的`pandas`版本是1.0.5，而你在调用`reset_index()`时指定了名为`name`的额外关键字参数，这可能是由于从旧版本到新版本的API变更导致的。在1.0.5之前，`name`可能是一个默认可选参数，但在后续版本中它可能已经变成了只读属性或者需要通过其他方式传递。 正确的用法应该是删除`name`参数，或者检查文档以确认当前版本的参数要求。如果`name`确实是你希望改变索引名的选项，你可以尝试使用`rename`或`set_name`方法来替换： ```python # 如果你想保留原有的索引，并设置新的列名 df = df.reset_index(drop=True) # 如果不需要原索引则设drop=True # 或者将name参数作为`level`参数来指定多级索引的情况 df = df.reset_index(level=0, name='new_index_name') # 或者直接修改索引名 df.index.name = 'new_index_name' ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值