【解决scikit_learn.libs/libgomp-d22c30c5.so.1.0.0:cannot allocate memory in static TLS block问题】

最新推荐文章于 2025-06-26 16:41:09 发布

钱塘江渔夫

最新推荐文章于 2025-06-26 16:41:09 发布

阅读量9.7k

点赞数 19

CC 4.0 BY-SA版权

分类专栏： mindspore 文章标签： ubuntu widedeep

本文链接：https://blog.youkuaiyun.com/lhb_0531/article/details/121508293

mindspore 专栏收录该内容

6 篇文章

订阅专栏

本文探讨了在MindSpore 1.5环境下，针对AARCH64平台的WideDeep模型训练遇到的libgomp TLS内存占用问题。提供了两种解决方案：一是通过设置LD_PRELOAD环境变量加载特定库，二是升级glibc版本。参考了相关bug报告和社区讨论。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

前言

MindSpore AI框架适配WideDeep模型训练问题处理

1.测试环境

ubuntu18.04 aarch64 mindspore r1.5 python3.7.5 scikit_learn 1.0.1 glibc2.17

2.问题现象

widedeep模型训练报错

3.错误分析

经过网络查询，这是libgomp在arm平台上的一个bug。libgomp gets the statically allocated TLS space that it needs, before the optimization of handing out that space to other libraries kicks in .
即：libgomp-d22c30c5.so.1.0.0运行时占用了TLS部分内存.

4.解决方案

方法一：
如参考文献2，glibc版本2.17不变，显示声明环境变量LD_PRELOAD如下：

export LD_PRELOAD=$LD_PRELOAD:/usr/local/python3.7.5/lib/python3.7/site-packages/scikit_learn.libs/libgomp-d22c30c5.so.1.0.0

方法二：
如参考文献1，升级glibc版本到2.32.

5.参考文献

[1] Bug 1722181 - libgomp.so.1: cannot allocate memory in static TLS block, https://bugzilla.redhat.com/show_bug.cgi?id=1722181
[2] Autokeras trying to import libgomp-d22c30c5.so.1.0.0 from scikit-learn on arm64/aarch64 #1475, https://github.com/keras-team/autokeras/issues/1475