运行faiss时出现libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8.

最新推荐文章于 2024-01-31 13:57:06 发布

In.Z

最新推荐文章于 2024-01-31 13:57:06 发布

阅读量1.8k

点赞数

CC 4.0 BY-SA版权

分类专栏：日常科研文章标签：机器学习 ubuntu python

本文链接：https://blog.youkuaiyun.com/weixin_38638559/article/details/115392559

在Ubuntu 18.04上，使用Python 3.8和faiss-gpu 1.7.0时遇到运行错误：libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8。该问题出现在进行机器学习推理和计算F1指标时。解决方案可参考相关博客文章。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

本机环境

ubuntu 18.0.4
python 3.8
faiss-gpu 1.7.0

问题描述

faiss可以正常import，但是运行.py文件进行推理和计算F1指标的时候，会出现如下问题。

INTEL MKL ERROR: /home/cad-1/anaconda3/envs/FS-KWS/lib/python3.8/site-packages/faiss/../../.././libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8.
Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so.

解决方法

＃　在代码开头写下
import mkl
mkl.get_max_threads()

参考文章

https://blog.youkuaiyun.com/acm_cxq/article/details/111358509

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

In.Z

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

无法加载libmkl_avx.so或libmkl_def.so：解决方案

03-26

710

无法加载libmkl_avx.so或libmkl_def.so：解决方案如果你在使用某些软件的时候，遇到了“无法加载libmkl_avx.so或libmkl_def.so”这样的错误提示，那么很可能是因为缺少了Intel数学库（Intel Math Kernel Library，MKL）所需要的动态链接库。Intel MKL 是一个高度优化的数学库，能够加速科学计算和数据分析的过程。但是，由于其一些组件需要依赖特定的硬件指令集，比如AVX和AVX2，因此在运行MKL相关程序时可能会出现上述错误。

ImportError: libmkl_intel_lp64.so: cannot open shared object file: No such file or directory

m0_38017273的博客

10-03

1809

ImportError: libmkl_intel_lp64.so: cannot open shared object file: No such file or directory

参与评论您还未登录，请先登录后发表或查看评论

运行faiss时出现faiss undefined symbol: mkl_sparse-optimize_bsr_trsm_i8

TUT我好菜啊

12-18

2818

首先说明，faiss只能在linux下安装，并且用pip安装必出错（没找到解决办法），所以推荐还是使用官方推荐的conda install faiss-cpu -c pytorch。当然如果这样能解决就不会有这篇文章了，import faiss不会报错，但是在实际使用中会出现 faiss undefined symbol: mkl_sparse-optimize_bsr_trsm_i8 Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libm

运行 python 程序报错 /libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8 的解决方法

qq_39779233的博客

01-16

1278

运行 python 程序报错 /libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8 的解决方法

使用faiss時出現 Intel MKL FATAL ERROR：Cannot load libmkl_avx2.so or libmkl_def.so

weixin_39123145的博客

07-01

1237

使用faiss時報了一個錯： Cannot load libmkl_avx2.so or libmkl_def.so 最後解決了，推測應該是因爲conda虛擬環境缺少某些環境變量導致的，在base環境下安裝就好了。 1.先安裝mkl conda install mkl 2.安裝cudatoolkit conda install cudatoolkit=8 3.安裝faiss-gpu ...

【faiss安装报错】faiss ImportError: libmkl_intel_lp64.so.1

manduner的博客

09-19

330

mkl2023.1.0的原因，降级mkl，安装mkl2021.4.0。

Intel MKL FATAL ERROR: Cannot load libmkl_avx512.so or libmkl_def.so.

qq_41111734的博客

02-09

2751

解决使用faiss的时候Cannot load libmkl_avx512.so or libmkl_def.so的问题完整的错误是： INTEL MKL ERROR: /opt/conda/envs/rapids/lib/python3.6/site-packages/faiss/…/…/…/libmkl_avx512.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8. Intel MKL FATAL ERROR: Cannot load lib

INTEL MKL ERROR: /usr/lib/x86_64-linux-gnu/libmkl_avx512.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8.

03-11

当遇到类似于 `INTEL MKL ERROR: /opt/conda/envs/rapids/lib/python3.6/site-packages/faiss/…/…/…/libmkl_avx512.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8` 这样的错误时，通常意味着程序尝试...

import faiss import numpy as np # 使用与第一个代码完全相同的参数 dim = 250 num_vectors = 1000 topk = 5 # 生成数据（显式指定 float32） data = np.random.rand(num_vectors, dim).astype('float32') # 创建索引并添加数据 index = faiss.IndexFlatIP(dim) index.add(data) # 搜索自身（模拟第二个代码） sim, idx = index.search(data, topk) print(sim.shape, idx.shape) 这个代码会异常就是只要是搜索很大规模的数据向量，就会报错：INTEL MKL ERROR: /home/frq/anaconda3/envs/pytorch/lib/python3.7/site-packages/faiss/../../.././libmkl_avx2.so.1: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8. Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so.1 or libmkl_def.so.1.】

最新发布

03-19

错误信息是关于未定义的符号mkl_sparse_optimize_bsr_trsm_i8，以及无法加载libmkl_avx2.so或libmkl_def.so。用户提到参考了四个引用，其中解决方法都是通过在代码开头导入mkl并调用mkl.get_max_threads()。我需要...

Linux卸载MKL算法库,linux anaconda中mkl库的一个坑

weixin_36368715的博客

05-08

1166

问题anaconda3中默认连接了一个本身的mkl库。代码中使用到mkl时，会报如下错误:spaINTEL MKL ERROR: ~/anaconda3/envs/py27/bin/../lib/libmkl_avx2.so: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8.Intel MKL FATAL ERROR: Cannot load l...

基于Linux平台的faiss框架cpu版本c++环境搭建

weixin_51631802的博客

02-24

873

基于linux的facebook的faiss框架c++环境部署

faiss报错：AttributeError: module ‘faiss._swigfaiss_avx2‘ has no attribute ‘delete_GpuResourcesVector‘

qq_50745337的博客

12-15

2131

初步推断是因为把faiss-cpu 和faiss-gpu 混装引起的一系列问题，下面给出我的解决过程。然后记下来关于faiss的包，例如faiss-gpu，faiss-cpu，faiss等。使用pip unstall faiss-cpu等语句将包删掉。，不知道cudatoolkit=11.3这句起作用没有。

有关Intel MKL的错误

好好好，这么写博客是吧

12-30

1114

【原创】 FAISS安装与使用

杨树的博客

11-27

9638

目录通过Makefile安装安装命令通过cmake安装安装命令：遇到问题 1、安装时报错，提示找不到gtest 2、安装时报错，提示找不到openBlas 3、提示找不到头文件 4、函数引用未定义 FAISS 是 Facebook AI 研究团队开源的针对聚类和相似性搜索库，它包含一种在任意大小的向量集合中搜索直到可能不适合在 RAM 中的新算法。它还包含用于评估和参...

编译Faiss-gpu【InterMKL】C++ 按步骤操作基本不会有问题的 python原理相同。

weixin_46400740的博客

01-31

1793

使用Faiss版本【1.7.4】该项目依赖于BLAS 组件使用InterMKL 编译的c++ faiss

【faiss】安装（一）

mjiansun的专栏

05-22

5622

faiss安装使用Anaconda安装使用Anaconda安装使用faiss是最方便快速的方式，facebook会及时推出faiss的新版本conda安装包，在conda安装时会自行安装所需的libgcc, mkl, numpy模块。 faiss的cpu版本目前仅支持Linux和MacOS操作系统，gpu版本提供可在Linux操作系统下用CUDA8.0/CUDA9.0/CUDA9.1编译的版本。注意，上面语句中的cuda90并不会执行安装CUDA的操作，需要提前自行安装。 #安装cpu版本 #

undefined symbol问题的查找定位与解决方法