Hadoop纠删码算法启用ISA-L加速库

本文详细介绍了如何在Hadoop 3.1.0版本中启用ISA-L存储加速库,包括必要的软件版本、安装步骤及验证方法。通过启用ISA-L,可显著提升HDFS纠删码的编码和解码效率,特别是在处理大规模数据时效果显著。

在前文HDFS纠删码(Erasure Coding)一文中提到,HDFS启用ISA-L存储加速库,有有助于提升HDFS纠删码的编码和解码效率。

版本说明如下:

软件 版本
Hadoop 3.1.0
isa-l 2.28.0
nasm 2.14.02
yasm 1.2.0

启用ISA-L步骤如下:

安装yasm和nasm

在Hadoop集群所有节点上安装yasm和nasm。

###########以下步骤使用root用户#############
yum install -y yasm
yum install -y nasm

注意:isa-l-2.28.0对nasm和yasm有版本要求,低版本在安装时会报错。

编译安装isa-l-2.28.0

在Hadoop集群所有节点上编译安装isa-l-2.28.0。

####
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值