java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray

最新推荐文章于 2022-04-02 16:24:31 发布

Constantdropping

最新推荐文章于 2022-04-02 16:24:31 发布

阅读量2.5k

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop 文章标签： HDFS

本文链接：https://blog.youkuaiyun.com/Constantdropping/article/details/84636400

Hadoop 专栏收录该内容

4 篇文章

订阅专栏

java客户端连接HDFS报错：

Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V

在网上查找原因后，发现这是由于hadoop.dll 版本问题引起的。

需要选择正确的版本，查询hadoop版本，如hadoop-2.6.0，那么需要下载相同版本的hadoop.dll，或者版本稍高。

将下载hadoop.dll放到HADOOP_HOME的bin目录下，同时copy到windows系统的c:/window/system32/下。

测试后，正常。

附：

hadoop.dll下载地址：

hadoop-2.6.0：https://github.com/sdravida/hadoop2.6_Win_x64/blob/master/bin/hadoop.dll；

其他版本：https://github.com/steveloughran/winutils

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Constantdropping

关注关注

0
点赞
踩
4

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO错误的处理方法，适用于hadoop3.1.3

weixin_51273963的博客

07-03

5534

hadoop3.1.3、java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.Nativ、idea

Exception in thread “main“ java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$PO

m0_55901666的博客

12-18

3525

Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$POSIX.stat(Ljava/lang/String;)Lorg/apache/hadoop/io/nativeio/NativeIO$POSIX$Stat;

参与评论您还未登录，请先登录后发表或查看评论

hadoop winutils合集,org.apache.hadoop.util.NativeCrc32

04-12

该wintuils合集包含hadoop2.6.0、2.6.3、2.6.4、2.7.1、2.8.0、2.8.3、3.0.0版本，请需要的小伙伴们前来下载，用以解决本地测试报错问题。 (将bin文件放到/hadoop/下，hadoop.dll和wintuils.exe放到/windows/system32/下)

java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray

baidu_21349635的专栏

06-08

1728

/** * 上传 */ @Test public void putHDFS() throws IOException, URISyntaxException, InterruptedException { //创建配置信息 Configuration conf = new Configuration(); //...

Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeCo...

weixin_33881753的博客

09-13

190

在eclipse上运行hadoop报错:Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjav，这个问题折腾了我很久，后来找到方法解决。描述一下:电脑是win8.1的64位...

org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String；JZ)

weixin_44347111的博客

09-12

681

通过java连接hdfs的时候，报了上面出现的问题，甚是头秃，下面给出解决办法百度发现是自己操作系统的问题，需要将把hadoop.dll和winutil.exe两个文件放到到C:\windows\system32 里，如果已经存在，就直接覆盖。下载地址：https://github.com/steveloughran/winutils上下载，自行选择对应的hadoop版本。大家自行选择需要的版本，从里面挑出hadoop.dll和winutil.exe两个文件放到到C:\windows\sy..

Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeCo

Jornici的博客

09-18

1588

Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 这是由于hadoop.dll 版本问题，2.4之前的和自后的需要的不一样

Tomcat启动时报错：java.lang.UnsatisfiedLinkError的解决

08-30

《解决Tomcat启动时的java.lang.UnsatisfiedLinkError报错》在日常开发和运维过程中，遇到Tomcat启动时报错“java.lang.UnsatisfiedLinkError”可能会让开发者感到困扰，尽管这种错误并不直接影响项目的正常运行，...

hadoop java.lang.UnsatisfiedLinkError

09-12

解决方案：Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeCo

idea中Exception in thread “main“ java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.Native

qq_56572867的博客

04-02

927

这个困扰了我三天的问题，之前已经不想解决了，直到再一次遇到，决定彻底干它，之前也在网上搜了一些解决它的办法，什么改变环境还有加入NativeIO，都没有用，不过最后还是使用了NativeIO的方法解决了，之前一直没有用的原因是，没有把文件放对位置正确的位置应该是放在java包下，和项目包并行，而且必须是这个包名org.apache.hadoop.io.nativeio和NativeIO这个类名，不然不能覆盖原来的这个类下面附上NativeIO的源码，有的包可能要自己引一下，细节上应该不用说了

Hadoop实战（二），org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray

kngines

04-10

6261

场景描述探索Hadoop开发经验，从而进一步理解Haddoop源码设计及核心思想实验环境伪分布式 hadoop 2.6.4 实验内容打印HDFS目录信息在HDFS中新建文件写入中英文数据代码实现具体包、配置不在详述 . package hadoop; import java.io.IOException; import java.io.InputStrea...

java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums(IIL...

Gamedev

01-22

3673

在window Eclipse中运行Hadoop和Spark程序时会遇见如下异常错误java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums(IILjava/nio/ByteBuffer;ILjava/nio/ByteBuffer;IILjava/lang/String;J

win7上代码连接hadoop出现错误：org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIIL...

weixin_33856370的博客

11-16

742

　　在idea和eclipse中调试hadoop中hdfs文件，之前好好的，结果突然就出现java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 的报错，查询网上的各种资料之后都说：“...

Windows连接远程hdfs出现java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComput错误

Aspirin's Nest

08-17

4480

背景以前写spark都没有读取过hdfs文件，而是读取本地文件，今天试了一下读取公司服务器的文件，做一个简单的word count结果出问题了。 Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums(IILjava/nio/ByteBuff...

亲测有效Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nati

qq_41371858的博客

11-23

599

Exceptionin thread “main” java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeCo 这是因为hdoop版本不对。去我的云盘里下载一下。链接：https://pan.baidu.com/s/1MSGq_ESPKujRmO655jlkVw 提取码：x3sw 下载之后配置下环境变量就...

scala问题：Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeC

qq_44817611的博客

11-15

1815

scala问题：Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 报错详情： Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunked

windows下测试hdfs报错：java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChu

jerome_jun的专栏

07-25

990

测试hdfs读写文件的时候，已经设置了环境变量，在eclipseLuna 版本下正常，同样的代码在eclipseOxygen.3a Release (4.7.3a)下报错：java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums(IILjava/nio/ByteBuffer;ILjava/nio/ByteBuffer;IILjava/lang/String;JZ)V 解决办..

Caused by:java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy()Z at org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy(Native Method) at org.apache.hadoop.1o.compress.SnappyCodec.checkNativeCodeLoaded(SnappyCodec.java:63)at org.apache.hadoop.io.compress.SnappyCodec.getDecompressorType(SnappyCodec.iava:192)

06-08

这个错误通常表示Hadoop在尝试加载本地库（Native Library）时未能成功。在这个特定的例子中，Hadoop尝试加载Snappy压缩库，但是它在加载时发生了错误。可能是因为找不到库文件，或者库文件不是可用的有效文件。为了解决这个问题，你可以尝试以下几个步骤： 1.检查是否已经正确安装了Snappy库。你可以检查是否已经将Snappy库添加到LD_LIBRARY_PATH环境变量中。 2.检查是否已经正确配置了Hadoop。你可以查看Hadoop配置文件，并确保已经正确配置了Snappy压缩库。 3.检查是否已经正确配置了操作系统。你可以查看操作系统的相关文档，并确保已经正确配置了Snappy库。如果你仍然无法解决这个问题，那么你可以考虑尝试使用其他的压缩库，或者在Hadoop中禁用压缩功能。