hadoop的安装模式分为三种:1. 单机模式 2.单机伪分布模式 3. 真正的分布模式
当我以单机模式安装成功后想试着运行自带的例子WordCount计算文件中单词的数量,但是运行后不管怎么设置总是提示outofmemory error,我尝试设置conf/hadoop-env.sh 中的
export HADOOP_HEAPSIZE=-Xmx512m 再次运行发现不起作用。于是在eclipse 中尝试运行WordCount 类发现没有问题,这说明计算机的当前内存是足够的,但为什么在终端中运行确不行,大家估计也都想到了就是在终端中设置下jvm 的内存不就行了吗,所以我尝试使用 HADOOP_CLIENT_OPTS=-Xmx512m bin/hadoop jar test.jar demo.hadoop.WordCount input/test.txt output 运行发现运行成功了,遇到类似问题的朋友可以尝试下。
本文详细阐述了在使用Hadoop单机模式安装后遇到内存不足错误的解决方案,通过调整Hadoop配置文件及终端jvm内存设置成功运行WordCount计算任务。并分享了解决此类问题的方法,帮助读者避免类似困扰。
2135

被折叠的 条评论
为什么被折叠?



