使用hadoop命令对hdfs文件系统进行操作时(例如getmerge、put等)可能会遇到OutOfMemoryError这样的异常,如下图:
解决方法:增大hadoop client的最大内存占用限制。
命令: export HADOOP_CLIENT_OPTS=”-Xmx10g”,具体是10g还是其他数值可以根据自己机器的具体情况调整。
使用hadoop命令对hdfs文件系统进行操作时(例如getmerge、put等)可能会遇到OutOfMemoryError这样的异常,如下图:
解决方法:增大hadoop client的最大内存占用限制。
命令: export HADOOP_CLIENT_OPTS=”-Xmx10g”,具体是10g还是其他数值可以根据自己机器的具体情况调整。