Hadoop
关注
分享
扫一扫
u25th_engineer
这个作者很懒，什么都没留下…
展开
-
Ubuntu 16.04 LTS启动Hadoop 2.6.0遇到WARN util.NativeCodeLoader: Unable to load native-hadoop library ...
问题： 系统：Ubuntu 16.04 LTS Hadoop版本：hadoop-2.6.0-cdh5.9.3 Hadoop可以正常启动，但是每次都会报警，警告信息如下：WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platfo...原创 2019-07-18 10:02:54 · 635 阅读 · 0 评论 -
解决Ubuntu 16.04 LTS设置免密启动Hadoop 2.6.0无效的问题
设置免密启动步骤（我这里说的很简略，因为不是本文重点，不清楚的可以看其他博客）： ①连续执行以下命令：cd ~/.ssh ssh-keygen -t rsa此时如果有提示“是否覆盖”，请视实际情况而定，本人对此造成的不良后果不负责任。cat ./id_rsa.pub >> ./authorized_keys 此...原创 2019-07-18 10:15:00 · 418 阅读 · 0 评论 -
Ubuntu 16.04 LTS上用IDEA编程操作hive报错：Table or view not found
Table of Contents 系统： 环境： 问题： 原因： 解决方法： 参考连接： 这个问题（Exception in thread "main" org.apache.spark.sql.AnalysisException: Table or view not f...原创 2019-07-26 14:49:51 · 2333 阅读 · 0 评论 -
本地Ubuntu 16.04 LTS空闲时以及运行Hadoop与Spark作业时系统状态对比
这条博文仅仅是记录一下Hadoop与Spark作业时本地机子的工作状态。 本地硬件环境如图1至3所示，亦可参见本人博客；软件环境另参见本人博客。图1 系统硬件概况图2 固态硬盘系统分区概况图3 机械硬盘系统分区概况 接下来分别展示系统在空闲（未运行Hadoop或Spark作业）时、运行Hadoop作业时、同时运...原创 2019-07-27 10:23:02 · 367 阅读 · 0 评论