
hadoop
@进行中
qq 1171901273
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
CentOS安装Hadoop单机版
1、首先安装jdk 下载jdk-7u45-linux-x64.tar.gz 地址https://pan.baidu.com/s/1HlkngnG5H8JAdm0zYezEyg 提取码3z6s 放到/usr/local目录下 解压jdk, tar -zxvfjdk-7u45-linux-x64.tar.gz 配置环境变量 vim /etc/profile 在文件...原创 2019-01-17 11:17:45 · 23714 阅读 · 16 评论 -
hadoop执行wordcount程序、本地编写、放到hadoop集群上运行
在执行hadoop jar命令之前,必须先启动hadoop集群 1、首页简历maven工程,导入hadoop依赖 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://mave...原创 2019-03-10 16:41:50 · 860 阅读 · 0 评论 -
hadoop常用操作指令
查看 / 根目录下的文件目录 [root@hadoop1 ~]# hadoop fs -ls / 19/03/11 01:50:13 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable Fo...原创 2019-03-10 18:03:57 · 546 阅读 · 0 评论 -
hadoop在windows下安装
下载hadoop地址https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 这是一个镜像地址,可以找到很多hadoop的版本 我下载的是2.6.5的版本 如果镜像找不到可以换地址找http://hadoop.apache.org(官网) 将下载的hadoop2.6.5解压放在你喜欢的文件夹下 由于在linux和wi...原创 2019-03-11 13:38:53 · 7674 阅读 · 0 评论 -
windows中eclipse集成hadoop
首先下载hadoop的eclipse插件地址,有 链接:https://pan.baidu.com/s/1KzRDB1vp2izXAsljfPoZ7g 提取码:rvw9 将下载的jar包放到eclipse的plugins文件夹下 重新启动eclipse,就能看到hadoop的插件,配置好 hadoop目录 打开hadoop视图 新建hadoop连接 连接配置...原创 2019-03-11 15:45:53 · 970 阅读 · 0 评论 -
windows中使用eclipse搭建hadoop项目
当eclipse集成了hadoop插件之后,搭建hadoop项目就简单多了 eclipse集成hadoop参考地址https://blog.youkuaiyun.com/lu1171901273/article/details/88395028 打开eclipse新建项目,选择Map/Reduce Project 输入名称 点击finish 它就会自动的把hadoop依赖的jar文件加到项目中 ...原创 2019-03-11 15:52:22 · 1288 阅读 · 0 评论 -
在windows中使用debug执行hadoop程序
首先,你得先搭建hadoop项目,推荐地址 https://blog.youkuaiyun.com/lu1171901273/article/details/88395474 编写hadoop程序 package cn.lx.bigdata.mr.wcdemo; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop...原创 2019-03-11 16:13:23 · 329 阅读 · 0 评论 -
Hadoop之—— WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform.
解决方案链接地址 https://blog.youkuaiyun.com/l1028386804/article/details/51538611原创 2019-05-07 16:41:11 · 232 阅读 · 0 评论