
hadoop
不屑哥
这个作者很懒,什么都没留下…
展开
-
Java操作HDFS
1、添加hadoop相关的maven依赖 <!-- hadoop依赖 --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifactId> <version>2.9原创 2018-02-27 09:56:52 · 570 阅读 · 1 评论 -
hadoop集群部署
1、配置ip映射,修改/etc/hosts文件192.168.153.129 hadoop1192.168.153.130 hadoop2192.168.153.136 hadoop32、配置zookeeper集群(数量必须是奇数,起码要3台) (1)在/zookeeper-3.5.3-beta/conf/添加一个zoo.cfg配置文件cp -r zoo_sample.cfg zoo.c...原创 2018-02-24 16:05:26 · 460 阅读 · 0 评论 -
java编写mapreduce并在hadoop中运行
原文:https://www.cnblogs.com/jetdw/p/7238105.html?utm_source=itdadao&utm_medium=referral1、mapreduce代码package test.mapreduce;import java.io.IOException;import java.util.StringTokenizer;import or...转载 2018-03-06 16:22:59 · 5856 阅读 · 0 评论 -
java编写mapreduce的分区例子
1、源文件good good good good good good goodgood good good good good good goodgood good good good good good goodgood good good good good good goodgood good good good good good goodgood good good good ...原创 2018-03-06 17:31:17 · 519 阅读 · 0 评论 -
hadoop单机部署
文章:https://blog.youkuaiyun.com/rongbo_j/article/details/50017853转载 2018-03-23 15:35:06 · 1867 阅读 · 0 评论 -
hbase单机部署
原文:https://www.cnblogs.com/oraclestudy/articles/5665780.html其中配置hbase-site.xml文件<configuration> <!-- 指定hdfs的连接 --> <property> <name>hbase.rootdir</name>...转载 2018-03-24 16:23:47 · 528 阅读 · 0 评论 -
Hive单机部署
原文:https://www.cnblogs.com/dxxblog/p/8193967.html1、前提(1)已经配置hdfs(2)已经配置mysql2、下载hivehttp://mirror.bit.edu.cn/apache/hive/本人下载的是apache-hive-2.3.3-bin.tar.gz3、解压cd /usr/local/hadoop-stand-alonetar -xzvf...转载 2018-04-14 16:08:55 · 4715 阅读 · 0 评论 -
python操作hdfs
原文:https://www.cnblogs.com/Jims2016/p/8047914.html可以使用python的hdfs库(资料https://pypi.org/project/hdfs/),pip下载即可# !coding:utf-8import sysfrom hdfs.client import Client# 关于python操作hdfs的API可以查看官网...原创 2018-06-29 17:24:02 · 19900 阅读 · 0 评论