
大数据
梦Dreamer
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop系列之Storm安装和使用(五)
zookeeper单机模式的安装使用 下载zookeeper地址:https://mirrors.cnnic.cn/apache/zookeeper/stable/ tar -zxf apache-zookeeper-3.5.6-bin.tar.gz #解压 mv apache-zookeeper-3.5.6-bin zookeeper #修改名称 chown -R hadoop zook...原创 2019-12-27 16:45:53 · 727 阅读 · 0 评论 -
Hadoop系列之Spark安装和使用(四)
spark简介 Spark 的主要抽象是分布式的元素集合(distributed collection of items),称为RDD(Resilient Distributed Dataset,弹性分布式数据集),它可被分发到集群各个节点上,进行并行操作。RDDs 可以通过 Hadoop InputFormats 创建(如 HDFS),或者从其他 RDDs 转化而来。 Spark安装步骤 ...原创 2019-12-25 17:38:25 · 861 阅读 · 0 评论 -
Hadoo系列之Hive安装和使用(三)
hive下载地址:http://www.apache.org/dyn/closer.cgi/hive/ hive的安装 tar -zxvf apache-hive-3.1.2-bin.tar.gz #解压 mv hive #修改文件名 chown -R hadoop:hadoop hive #修改文件权限 mkdir -p hive/warehouse #创建元数据存储文件夹 c...原创 2019-12-02 16:40:01 · 1116 阅读 · 0 评论 -
Hadoop系列之HBase环境搭建和使用(二)
HBase环境准备 HBase下载地址:http://archive.apache.org/dist/hbase/ tar -zxvf hbase-1.4.11-bin.tar.gz #解压hbase vim /etc/profile #配置hbase环境变量 在最后加上export PATH=$PATH:/usr/local/soft/hbase-1.4.11/bin source /...原创 2019-11-15 15:37:38 · 400 阅读 · 0 评论 -
Hadoop系列之Hadoop环境搭建(一)
环境简介 centos系统 jdk(jdk的安装和配置,请参考Linux系列之安装jdk(二)) hadoop3.2.1 一、创建hadoop用户 useradd -m hadoop -s /bin/bash #创建新用户hadoop passwd hadoop #输入密码(若提示“无效的密码,过于简单”则再次输入确认就行) visudo #为hadoop用户增加管理员权限 增加这...原创 2019-11-07 16:58:31 · 1000 阅读 · 0 评论