大数据
关注
分享
扫一扫
4.11.12
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
zookeeper安装部署与使用
Zookeeper安装部署安装包下载地址：https://apache.org/dist/zookeeper/1.下载安装包然后上传到主节点rz，centos上可使用 wget 地址2.解压缩：tar xf 安装包3.移动到/opt目录下mv zookeeper-3.4.12 /opt4.修改目录权限命令：chown -R hadoop:hadoop zookeeper...原创 2018-12-17 20:07:55 · 227 阅读 · 0 评论 -
hive实验
利用Hive对某网站的用户数据进行分析。1.创建dblab数据库 命令：create database dblab;2. 在dblab数据库下创建bigdata_user表，该表中的各种属性如下： 字段名 类型 id int uid string ...原创 2018-12-17 19:54:03 · 1543 阅读 · 0 评论 -
Pig安装部署与实例
安装包地址：https://mirrors.tuna.tsinghua.edu.cn/apache/pig/前提：Hadoop安装成功pig安装部署：1.将准备好的安装包上传到虚拟机rz2.查看是否上传成功3.解压缩命令：tar xf pig-0.13.0.tar.gz4.将解压缩后的文件移动到/opt目录下（因为我的一些有关实验都在这个目录下，所以...原创 2018-12-14 14:52:23 · 4349 阅读 · 1 评论 -
hive内部表与外部表
知识梳理：创建表的时候没有external的是内部表，有external的是内部表内部表删除会删除元数据以及存储数据，外部表仅删除元数据内部表默认位置/user/hive/warehouse，外部表位置自己设定内部表：1.进入hive，查看存在的数据库，使用其中的一个数据库，在其中显示已经存在的表，然后创建一个新表（表名word）2.在本地创建一个文件，内容如...原创 2018-12-10 21:04:32 · 321 阅读 · 0 评论 -
hive安装部署
前情提要：Hadoop架构成功，MySQL部署成功，关闭防火墙，关闭SELINUXMySQL安装：https://blog.youkuaiyun.com/weixin_43854358/article/details/84869110准备工作：hive安装包：http://mirrors.hust.edu.cn/apache/hive/stable-2/apache-hive-2.3.4...原创 2018-12-06 14:40:04 · 189 阅读 · 0 评论 -
hbase数据导入导出
hbase数据导入将本地文件(test.csv)上传到hdfs的根目录下,然后导入数据到hbase1.本地写一个文件进行测试，文件名为test.csv,内容如下：2.将文件上传到Hadoop3.查看是否上传成功（文件存在，表示成功）4.进入hbase shell 创建表 hbase-tb1-001,列族为cf5.执行文件导入（Hadoop用户中执行）格式...原创 2018-12-05 17:53:23 · 6113 阅读 · 1 评论