
大数据学习
A卖鞋的乱臣贼子
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
爬虫软件的使用
一、软件的下载安装二、软件界面介绍三、软件的使用截图效果截图一效果截图二四、爬虫软件的意义原创 2019-03-11 20:51:38 · 1551 阅读 · 0 评论 -
HDFS命令和java API
熟练掌握HDFS的Shell访问和Java API访问shell 操作多个 HDFS 集群两个集群运行相同版本的 Hadoop。两个 HDFS 集群之间传输数据,默认情况下 distcp 会跳过目标路径下已经存在的文件。[hadoop@cloud0042 hadoop-2.2.0-x64]$ hadoop distcp hdfs://cloud004:9000/weather hdfs:/...原创 2019-05-19 22:49:15 · 355 阅读 · 0 评论 -
MapReduce 分布式计算系统
一,实验步骤原创 2019-05-19 23:10:19 · 250 阅读 · 0 评论 -
HBase配置(伪分布式模式)
HBase安装配置①下载压缩包(选择与自己安装的Hadoop版本的兼容版本,见后面附录)官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/选择稳定版hbase-1.4.9-bin.tar.gz,在Windows里面下载。②将压缩包从Windows传输到Linux当前目录下SecureCRT 【File】→【Co...原创 2019-05-19 23:21:38 · 809 阅读 · 0 评论 -
NoSql 在Linux(CentOS)上安装memcached及使用
第一步,确定目标:目前的环境是Linux CentOS,安装memcached,然后学习下基本的使用。第二步,下载安装包:由于安装libevent是安装memcached的前提,所以此处我们需要下载两个安装包,分别是libevent和memcached。1.下载libevent,我在http://libevent.org/这里下载了最新的版本 libevent-2.0.22-stable....原创 2019-05-19 23:33:14 · 257 阅读 · 1 评论 -
Hive安装与配置详解
评论- 6Hive安装与配置详解hive安装和配置hive的测试hive安装和配置安装一:下载hive——地址:http://mirror.bit.edu.cn/apache/hive/这里以hive-2.1.1为例子,如图:将hive解压到/usr/local下:[root@s100 local]# tar -zxvf apache-hive-2.1.1-bin.tar.g...原创 2019-05-20 12:10:09 · 73724 阅读 · 20 评论 -
spark搭建伪分布式环境
软件准备• 一台Linux虚拟机我用的CentOS-6.6的一个虚拟机,主机名为repo参考在Windows中安装一台Linux虚拟机• spark安装包下载地址:https://mirrors.aliyun.com/apache/spark/我用的spark-2.2.0-bin-hadoop2.7.tgz要根据自己机器中的hadoop版本选择对应的spark版本(1) 把安装包...原创 2019-05-20 12:32:41 · 569 阅读 · 0 评论