
大数据
文章平均质量分 83
奶茶多冰三分糖
"比编程能力更重要的是持续学习"
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
MySQL安装
1、一堆rpm包的集合 2、先解压了 3、将linux上自带的mysql-libs卸载掉,选择 y 4、完成后进到刚刚解压缩的目录下安装mysql, 依次安装rpm -ivh mysql-community-common-5.7.19-1.el7.x86_64.rpm rpm -ivh mysql-community-libs-5.7.19...原创 2018-04-17 15:12:10 · 315 阅读 · 0 评论 -
搭建HBase环境
HBase: 一个结构化数据的分布式存储系统,具体思想参考之前写的Google的三篇论文中的 BigTable 大表1、解压安装包到指定的文件夹中 2、设置环境变量vi ~/.bash_profileHBASE_HOME=/root/training/hbase-1.3.1 export HBASE_HOMEPATH=$HBASE_HOME/bin:$PATH export PATHsour...原创 2018-04-20 13:25:40 · 485 阅读 · 0 评论 -
Spark环境搭建
1、官网下载安装包再通过WinSCP传到服务器上,并解压 2、进入安装目录并修改配置文件 (1)spark-env.sh 的最后添加(配置信息顾名思义)export JAVA_HOME=/root/training/jdk1.8.0_144 export SPARK_MASTER_HOST=bigdata11 export SPARK_MASTER_PORT=7077 ...原创 2018-05-13 11:30:12 · 406 阅读 · 0 评论 -
Exception in thread "main" java.net.BindException: 无法指定被请求的地址: Service 'sparkMaster' failed 错误处理
1、搭建 Spark 的HA环境时报如下错误Spark Command: /root/training/jdk1.8.0_144/bin/java -cp /root/training/spark-2.1.0-bin-hadoop2.7/conf/:/root/training/spark-2.1.0-bin-hadoop2.7/jars/* -Xmx1g org.apache.spark.dep...原创 2018-05-13 13:40:47 · 3701 阅读 · 3 评论