- 博客(9)
- 收藏
- 关注
RSS订阅原创 Hadoop集群搭建（四）----sqoop和flume安装
这篇博客就继续接着说如何在虚拟机中安装及配置flume和sqoopⅠ，相关组件（附带下载链接）hadoop生态圈还有很多的组件。例如Spark,Hbase,hive等等，因为篇幅问题，这些软件在此处不介绍，给出下载链接，其余的安装教程将会在之后的博客给出,(本文需要使用链接中的flume和sqoop，将其安装包上传到root目录)集群组件下载链接密码：zccyⅡ，安装Flume1，解压安装包将准备好的flume安装包解压tar -xvf /root/apache-flume-1.8.0-bi
2020-10-09 13:44:40
605
1
原创 Hadoop集群搭建（一）----伪分布式集群与eclipse的安装
本文主要介绍了虚拟机网络配置，以及hadoop与eclipse的安装与配置
2020-10-08 11:48:02
1629
1
原创 Hadoop集群搭建（三）----hive，zookeepear和hbase安装
这篇博客就继续接着说如何在虚拟机中安装及配置hive和hbaseⅠ，相关组件（附带下载链接）hadoop生态圈还有很多的组件。例如Spark,Hbase,hive等等，因为篇幅问题，这些软件在此处不介绍，给出下载链接，其余的安装教程将会在其余的博客给出,(本文需要使用链接中的hbase和hive，将其安装包上传到root目录)集群组件下载链接密码：zccyⅡ，安装hive一，解压hive源文件并改名tar -zxvf ~/apache-hive-2.3.6-bin.tar.gzmv apac
2020-10-08 11:15:31
422
原创 启动zookeepear服务报错：无法找到路由的解决办法
原因很简单：我人蠢又自负查看日志文件发现无法找到路由出现这个问题的原因只有两种一种是监控端口未被监控一种是防火墙问题最初我以为是因为监控端口问题，自动排除了防火墙因为我记得我已经为master节点永久关闭防火墙了（事实也确实如此）所以我去找源码，最终发现了这样的一条判定规则使这条判定规则失效，即可监控所有端口所以在自己的cfg文件加上一条quorumListenOnAllIPs=true好了，完事，应该可以了重新运行emmm，还是出错了仔细思考一下，会不会是因为某些启动时需
2020-10-08 10:08:59
356
原创 Hadoop集群搭建（二）----spark环境搭建
Hadoop集群搭建（二）----虚拟机安装eclipse及spark环境搭建Ⅰ，相关组件（附带下载链接）Ⅲ，安装eclipse上一篇博客讲了如何搭建hadoop集群及其网络环境(传送门：Hadoop集群搭建（一）----Hadoop集群安装及其网络配置)这篇博客就继续接着说如何在虚拟机中安装eclipse以及如何搭建Spark环境Ⅰ，相关组件（附带下载链接）hadoop生态圈还有很多的组件。例如Spark,Hbase,hive等等，因为篇幅问题，这些软件在此处不介绍，给出下载链接，其余的安装教程将
2020-10-06 17:12:28
543
原创 虚拟机节点启动异常的解决方法
有些时候我们在使用命令./start-dfs.sh./start-yarn.sh之后，再使用jps命令，会发现缺少很多进程对于这种情况，一般有下面几个原因，我在下面做了归纳一，未使用root账户对hadoop集群服务的操作需要权限，如果没有使用root(或者hadoop账户)，请更换用户后再进行操作二，未初始化namenode要启动Namenode首先需要对他进行初始化，想想自己之前有没有输入指令hdfs namenode -format，如果没有，先输入指令./stop-dfs.sh和
2020-10-02 21:21:04
3142
原创 虚拟机ping不通的几种常见解决方法
配置虚拟机网络是搭建Hadoop集群的关键一步，但是这里很容易出现故障，为此，这篇博客介绍了几种常见ping异常的解决方法Ⅰ，虚拟机与虚拟机不相通我们在测试网络的时候，首先需要测试能不能连接到同一网段的虚拟机，比如我的伪分布式集群有三个机器（master：192.168.0.2 ,slave ：192.168.0.3,slave2：192.168.0.4），我在master中执行ping 192.168.0.2，若是ping不到，1,查看网卡配置,是否填错ipvi /etc/sysconfig/ne
2020-10-02 18:27:38
66816
3
原创 使用单链表实现多项式的加法和乘法运算（java版）
开始前说些走流程的废话，由于是第一次发博客，表达和讲解方法都不是那么成熟，如果有什么地方有待改正，欢迎并感谢亲们在评论区留言（让我感受一下捏你们对萌新的善意，谢谢谢谢） 那么正式开始
2019-10-28 20:36:39
3868
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人