
Hadoop
wwlhz
这个作者很懒,什么都没留下…
展开
-
Hbase thrift 写数据Broken pipe问题
问题背景测试环境是三台服务器搭建的Hadoop分布式环境。Hadoop版本是:hadoop-2.7.3;hbase-1.2.4; zookeeper-3.4.9。 使用thrift c++接口向hbase中写入数据,每次都是刚开始写入正常,过一段时间就开始报错。 但之前使用的hbase-0.94.27版本就没遇到过该问题,配置也相同,一直用的好好地。解决办法通过抓包可...原创 2017-02-20 13:43:27 · 4664 阅读 · 0 评论 -
Hbase集群启动流程
Hbase集群启动流程共有三个节点:hmaster、hslave1、hslave2,三个节点上都安装有: zookeeper、hadoop、hbase。启动顺序:zookeeper(每一台)-> hadoop(主节点) -> hbase (主节点) 在三个节点上依次启动zookeeper。需要现切换到预先设置的hbase指定用户。 [hbase@hmaster bin]$ ./z原创 2017-06-14 17:18:47 · 11687 阅读 · 0 评论 -
Hbase故障修复过程
Hbase故障修复过程故障原因可能是虚拟主机突然断电,hbase的所有节点都在这个虚拟机上,因此全部停机。启动起来后,发现很多region丢失:is not online。检测HDFS文件是否损坏使用hadoop命令: hadoop fsck / , 可以看到/ 目录下fs是否是Healthy。查看-ROOT-、.META.表的状态通过可视化界面查看-ROOT-...原创 2018-03-30 11:11:51 · 2845 阅读 · 0 评论 -
Hbase Thrift集群问题总结(1)
Hbase thrift 1 问题汇总Hbase thrift 启动线程池:./bin/hbase thrift start -threadpool , 报下面的错误:Exception in thread "thrift-worker-103" java.lang.OutOfMemoryError: unable to create new native threadat java...原创 2018-04-13 16:43:02 · 3450 阅读 · 0 评论