- 博客(3)
- 收藏
- 关注
RSS订阅原创 关于hbase2.0与storm-hbase扩展包不兼容问题的解决方案
关于hbase2.0与storm-hbase扩展包不兼容问题的解决方案1、问题描述2、解决方案 1、问题描述 在HDP3.1的版本中，hbase的版本更新到了2.0，storm的版本为1.2.1，如果想用storm自集成的storm-hbase工具包，就会面临无法正常写入hbase的问题，主要原因是因为hbase2.0对HTable的一些构造函数的弃用： 所以在创建连接时就会提示无法找到该方法。...
2019-01-07 14:36:18
997
原创 hdp-3.1集成storm-1.2.1任务无法正常提交解决方案
hdp-3.1集成storm-1.2.1任务无法正常提交解决方案1、问题描述2、解决方案 1、问题描述 最近把hdp更新到了3.0.0，自带的storm版本是1.2.1,但是在提交任务的时候，出现了始终无法找到主类的问题： Google说是jdk版本的问题，于是换了jdk版本，还是出现这个问题。没办法只能跟踪源码，storm的执行脚本是storm.py,大家仔细看就会发现问题，问题出在storm在...
2019-01-03 14:18:50
711
原创 集群挖矿脚本排查日记
集群挖矿脚本排查日记1、事件描述2、关键点总结3、解决方案和建议 1、事件描述 集群挖矿脚本，这种事情遇到过好几次了，以前的基本上都是通过yarn的8088端口进来的，然后运行很多的application直接撑爆你的cpu，这种只需要关掉8088的外网访问端口基本就能解决。但是这一次遇到一个非常恶心的挖矿脚本，废fa不多说，先上脚本（如图）： 大家可以看到这个脚本是有多恶心，这个还不是最恶心的地方...
2019-01-02 13:20:34
1299
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人