linge1995的博客

一、HBase的迁移步骤：获取表-->压缩-->迁移到目标集群-->解压-->把文件上传到HDFS的HBase目录下-->利用hbase hbck修复 (注意：不需要事先在目标群集上创建表)//------在源群集上的操作----------//flush源HBase将表的缓存数据都写进磁盘hbase -> flush 'tableName'/...

运用场景：我们机器上每天或者定期都要跑很多任务，很多时候任务出现错误不能及时发现，导致发现的时候任务已经挂了很久了。  解决方法：基于 Flume+Kafka+Spark Streaming 的框架对这些任务的输出日志进行实时监控，当检测到日志出现Error的信息就发送邮件给项目的负责人。 目的：通过这个小项目熟悉基于 Flume+Kafka+Spark Streaming 框架实时分析处理日...