好记忆也需烂博客

mysql 多实例数据同步到ES

部署 MySQL -> ES 数据同步（mysql 同步到 ES 是支持 多表查询 后把结果同步到ES 中的同一个索引中的）1.服务器：内网ip：192.168.0.60登录name+key实现功能： canal、kafka、es7；canal同步预生产polardb数据到es72.ES7 kafka服务es web 管理url：http://[internet ip]:9800es:公网： [internet ip] 9201内网： 192.168.0.60 9201kaf

Hadoop计算平台和Hadoop数据仓库的区别http://datasearch.ruc.edu.cn/~boliangfeng/blog/?tag=%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93Hive 随谈（三）– Hive 和数据库的异同http://www.tbdata.org/archives/551Hadoop Ecosystem解决

Kudu 是什么Kudu是Todd Lipcon@Cloudera带头开发的存储系统，其整体应用模式和HBase比较接近，即支持行级别的随机读写，并支持批量顺序检索功能。那既然有了HBase，为什么还需要Kudu呢，简单的说，就是嫌弃HBase在OLAP场合，SQL／MR类的批量检索场景中，性能不够好。通常这种海量数据OLAP场景，要不走预处理的路，比如像EBA...

在使用HIVE 数据仓库中的大数据查询时，有一个通病，就是查询慢，无法给于用户快速的进行数据分析查询。对于决策层，怎样能秒级获取用户行为分析的数据，是一个课题，之前的做法是，把数据导入到HIVE,进行分析统计后，再回到其它数据库(比如MongoDB),用户可以在此数据库的基础上进行一个数据查询。但这样已经过了一个数据处理的时间，（ETL 数据处理过程）我们的做法是每天晚