
大数据部署方案
my_bai
专注计算机行业,服务器运维工程师
展开
-
zookeeper 和 kafka 集群搭建
Kafka初识1、Kafka使用背景在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题:我们想分析下用户行为(pageviews),以便我们设计出更好的广告位我想对用户的搜索关键词进行统计,分析出当前的流行趋势有些数据,存储数据库浪费,直接存储硬盘效率又低 这些场景都有一个共同点:数据是由上游模块产生,上游模块,使用上游模块的原创 2017-03-30 17:35:08 · 28472 阅读 · 3 评论 -
ELK收集mysql慢日志
1、db服务器mysql的慢日志传送到es2、php慢日志和错误日志送到es1、安装步骤下载https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.2.4-linux-x86_64.tar.gz,解压2、配置filebeat.yml3、logstash 配置,不同的mysql版本有不一样的gr...原创 2018-10-18 10:26:31 · 1468 阅读 · 1 评论 -
mongodb集群测试
mongodb集群测试在db-05上的docker的架构:分片集群模式config server: 采用复制集(防止单点故障)shard server: 采用复制集,3个shard分片服务器route: 前端路由接口参考文档:http://www.runoob.com/mongodb/mongodb-sharding.htmlhttps://blog.csdn.ne...原创 2018-10-18 10:31:32 · 951 阅读 · 1 评论