
大数据
文章平均质量分 78
博得66
我人不好不坏
展开
-
常用的几种大数据架构剖析
数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展,数据挖掘、数据探索等专有名词曝光度越来越高,但是在类似于Hadoop系列的大数据分析系统大行其道之前,数据分析工作已经经历了长足的发展,尤其是以BI系统为主的数据分析,已经有了非常成熟和稳定的技术方案和生态系统,对于BI系统来说,大概的架构图如下:可以看到在BI系统里...转载 2018-06-07 18:42:22 · 6149 阅读 · 1 评论 -
kafka集群部署
config/参数解释:broker.id=0 #当前机器在集群中的唯一标识,和zookeeper的myid性质一样port=19092 #当前kafka对外提供服务的端口默认是9092host.name=192.168.7.100 #这个参数默认是关闭的,在0.8.1有个bug,DNS解析问题,失败率的问题。num.network.threads=3 #这个是borker进行网...原创 2019-10-08 16:04:36 · 253 阅读 · 0 评论 -
sources.list配置
根据不同版本的ubuntu替换Ubuntu 12.04 (LTS)代号为precise。Ubuntu 14.04 (LTS)代号为trusty。Ubuntu 15.04 代号为vivid。Ubuntu 15.10 代号为wily。Ubuntu 16.04 (LTS)代号为xenial# deb cdrom:[Ubuntu 16.04 LTS _precise Xerus_ ...原创 2019-10-09 21:39:15 · 2764 阅读 · 0 评论