概述:
此分享是关于"暴风数据平台"的总体架构,暴风的数据平台基于Hadoop生态系。
技术点:
hadoop
hive
pig
hbase
fuse
rsync
图解:
总结:
数据服务器负责采集数据然后以某种粒度进行rysnc到数据汇聚服务器上然后拷贝到hdfs上去最终基于MR进行处理。
其他:
资源来自网上,如有侵权望告知!
概述:
此分享是关于"暴风数据平台"的总体架构,暴风的数据平台基于Hadoop生态系。
技术点:
hadoop
hive
pig
hbase
fuse
rsync
图解:
总结:
数据服务器负责采集数据然后以某种粒度进行rysnc到数据汇聚服务器上然后拷贝到hdfs上去最终基于MR进行处理。
其他:
资源来自网上,如有侵权望告知!