- 博客(2)
- 收藏
- 关注
原创 MapReduce\Hadoop\HDFS上\Hive学习笔记
MapReduce是Hadoop提供的分布式计算框架,它可以用来统计和分析HDFS上的海量数据; Hive则是SQL On Hadoop,Hive提供了SQL接口,开发人员只需要编写简单易上手的SQL语句,Hive负责把SQL翻译成MapReduce,提交运行。 如何把数据源的数据采集到Hadoop上 Hadoop与关系型数据库数据交换的工具:Sqoop\Flume\DataX 1
2017-10-14 14:03:17
480
原创 大数据学习知识点
文件存储:Hadoop HDFS、Tachyon、KFS 离线计算:Hadoop MapReduce、Spark 流式、实时计算:Storm、Spark Streaming、S4、Heron K-V、NOSQL数据库:HBase、Redis、MongoDB 资源管理:YARN、Mesos 日志收集:Flume、Scribe、Logstash、Kibana 消
2017-10-14 11:33:27
423
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人