《大数据架构详解》读后感

《大数据架构详解》 —— 读后感

作者：朱洁 罗华霖
出版商：中国工信出版社 电子工业出版社
版次：2016年10月第1版
印数：7001 ~ 12000册
定价：69.00元

本书花了大量笔墨讲了通信运营商的大数据应用案例及其使用的架构，这也不奇怪，因为作者是为通信运营商做大数据解决方案的。作者服务的运营商大数据平台架构，从上到下依次为———
应用层
    SQM、CSE、MSS、DMP，这些都是运营商特有的应用
组件层
    数据获取(日志数据获取、消息分发中间件)
    数据处理(实时处理、批处理)
    分析数据(交互式查询,机器学习,数据挖掘)
    数据分析结果的展现
资源管理和分配
    涉及集群、数据中心的级别的资源统一管理和分配
    提了几款Hadoop生态圈的资源调度框架及其调度算法
存储层
    RAID
    存储加速技术
大数据部署
    云化部署
    物理机部署

这本书讲到的大数据框架，是偏原理的多，有些框架也给出了java代码示例。有些大数据框架没讲到，例如在讲大数据存储方案的时候也没有涉及HBase。不过这也可以理解，因为不可能面面俱到，要有所侧重。大体来看，这本书大概讲了几大块———
  1，大数据是什么
  2，大数据当前面临的挑战
  3，运营商大数据架构和业务
  4，数据获取
  5，数据流处理
  6，交互式分析
  7，批处理技术
  8，机器学习和数据挖掘
  9，资源管理
  10，存储
  11，大数据云化

书中的架构适合运营商的业务需求，读者