大数据概述

大数据概述

1.大数据时代

1.1三次信息化浪潮

信息化浪潮	发生时间
第一次浪潮（个人计算机）	1980年前后
第二次浪潮（互联网）	1995年前后
第三次浪潮（互联网、云计算和大数据）	2010年前后

1.2信息科技为大数据时代提供技术支撑

1. 存储设备容量不断增加
2. CPU处理能力大幅提升
3. 网络带宽不断增加

1.3数据产生方式的变革促成大数据时代的来临

1. 运营式系统阶段（数据库的出现使得数据管理的复杂度大大降低）
2. 用户原创内容阶段
3. 感知式系统阶段

2.大数据概念

1. 数据量大
2. 数据类型繁多
3. 处理速度快
4. 价值密度低

3.大数据的影响

1. 在思维方式方面，大数据颠覆了传统的思维方式

• 全样而非抽样
• 效率而非精确
• 相关而非因果

2.社会发展，大数据决策逐渐成为一种新的决策方式

3.就业方面，使得数据科学家成为热门职业

4.人才培养，将很大程度上改变中国高校信息技术相关专业的现有教学和科研体制

4.大数据的应用

5.大数据关键技术

6.大数据计算模式

7.大数据产业

8.大数据与云计算、物联网的关系

• 云计算、大数据和物联网代表了IT领域最新的技术发展趋势，三者相辅相成，既有联系又有区别

8.1云计算

8.1.1概念

云计算实现了通过网络提供可伸缩的、廉价的分布式计算能力，用户只需要在具备网络接入条件的地方，就可以随时随地获得所需的各种IT资源

8.1.2关键技术

云计算关键技术包括：虚拟化、分布式存储、分布式计算、多租户等

8.1.3云计算数据中心

• 云计算数据中心是一整套复杂的设施，包括刀片服务器、宽带网络连接、环境控制设备、监控设备以及各种安全装置等
• 数据中心是云计算的重要载体，为云计算提供计算、存储、带宽等各种硬件资源，为各种平台和应用提供运行支撑环境
• 全国各地推进数据中心建设

8.2物联网

8.2.1概念

物联网是物物相连的互联网，是互联网的延伸，它利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起，形成人与物、物与物相联，实现信息化和远程管理控制

8.2.2关键技术

物联网中的关键技术包括识别和感知技术（二维码、RFID、传感器等）、网络与通信技术、数据挖掘与融合技术等

8.2.3应用

8.3三者的关系