为什么要学习大数据（传统数据与大数据的对比）

最新推荐文章于 2024-12-02 08:55:36 发布

原创最新推荐文章于 2024-12-02 08:55:36 发布 · 300 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据

大数据专栏收录该内容

5 篇文章

订阅专栏

本文探讨了传统Linux系统与大数据Linux系统的安装区别，主要体现在数据硬盘的管理和RAID配置上。传统系统倾向于使用RAID1和逻辑卷，而大数据系统选择独立挂载数据硬盘且常关闭交换分区，以优化读写效率。此外，文章还提到了大数据技术速度快的原因，包括分布式存储、并行计算等先进理念和技术的应用。

传统数据与大数据的对比

传统Linux系统与大数据linux系统安装的区别
在这里插入图片描述

传统
	系统硬盘（与数据硬盘100%隔离）
		两块硬盘做一个RAID1
		引导分区  200M
		交换分区  内存的两倍
		根分区		/（所有的空间）
	数据硬盘
		多个硬盘制作一个逻辑卷，即将多个物理硬盘制作成一个大的逻辑硬盘
		

大数据
	系统硬盘
		两块硬盘做一个RAID1
		引导分区  200M
		交换分区  可以不设置或设置的很小。因为在大数据中需要将其关闭
		根分区		/（所有的空间）
	数据硬盘
		多个硬盘，每个硬盘独立挂载，有多少个硬盘，挂载多少个目录
		数据硬盘优先不做RAID，必须做时，做RAID0

做RAID:	优点：数据的读写效率稍高，
		缺点：不支持热插拔。一个硬盘损坏，整个服务器需要全部关机再能处理该硬盘。

不做RAID:	优点：支持热插拔。硬盘损坏即把即插。不用关机。
			缺点：数据的读写效率稍低。

传统数据与大数据处理方式对比
在这里插入图片描述

大数据技术快的原因
1、分布式存储
2、分布式并行计算
3、移动程序到数据端
4、更前卫、更先进的实现思路
5、更细分的业务场景
6、更先进的硬件技术+更先进的软件技术