Hadoop个人心得笔记(一)

                              Hadoop个人心得笔记(一)

• Volume：数据量大，包括采集、存储和计算的量都非常大。大数据的起始计量单位至少是T、P（1024个T）、E（100万个T）或Z（10亿个T）
• Variety：种类和来源多样化。包括结构化、半结构化和非结构化数据，具体表现为网络日志、音频、视频、图片、地理位置信息等等，多类型的数据对数据的处理能力提出了更高的要求
• Value：数据价值密度相对较低，或者说是浪里淘沙却又弥足珍贵。随着互联网以及物联网的广泛应用，信息感知无处不在，信息海量，但价值密度较低，如何结合业务逻辑并通过强大的机器算法来挖掘数据价值是大数据时代最需要解决的问题
• Velocity：数据增长速度快，处理速度也快，时效性要求比较高
• Veracity：数据的准确性和可信赖度，即数据的质量
• Valence：大数据之间的连通性
• 随着大数据的发展，又增加了Vitality（动态性）、Visualization（可视化）、Validity（合法性）等

 

• 是Hadoop中用于进行分布式存储的组件
• 根据Google的论文设计实现的

一、概述