什么是大数据?要从这三个层面来理解

华为HCIE-BigData认证学习资料分享(考试大纲、培训教材、实验手册等等) 作为一名已经通过HCIE-BigData认证的人,我希望通过这篇文章,分享一些备考经验和学习心得,帮助更多朋友顺利拿下这项认证。 阅读详情

本篇内容较长,心急的小伙伴可以先看目录,直接定位到感兴趣的部分:

  • 为啥都在说“大数据”,却很难解释清楚到底啥是“大数据”?
  • 理论层面上的大数据
  • 价值层面上的大数据
  • 技术层面上的大数据


01 为啥都在说“大数据”,却很难解释清楚到底啥是“大数据”?

“大数据”三个字已经被喊烂了,“大数据分析”也经常被人提起。但如果真正问起来“大数据是什么?”却往往不知道如何解释。

这其实很正常,究其原因,

  • 一是因为大家对大数据这类新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;
  • 二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间去知其所以然。

这就导致了虽然大家都在说“大数据”,可真正理解“大数据”是啥的却少之又少!

这篇我想尽量尝试用简洁易懂的话语和案例,来为大家解释“到底什么是大数据?”


02 理论层面上的大数据

最早提出大数据时代到来的是麦肯锡——

“数据已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”

业界(IBM 最早定义)将大数据的特征归纳为4个“V”——

量Volume:数据体量大。大数据的起始计量单位至少是P(1000个T)、E(100万个T)或Z(10亿个T)
多样Variety:数据类型繁多。比如网络日志、视频、图片、地理位置信息等等。
价值Value:价值密度低,商业价值高。
速Velocity:处理速度快。和传统的数据挖掘技术有着本质的不同。

阿里巴巴的王坚对于大数据也有一些独特的见解,比如——

今天的数据不是大,真正有意思的是数据变得在线了,这个恰恰是互联网的特点。
非互联网时期的产品,功能一定是它的价值,今天互联网的产品,数据一定是它的价值。
你千万不要想着拿数据去改进一个业务,这不是大数据。你一定是去做了一件以前做不了的事情。

最后一点我非常认同的,大数据的真正价值在于创造,在于填补无数个还未实现过的空白。


03 价值层面上的大数据

大数据的真正价值不在于拥有多少数据,而在于如何使用它,我举一个非常有趣的例子:

1948年辽沈战役期间,司令员林彪要求每天要进行例常的“每日军情汇报”,由值班参谋读出下属各个纵队、师、团用电台报告的当日战况和缴获情况。

那几乎是重复着千篇一律枯燥无味的数据:

  • 每支部队歼敌多少、俘虏多少
  • 缴获的火炮、车辆多少,枪支、物资多少
  • ……

有一天,参谋照例汇报当日的战况,林彪突然打断他:“刚才念的在胡家窝棚那个战斗的缴获,你们听到了吗?”

大家都很茫然,因为如此战斗每天都有几十起,不都是差不多一模一样的枯燥数字吗?

林彪扫视一周,见无人回答,便接连问了三句:

“为什么那里缴获的短枪与长枪的比例比其它战斗略高?”
“为什么那里缴获和击毁的小车与大车的比例比其它战斗略高?”
“为什么在那里俘虏和击毙的军官与士兵的比例比其它战斗略高?”

林彪司令员大步走向挂满军用地图的墙壁,指着地图上的那个点说:

“我猜想,不,我断定!敌人的指挥所就在这里!”

果然,部队很快就抓住了敌方的指挥官廖耀湘,并取得这场重要战役的胜利。

这些例子真实的反映在各行各业,探求数据价值取决于把握数据的人,关键是人的数据思维;与其说是大数据创造了价值,不如说是大数据思维触发了新的价值增长,比如:

  • 近乎实时地确定故障、问题和痛点的根本原因。
  • 比人眼更快、更准确地发现异常。
  • 通过快速将图表数据转化为洞察力来制定解决方案。
  • 在几分钟内重新计算整个风险组合。
  • 提高深度学习模型准确分类和应对不断变化的变量的能力。
  • 提前预判风险、提前准备风险方案。
  • ......

04 技术层面上的大数据

大数据常和云计算联系到一起,云计算思想的起源是麦卡锡在上世纪60年代提出的:

把计算能力作为一种像水和电一样的公用事业提供给用户。

(1)业内是这么形容两者的关系:

  • 没有大数据的信息积淀,则云计算的计算能力再强大,也难以找到用武之地;
  • 没有云计算的处理能力,则大数据的信息积淀再丰富,也终究只是镜花水月。

(2)云计算和大数据之间的联系:

  • 可以提供更多基于海量业务数据的创新型服务;
  • 通过云计算技术的不断发展降低大数据业务的创新成本。

(3)云计算和大数据之间的区别

  • 概念不同:计算改变了IT,大数据改变了业务。然而大数据必须有云作为基础架构,才能得以顺畅运营。
  • 目标受众不同:云计算是CIO等关心的技术层,是一个进阶的IT解决方案。而大数据是CEO关注的、是业务层的产品,大数据的决策者是业务层。

(4)SaaS、PaaS、IaaS之间的区别

最后给大家补充阅读下,SaaS、PaaS、IaaS之间的区别是什么。

通俗解释: IaaS,PaaS和SaaS的区别

以上。

从零开始学嵌入式之STM32——1.什么是STM32 它是ST公司推出的一系列单片机的统称。ST----指的是ST公司----意法半导体。意法半导体,成立于1987年,是由意大利的SGS微电子公司和法国的Thomson半导体公司合并而成。ARM目前主要是ARM架构处理器及外围组件的电路设计方案,知识产权授权的形式收取费用,其他公司根据ARM的方案设计出CPU产品。,它以应用为核心,软硬件可裁剪,旨在实现对设备的控制、监测或辅助功能,区别于通用计算机(如 PC、服务器)的 “一机多用” 属性。在嵌入式领域,目前主流的是cortex-M3内核推出的芯片。 阅读详情

相关推荐

数据讲述中国故事!和鲸助力中国综合社会调查(CGSS)数据分析与可视化大赛圆满收官

用数据研究中国问题、总结中国道路、讲述中国故事。和鲸作为协办单位全程支持本次大赛,为中国人民大学中国调查与数据中心实施全套赛事系统,同时提供完备而周全的赛事运营服务。

ModelWhale的博客 1410

SAP ABAP开发中单位内外码转换:原理、实战与避坑指南

在SAP ABAP开发中,数据转换是确保系统内外数据一致性的关键技术。其核心原理在于SAP采用内部编码(内码)进行高效存储与运算,同时通过外部描述(外码)面向用户展示。这种机制通过转换例程(如CUNIT)和标准函数(如CONVERSION_EXIT_CUNIT_INPUT/OUTPUT)实现,其技术价值在于保障了数据的准确性与系统的集成性。在工程实践中,这直接关系到报表数据可读性、接口数据兼容性以及业务逻辑的正确性。特别是在处理物料单位等主数据时,若忽略内外码转换,常导致数据导出异常、报表显示混乱等问题。本

weixin_33894640的博客 545

【实战指南】基于YOLOv11的肺结节检测系统开发与优化(LUNA2016数据集)

本文提供了基于YOLOv11模型和LUNA2016数据集开发肺结节检测系统的完整实战指南。详细介绍了从环境搭建、数据预处理、模型训练与优化,到构建Web应用系统的全流程,旨在帮助开发者快速掌握医疗影像AI项目的核心开发技能。

weixin_29031057的博客 140

与大数据相关的三个层面

第一,把大数据作为一种对象,其对传统数据安全提出了新的挑战。以往我们的数据安全解决方案比如DLP,对象是局部的、受限的、确定的,而大数据时代,也许那些原本毫不起眼甚至毫无价值的数据,因其积聚而量变到质变,成为必要的保护对象。有挑战就有机遇,谁能更好地为大数据安全保驾护航,谁也许就掌握了未来的一项必杀技。 第二,比大数据作为对象更高一层的,是利用大数据来做安全。前文提到过,像IDS、SOC

lz0426001的专栏 2699

Cisco Packet Tracer实战:三层交换机链路聚合配置全流程(附常见错误排查)

本文详细解析了在Cisco Packet Tracer环境中配置三层交换机链路聚合的全流程,包括基础网络设置、LACP协议配置、路由协议集成及高级优化技巧。通过实战案例和常见错误排查指南,帮助网络工程师和CCNA备考学员掌握这一提升带宽利用率和实现链路冗余的核心技术。

grafana6viz的博客 228

产品经理如何运用AI提升工作效率

AI技术的应用为产品经理的工作流程带来了显著的效率提升。从需求收集到产品上线,AI可以在多个阶段提供智能化支持,帮助产品经理更好地理解用户需求、优化产品设计、提高开发和测试效率。在未来,随着AI技术的不断发展,产品经理将能够更加高效地管理产品生命周期,为用户提供更优质的产品体验。应用 | AI + 千行百业欢迎关注我的后续博文,我将分享更多关于人工智能、自然语言处理和计算机视觉的精彩内容。

不想宅的冷同学 1336

中国大数据综合服务提供商Top100排行榜

随着移动互联网的飞速发展,信息的传输日益方便快捷,端到端的需求也日益突出,纵观整个移动互联网领域,数据已被认为是继云计算、物联网之后的又一大颠覆性的技术性革命,毋庸置疑,大数据市场是待挖掘的金矿,其价值不言而喻。可以说谁能掌握和合理运用用户大数据的核心资源,谁就能在接下来的技术变革中进一步发展壮大。 大数据,可以说是史上第一次将各行各业的用户、方案提供商、服务商、运营商以及整个生

大数据技术杂谈 4253

【VTKExamples::Meshes】第十二期 QuadricDecimation

本文分享VTK样例QuadricDecimation,并解析接口vtkQuadricDecimation,希望对各位小伙伴有所帮助!

qq_40041064的博客 342

大数据概述

大数据概述 - - 小白心得 大数据: 大数据是收集数据并用大数据生态组件整理数据,提供满足企业需要的解决方案。 其次,想要系统的认知大数据,必须要全面而细致的分解它,着手从三个层面来展开: 第一层面是理论,理论是认知的必经途径,也是被广泛认同和传播的基线。在这里从大数据的特征定义理解行业对大数据的整体描绘和定性;从对大数据价值的探讨来深入解析大数据的珍贵所在;洞悉大数据的发展趋势;从大数据隐私这...

qq_42663954的博客 467

18、动态系统响应分析

本文系统地介绍了动态系统响应的分析方法,涵盖传递函数建模、特殊输入下的响应特性(如脉冲和阶跃响应)、终值与初值定理的应用、系统直流增益的计算,并深入探讨了一阶和二阶系统的时域特性。通过实例分析与MATLAB仿真,展示了不同参数对系统行为的影响。文章还总结了系统响应在控制设计与故障诊断中的实际应用,并展望了多变量、非线性及实时响应分析的未来研究方向。配合流程图,提供了清晰的系统分析与设计路径。

kite3的博客 141

【气候模式降尺度】分位数增量映射(QDM)原理及MATLAB代码实现

简介QDM原理及其MATLAB代码实现

WW、forever的博客 5861

大数据分析三个阶段是什么

  大数据是现代做人耳熟能详的热门话题了,甚至街边玩耍的小孩也能说上几句大数据的词语。但是,自从大数据逐步进入中国,然后开始慢慢热起来火起来,你知道大数据有哪几个阶段吗?   数据分析至少存在三个阶段:   阶段1:熟悉计算工具   第一个阶段是熟悉计算工具阶段,也就是能从数据中正确计算出结论。这一阶段需要的是编程能力和基础的逻辑分析。在这个阶段,需要打好基本的编程和数理基...

中琛魔方大数据 3861

Openclaw第5章 知识库管理

💡:学会使用 OpenClaw构建个人知识库系统,实现网页文章存档、GitHub项目管理、论文笔记整理和跨设备同步。

Maynor的博客 775

大数据都具体哪些价值 如何学好大数据开发

  大数据都具体哪些价值?如何学好大数据开发?对于大数据技术的学习,我们都知道,主要还是服务于企业,为企业创造更大的价值,而你的价值也是随之增长的。想要挖掘大数据的更大价值,需要这三步的紧密结合!   1. 数据服务   数据服务针对用户非常明确的数据查询和处理任务,以高性能和高吞吐量的方式实现大众化的服务,是数据价值非常重要也是很直接的发现方式。由于要处理大众化的服务请求,每个服务任务必须能够被快速地处理掉,因此,数据服务的单个任务负载不能过于复杂,单任务直接处理的数据不能太大,任务对应的用户需求

qq_43444478的博客 228

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

大数据bigdata

前言: 大数据就是互联网发展到现今阶段的一种表象或特征而已,没有必要神话它或对它保持敬畏之心,在以云计算为代表的技术创新大幕的衬托下,这些原本看起来很难收集和使用的数据开始容易被利用起来了,通过各行各业的不断创新,大数据会逐步为人类创造更多的价值。 定义:是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 提出时间:2008年8月中旬 大数据的5V特点(IBM提出): Volume(大量)

这里是菠萝味菠萝啤的博客 2295

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

大数据概述及快速理解

1:大数据的定义及特点 大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 特点: 容量(Volume):数据的大小决定所考虑的数据的价值和潜在的信息; 种类(Variety):数据类型的多样性; 速度(Velocity):指获得数据的速度; 可变性(Va...

weixin_43469563的博客 1281

怎么理解什么是大数据呢?

如果你说大数据就是数据大,或者侃侃而谈4个V,也许很有深度的谈到BI或预测的价值,又或者拿Google和Amazon举例,技术流可能会聊起hadoop和Cloud Computing,不管对错,只是无法勾勒对大数据的整体认识,不说是片面,但至少有些管窥蠡测、隔衣瘙痒了。……也许,“解构”是最好的方法。   首先,我认为大数据就是互联网发展到现今阶段的一种表象或特征而已,没有必要神话它或对它

ab123456bcde的博客 514

如何理解大数据

大数据是什么? 大数据本身是一个抽象的概念,大数据是指无法在有限时间内用常规软件工具对其进行获取、存储、管理和处理的数据集合。 业界对大数据还没有一个统一的定义,但是大家普遍认为,大数据具备 Volume、Velocity、Variety 和 Value 四个特征,简称“4V”,即数据体量巨大、数据速度快、数据类型繁多和数据价值密度低,如图 1 所示。下面分别对每个特征作简要描述。 ①Volum...

热爱编程的男孩子 2690

Thinking in BigData(二)大数据时代下的变革

大数据时代的思维变革         A Revolution That Will Transform How We Live, Work, and Think.        不期而遇的一本《大数据时代》将我引进大数据的领域。这个浪里淘沙的时代,我们都站在这个时代改革的前沿,而作为互联网最具爆发力的一种媒介,它给我传递着什么资讯?如果说我们错过了2000年左右的互联网浪潮,错过电商竞

飞翔的小鸟 2109

通过技能、平台和应用三个层面,推动人工智能发展

人工智能作为当前时代最为前沿的技能之一,其发展将极大地提升和扩展人类的能力边界,对促进技能创新、提升国家核心竞争力乃至推动人类经济社会发展将产生深远影响。当前,人工智能正迎来新一轮创新变革和发展浪潮,欧美日等发达国家和地区纷纷从国家战略层面加快布局,以期在未来国际竞争中占据优势地位。我国需要加强统筹布局和顶层设计,以技能、平台、应用为三大着力点推动人工智能突破发展,抢占全球科技制高点。 技能层面:...

多智时代的博客 1514

一些关于大数据测试的理解

大数据是什么 指的是一般单机无法处理的海量数据级,因此,对于此类的数据集,我们需要利用一些大数据处理的框架、工具,完成基于集群的数据处理 ...

htryyy的专栏 1018

大数据怎么学?对大数据开发领域及岗位的详细解读,完整理解大数据开发领域技术体系

经常有小伙伴和我咨询大数据怎么学,我觉得有必要写一下关于大数据开发的具体方向,下次就不用苦哈哈的打字回复了

鲁边的博客 1468

大数据怎么学?对大数据开发领域及岗位的详细解读,完整理解大数据开发领域技术体系目录

经常有小伙伴和我咨询,我觉得有必要写一下关于大数据开发的具体方向,下次就不用苦哈哈的打字回复了。直接回复文章。

Gefangenes的博客 1375

协众信息三个层面帮你快速理解ui设计

设计是一个非常大的概念,设计行业中包括许多设计方向,其中就有一个ui设计,ui设计也是近年来非常火爆的行业之一,下面我们跟随小编一起来了解一下什么叫ui设计的相关资料。

UIKKA的博客 506

一篇对大数据深度思考的文章,让你认识并读懂大数据

在写这篇文章之前,我发现身边很多IT人对于这些热门的新技术、新趋势往往趋之若鹜却又很难说的透彻,如果你问他大数据和你有什么关系?估计很少能说出一二三来。究其原因,一是因为大家对新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间去知其所以然。我希望有些不一样,所以对该如何去认识大数据...

weixin_33994429的博客 1692

政务大数据需要避免三个误区

  随着大数据的广泛应用及其背后的巨大潜力和价值,大数据已成为国家重要的战略资源,积极推进"大数据"建设,促进政务大数据的发展是必然的。然而,在大数据建设的过程中,仍然需要避免这三个误区:   1、大数据不等同于开放数据   由于目前尚无对“大数据”的标准界定,因此在大多人将开放数据等同于大数据,将任何“大”的政府数据集的发布都当作是大数据。但事实上,很多开放数据只是离散的“小数据”,并不具备大规模、未经处理和非结构化等大数据的基本特征,且很多通过开放数据机构发布的在线数据集仅仅是一个可用的..

中琛魔方大数据 255

大数据是什么?一文让你读懂大数据 _福州网胜_大数据

     在写这篇大数据文章之前,我发现身边很多IT人对于这些热门的新技术、新趋势往往趋之若鹜却又很难说的透彻,如果你问他大数据是什么?估计很少能说出一二三来。关注作者:需要更好的系统学习,可以加入我们,零基础到实战项目究其原因,一是因为大家对大数据这类新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间...

程序猿 699
上一篇: 为什么花了上百万,供应链还是一团糟?看这一篇就够了!
下一篇: 传统企业如何实现数字化转型?这套方法论超实用!
保卫大狮兄
博客等级 码龄7年 7456粉丝 1532原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值