
大数据
大数据技术实践
云上笛暮
关注公众号:imiraclecloud,了解更多精华知识 。
展开
-
API接口调用演示
本文以深圳市政府数据开放平台为素材对象,演示如何调用其开放的API接口,主要目的在于以直观的视角,熟悉API接口的格式及调用方式。原创 2022-10-14 17:26:54 · 3435 阅读 · 0 评论 -
数据库基本操作指令
对于数据库侧的安全,需要关注一些不安全的操作行为,通常的做法是通过内置一些风险模型在系统中,以匹配的形式进行识别,进而执行阻断、审计或告警等操作。原创 2022-09-11 23:39:39 · 1279 阅读 · 0 评论 -
blockchain学习笔记2
1、如何让老妈理解区块链(1)2、如何让老妈理解区块链(2)3、10分钟了解区块链工作原理和流程,你不得不懂的知识4、比特币:一种点对点的电子现金系统-中本聪论文原创 2020-11-21 17:03:28 · 297 阅读 · 0 评论 -
blockchain学习笔记1
区块链最初是块链,是越来越多的记录列表,称为块,它们通过密码术链接在一起。每个块包含前一个块的加密哈希,时间戳和交易数据(通常表示为Merkle树)。通过设计,区块链可以抵抗其数据的修改。这是因为一旦记录,任何给定块中的数据都不能追溯更改,而无需更改所有后续块。为了用作分布式分类帐,区块链通常由对等网络共同管理,该对等网络共同遵守用于节点间通信和验证新块的协议。尽管区块链记录并非不可更改,但可以通过设计将区块链视为安全的,并举例说明具有高拜占庭容错能力的分布式计算系统。区块链被描述为“一个开放的,分布式的原创 2020-11-15 10:54:53 · 686 阅读 · 0 评论 -
大数据基础知识大点兵
前言:本文以《大数据技术入门》一书为基础,在梳理全书内容的同时,融入了来自不同方面的知识,旨在帮助初学者更全面、更快速、更有效的了解大数据相关的知识。big data以下为文章目录,具体内容见:https://mp.weixin.qq.com/s/IV1m70cU-vA5g0YtF1xhuw第一章 大数据时代... 11.1 大数据五大特征... 11.2 大数据类型... 11.3 大数据商用化... 21.4 大数据产业链分析... 2第二章 大数据软件框架... 3原创 2020-10-03 23:14:19 · 115 阅读 · 0 评论 -
大数据组件及安全架构
大数据相关组件统计大数据安全保障体系几个可以参考的文:01、Components of a big data architecturehttps://docs.microsoft.com/en-us/azure/architecture/data-guide/big-data/02:Components of the Big Data ecosystemhttps://subscription.packtpub.com/book/big_data_and_bus...原创 2020-08-31 19:38:57 · 1295 阅读 · 0 评论 -
大数据的两个主要框架 Hadoop 和 Spark
Hadoop (MapReduce) :分布式计算框架(批量处理计算框架)Spark :内存计算框架(实时计算框架,内存计算框架,流式计算框架) Spark是通用分布式数据处理引擎,适用于多种情况。在Spark核心数据处理引擎之上,还有用于SQL,机器学习,图形计算和流处理的库,它们可以在应用程序中一起使用。 Spark支持的编程语言包括:Java,Python,Sca...原创 2020-03-01 18:14:36 · 877 阅读 · 0 评论