大数据专栏阅读说明

最新推荐文章于 2025-04-23 16:03:39 发布
转载 最新推荐文章于 2025-04-23 16:03:39 发布 · 312 阅读 · 1

1、大数据版图

2、大数据架构

  • Lambda
  • kappa

3、集群安装及管理

4、大数据常用组件

  • hadoop
  • zokkeeper
  • sqoop
  • spark
  • cloudera
大数据技术Kafka详解 ④ | Kafka中的数据不丢失机制与配置文件说明
dvlinker的技术专栏
01-06 1万+
本文详细介绍Kafka中的数据不丢失机制以及配置文件说明。
大数据OLAP技术体系学习框架
Lansonli（蓝深李）的博客
10-10 2379
利用框架的力量，看懂游戏规则，才是入行的前提大多数人不懂，不会，不做，才是你的机会，你得行动，不能畏首畏尾选择才是拉差距关键，风向，比你流的汗水重要一万倍，逆风划船要累死人的上面这些看似没用，但实际很重要，这里就不再具体说明，感兴趣的同学可以看看我的学习框架的重要性我是怎么坚持学习的怎么确定学习目标本栏目为缺少OLAP技术体系的同学全面整理的体系学习知识，内容是按不同的技术体系整理的，带你丰富大数据OLAP技术知识体系，想学会就得自律加坚持，赶快行动吧。
大数据专栏
qq_44291044的博客
02-25 281
05 | 从RAID看垂直伸缩到水平伸缩的演化 互联网公司不能用垂直扩展的方式扩展硬件 是数据靠向计算还是计算靠向数据 在单机时代主要的解决方案是RAID, 在分布式时代主要的解决方式是分布式文件系统 raid5和raid3 raid可以软件实现也可以硬件实现 磁盘读写过程中, 最消耗时间的地方就是寻址的过程, 顺序写入只需要一次寻址, 随机写入需要多次寻址. 通常一块磁盘的使用寿命...
数据要求说明书
weixin_34364135的博客
11-09 368
< DOCTYPE html PUBLIC -WCDTD XHTML StrictEN httpwwwworgTRxhtmlDTDxhtml-strictdtd> [项目名称] 数据要求说明书 [V1.0(版本号)] 拟 制 人______________________ 审 核 人______________________ 批 准 人______...
大数据专栏介绍
qingfudian5382的博客
07-05 171
笔者第一个工作涉及 hadoop集群、推荐算法（视频推荐）。 最近赋闲在家（离职家里蹲 ：） 嘻嘻嘻 ），对之前的涉及技术做个总结。所以如果这个专栏如果持续更新，可能将是一个详细的Hadoop或推荐算法入门教程。 第一篇从搭环境开始 家里有一台12年上学用的pc台机，和上大学用的老型号thinkpad（巨厚的那种），这段时间在淘宝购置了些电子垃圾重新组了台台机（大致花了800多），准备三台刷Linux，并搭建一个家用的Hadoop集群。同时，自己工作后还有台笔记本，可以用它来远程连接搭...
大数据专栏目录
西瓜游侠的博客
06-19 253
环境搭建 CentOS 7系统安装jdk1.8 // todo
大数据面试通识-专栏介绍
分享云原生大数据技术和个人成长、职业发展相关内容
06-11 122
回顾了过去十几年职业生涯，面试了很多人，也总结了很多面试规则，也帮助了很多人成功拿到offer，而自己又希望写一些内容来总结，就这么个初衷。 希望能在如今浮躁、便消极的现状下，带给一些人积极正向的作用，哪怕能够影响一两个人。 作者本人切实体会过毕业即失业，找工作长达半年之久，工作被裁等状态，希望能把这些种种转变为某种对他人有价值的经验输出。
数字经济与大数据企业跨境数据合规专栏之——大数据企业特征与跨境数据合规挑战研究.zip
10-18
4. 提升透明度：向用户清楚地说明数据使用方式，获取用户明确的同意，并提供数据访问、更正和删除的权利。 5. 培训与教育：对员工进行数据合规培训，提高他们的法律意识和操作规范。 总之，大数据企业在享受数字...
大数据数据服务架构设计：最佳实践与案例分析
最新发布
AI天才研究院
04-23 1585
在数据量呈指数级增长（IDC预测2025年全球数据量将达175ZB）、业务需求快速迭代（如实时推荐、智能风控）的背景下，传统“烟囱式”数据处理模式（各业务线独立开发数据接口）已无法满足企业需求。本文聚焦大数据数据服务架构如何构建高并发、低延迟的数据服务接口？如何实现多源异构数据的统一服务化封装？如何平衡数据服务的实时性与成本？如何保障数据服务的安全性与可治理性？第2章：解析数据服务架构的核心概念与分层模型；第3章：拆解关键组件的技术实现（含Python代码示例）；
大数据精品栏目介绍
Lansonli（蓝深李）的博客
10-11 4113
一、大数据入门核心技术大数据入门核心技术栏目里集合等大数据必学的核心技术。初学者选择这个栏目，可以快速了解大数据知识体系，为后面的扩展性的深度学习大数据打下坚实的基础。二、数据湖基础+湖仓一体电商项目数据湖是一个集中式的存储库，允许你以任意规模存储多个来源、所有结构化和非结构化数据，可以按照原样存储数据，无需对数据进行结构化处理，并运行不同类型的分析对数据进行加工，例如：大数据处理、实时分析、机器学习，以指导做出更好地决策。在大数据中属于很火的技术，学会它让你大数据项目里游刃有余。
Hadoop原理-HDFS写流程源码
weixin_40503364的博客
05-31 332
Hadoop原理第一篇 整体流程图 左 HDFS客户端 右 NameNode HDFS契约 HDFS写流程 1 创建INodeFile流程（数据封装成内存目录树） 2 添加文件契约流程 调用namenode rpc代理 底层是红黑树，实现按照契约时间排序 3 DataStreamer启动流程（重要！写数据关键服务） 等待DataQueue有数据后执行 备注： 一个目录包含多个文件，一个文件包含多个block（默认128mb）， 一个block包含多个package（64k），一个pa
大数据Hadoop生态圈介绍
热门推荐
葱葱那年
07-12 5万+
大数据Hadoop生态圈-组件介绍 Hadoop是目前应用最为广泛的分布式大数据处理框架，其具备可靠、高效、可伸缩等特点。 Hadoop的核心组件是HDFS、MapReduce。随着处理任务不同，各种组件相继出现，丰富Hadoop生态圈，目前生态圈结构大致如图所示： 根据服务对象和层次分为：数据来源层、数据传输层、数据存储层、资源管理层、数据计算层、任务调度层、业务...
hive安装配置和操作命令
Xiaoweidumpb
11-01 568
数据仓库-Hive 1. 数据仓库 1.1. 基本概念 英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持（Decision Support）。 数据仓库是存数据的，企业的各种数据往里面存，主要目的是为了分析有效数据，后续会基于它产出供分析挖掘的数据，或者数据应用需要的数据，如企业的分析性报告和各类报表等。 可以理解为：面向分析的存储系统。 1.2. 主要特征 数据仓库是面向主题的（Subject-Oriented ）、集成的（In
大数据简介，技术体系分类整理(1)
2401_84092169的博客
05-09 424
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。深知大多数初中级Android工程师，想要提升技能，往往是自己摸索成长，自己不成体系的自学效果低效漫长且无助。因此收集整理了一份《2024年Web前端开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Android开发知识点！
数据要求说明书（GB856T——88）
10-09 2822
 数据要求说明书1引言1.1编写目的说明编写这份数据要求说明书的目的，指出预期的读者。1.2背景说明：a.       待开发软件系统的名称；b.       b.列出本项目的任务提出者、开发者、用户以及将运行该项软件的计算站（中心）或计算机网络系统。1.3定义列出本文件中用到的专门术语的定义和外文首字母组词的原词组。1.4参考资料列出有关的参考资料
大数据流行学习路线详解与进阶指南
以下是对这份文件内容中所蕴含知识点的详细说明： 1. 基础 在大数据学习的开始，首先需要掌握基础知识，这是任何高级主题学习的基石。基础包括但不限于以下几个方面： - 计算机科学基础：了解计算机系统架构，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值