
大数据
文章平均质量分 88
三人行 | Dylen
生命的美好在于经历,可以学习实践,也能筑梦高远.
展开
-
Kafka消息队列安装和使用
消息中间件KafkaKafka概述Kafka的应用场景Kafa集群搭建Kafka基本操作 Kafka概述 Apache Kafka 是一个开源分布式事件流平台,基于发布/订阅模式,广泛应用于大数据实时处理领域 Kafka的应用场景 异步处理 比如调用第三方接口的短信,邮件 系统解耦 把系统之间的直接调用,变为通过消息中间件,降低耦合度,提高程序的扩展性 削峰填谷 当大量请求短时间涌入时,消息中间件就是首选啦,返回用户正在处理中,处理完毕再返回处理完毕的信息 事件驱动的数据来源,一般原创 2021-09-26 22:29:33 · 178 阅读 · 0 评论 -
大数据姊妹篇之Hive
Hive学习目录Hive官网Hive概述Hive安装部署 Hive官网 Hive官网文档可以全方位,多角度的诠释一门技术,就是有点费时间,还是建议先看视频入门,然后再看书,或者文档. Hive概述 Apache Hive ™是一款建立在Hadoop之上的开源数据仓库,可以将存储在Hadoop文件中的结构化、半结构化数据文件映射为一张数据库表,基于表提供了一种类似SQL的查询模型,称为Hive查询语言(HQL),用于访问和分析存储在Hadoop文件中的大型数据集. HQL可以把sql转换为map-red原创 2021-09-12 22:30:48 · 143 阅读 · 0 评论 -
大数据姊妹篇之Hadoop
Hadoop学习目录Hapoop概述Hadoop集群搭建 Hapoop概述 Apache™ Hadoop® 项目开发用于可靠、可扩展、分布式计算的开源软件 白话就是解决海量存储,海量计算的问题 Hadoop集群搭建 Hadoop下载和安装 先行创建opt/module和software目录,进入software目录,下载地址 , 我这里下载的是3.2.2版本 解压: tar -xvf hadoop-3.2.2.tar.gz -C …/module/ 看解压后的文件目录 修改环境变量原创 2021-09-04 16:52:39 · 188 阅读 · 0 评论 -
大数据姊妹篇之Zookeeper
zookeeper学习目录Apache ZooKeeper™介绍zookeeper快速入门功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 Apache ZooKeeper™介绍 ZooKeeper是一个开源的,可靠,分布式的协调管原创 2021-09-01 22:11:07 · 130 阅读 · 0 评论