
大数据
文章平均质量分 86
十三幺Shisanyao
我是真爱粉,真爱粉爱学大数据
展开
-
大数据学习——Zookeeper集群搭建
Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。提供的服务包括:统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。原创 2022-08-27 18:47:21 · 814 阅读 · 1 评论 -
大数据学习——Hadoop序列化
序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储到磁盘(持久化)和网络传输。原创 2022-08-27 16:27:04 · 986 阅读 · 0 评论 -
大数据学习——MapReduce核心思想和官方WordCount案例实操
MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架。 MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。...原创 2022-08-26 13:50:26 · 780 阅读 · 0 评论 -
大数据学习——HDFS退役旧数据节点
白名单和黑名单是hadoop管理集群主机的一种机制。添加到白名单的主机节点,都允许访问NameNode,不在白名单的主机节点,都会被退出。添加到黑名单的主机节点,不允许访问NameNode,会在数据迁移后退出。 实际情况下,白名单用于确定允许访问NameNode的DataNode节点,内容配置一般与workers文件内容一致。 黑名单用于在集群运行过程中退役DataNode节点。原创 2022-08-21 13:37:45 · 705 阅读 · 0 评论 -
大数据学习——Hadoop集群搭建
大数据学习之Hadoop集群搭建(超级详细)原创 2022-08-20 13:05:58 · 1158 阅读 · 0 评论 -
大数据学习——Hadoop本地模式搭建
大数据学习之Hadoop本地模式搭建。原创 2022-08-19 08:58:57 · 2163 阅读 · 0 评论