
Hadoop
做人要厚道2013
大数据培训讲师
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop运行环境搭建完全解析
4.1 准备虚拟机环境 4.1.1 克隆虚拟机 4.1.2 修改克隆的虚拟机的静态ip 4.1.3 修改主机名 4.1.4 在/etc/hosts中做ip和域名之间的映射 4.1.5 创建 atguigu 用户, 并设置密码 4.1.6 给 atguigu 用户配置具有root权限 4.1.7 关闭防...原创 2018-07-08 22:06:40 · 414 阅读 · 0 评论 -
Hadoop三种运行模式详解
5.1 本地运行模式 本地运行模式不需要额外的设置. 只需要执行响应的jar包就可以了. 不需要任何的集群配置, 本地运行模式其实也是一种单节点模式. Hadoop提供了两个案例, 我们执行这两个案例. 5.1.1 官方 grep 案例 这个案例是提供一些文本文件, grep可以从中找到想要匹配的文本(可以是正则表达式). 进入Hadoop的安装目录 cd /opt/modul...原创 2018-07-08 22:23:44 · 12313 阅读 · 0 评论 -
Zookeeper 配置详解 第一章
第 1 章 Zookeeper概述 本章带你从整体上了解Zookeeper框架. 1.1 Zookeeper是什么 Apache ZooKeeper是Apache软件基金会的一个软件项目,他为大型分布式计算提供开源的分布式配置服务、同步服务和命名注册。 ZooKeeper曾经是Hadoop的一个子项目,但现在是一个独立的顶级项目。 Zookeeper是针对大型分布式系统的高可靠的 协调系统。 ...原创 2018-10-19 16:18:45 · 288 阅读 · 0 评论 -
Zookeeper 配置详解 第 二 章
第 2 章 安装 Zookeeper 本章介绍如何配置Zookeeper. 2.1 下载和安装 Zookeeper 2.1.1 下载Zookeeper 从官网下载Zookeeper Zookeeper官网 2.1.2 安装 独立模式运行(本地模式) 首次尝试使用Zookeeper时, 最简单的方式是在一台Zookeeper服务器上以独立模式(standalone mode)运行. 比如可...原创 2018-10-19 16:21:28 · 752 阅读 · 0 评论 -
Zookeeper 配置详解 第三章
第 3 章 Zookeeper 内部原理 我们通过一个示例需求,来说明Zookeeper的内部原理. 3.1 示例需求 假设有一组服务器用于给给一些客户端提供某种特殊服务. 我们希望每个服务端都能找到其中一台服务器, 这样一来, 他们就可以使用这项服务. 在这个例子中, 一个挑战就是如何维护这组服务器的成员列表 这组服务器的成员列表显然不能存储在网络中的单个节点上, 否则该节点的故障将意味着整个系...原创 2018-10-19 16:26:00 · 946 阅读 · 0 评论 -
Scala 中下划线 _ 的用法总结
_(下划线)这个字符在 Scala 中似乎无处不在,到目前为止,它可能是 Scala 中使用最广泛的符号。 使用场景清单: 作为包引入的通配符 作为元组索引的前缀. val names: (String, String) = ("lisi", "zs") names._1 names._2 作为函数值的隐式参数 println(list.map(_ * 2)) // 等价于 pr...原创 2019-01-10 14:43:22 · 2503 阅读 · 0 评论