【大数据之轨迹】
关注
分享
扫一扫
文章平均质量分 96
包含了 Hadoop、HBase、Hive 和 Spark 等的学习过程
寒冰小澈IceClean
一只努力的小澈
展开
-
【HBase之轨迹】（3）Apache Phoenix 5.1.2 详细使用，像 MySQL 一样使用 SQL 语句操作 HBase（Shell 操作和 SpringBoot+MyBatis 整合）
本篇将记录 Phoenix 的安装配置过程，Shell 使用和使用 SpringBoot+MyBatis 整合 Phoenix。配置过程中的一些常见错误已经在文中指出，有如 Phoenix 无法启动、缺少依赖、Command line too long、如何映射实体类等。避免走笔者已经走过的弯路，如果还发现新的问题欢迎留言。原创 2022-03-08 13:36:51 · 3085 阅读 · 4 评论 -
【HBase之轨迹】（2）使用 hbase命令 和 JavaAPI 操作 HBase（包括复杂查询--过滤器，HBase 工具类）
本篇介绍了 HBase 一系列命令的使用，包括表的增删改查，数据的增删改查同时列出了官网中提到的各个过滤器和比较器及其功能，最后在命令行和 Java 中进行使用JavaAPI 另外整理了一个工具集，以及其简单使用原创 2022-02-25 15:43:26 · 2872 阅读 · 3 评论 -
【HBase之轨迹】（1）使用 Docker 搭建 HBase 集群
继 hadoop 和 zookeeper 之后，再次使用 docker 搭建 hbase 集群，详细说明搭建过程以及 docker 搭建过程中会才踩到的坑。同时原创 2022-02-22 16:25:45 · 3596 阅读 · 4 评论 -
【Docker x Hadoop】使用 Docker 搭建 Hadoop 集群（从零开始保姆级）
—— 步骤 ——0. 背景1. 创建出第一个容器2. 为该容器配置 java 和 hadoop 环境3. 配置允许外界通过 ssh 连接容器4. 由该容器克隆出多个容器5. 为各个容器配置 ssh 免密登录6. 开始编写集群配置7. 启动集群0. 背景看到网上的教程，都是使用虚拟机克隆出多台虚拟机模拟集群但在真正的服务器上，发现这种方法行不通了这时候就想起 Docker 了，仔细想象 Docker 学完到现在还没真正实战过，这次正好是一个好机会实现思路也很简单，在 Docker 中创建多个 Ce原创 2021-10-03 20:29:08 · 2699 阅读 · 4 评论 -
【Hadoop之轨迹】Hadoop 使用（纯干货！）（用 Docker 模拟的集群）
—— 目录 ——1. 安装 Hadoop2. 模拟集群环境3. HDFS基础命令Java 调用 API 操作1. 安装 Hadoop本篇博客 Hadoop 版本为 3.1.3首先进入官网下载 Hadoop ：http://archive.apache.org/dist/hadoop/core要安装在 Linux 上的，选择 .tar.gz 后缀的压缩包上传到服务器解压后，配置环境变量：可以直接配置在 /etc/profile 文件中，也可以新建一个 xxx.sh 放在 /etc/profile原创 2021-10-16 10:50:07 · 395 阅读 · 0 评论 -
【Docker x Hadoop x Java API】xxx could only be written to 0 of the 1 minReplication nodes,There are 3
脑阔疼本人使用 docker 搭建的 hadoop 集群：【Docker x Hadoop】使用 Docker 搭建 Hadoop 集群（从零开始保姆级）今天在使用 Java API 对 Docker 搭建的 Hadoop 集群进行操作时创建和删除文件夹可以，但一到了上传和下载文件，就疯狂报错上传的文件在集群中可以看到，但大小均为 0 ，主要的异常报错主要如下：File /idea/warn.log could only be written to 0 of the 1 minReplica.原创 2021-10-07 15:57:34 · 1829 阅读 · 2 评论