自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 收藏
  • 关注

原创 【Flink-stream开发中,将 kafka 的数据存入 hbase 中(scala)】

此处使用的是HBaseSinkFunction函数,需要HBaseConfiguration参数,MutationConverter参数。

2024-11-08 21:38:31 1460

原创 【flume保姆级使用教程】

有单文件存入到hdfs,kafka中,有多路复用存入hdfs、kafka中

2024-11-08 17:21:37 1834

原创 【Azkaban的保姆级安装部署】

azkaban的单机服务器部署以及分布式多执行器的部署

2024-10-29 20:01:08 2041 1

原创 【在Flink开发中,读取外部数据源MySQL数据的方法(scala编写)】

flink-Datastream_api中怎么把mysql作为source获取数据

2024-10-28 16:53:58 1398

原创 【spark on yarn模式的保姆级教程】

启动spark历史服务器前,需要在hdfs创建对应的目录存放日志。

2024-10-10 16:12:21 292

原创 【flink-stream开发中,将 kafka 的数据写入 hbase 中】

创建hive外部表关联hbase表(先创建hbase表,再创建hive外部表关联)

2024-09-20 09:50:22 873

原创 【在shell脚本里面使用ssh远程操作时,出现找不到环境变量的问题】

解决ssh 远程执行命令,找不到环境变量的问题

2024-09-06 10:06:56 805

原创 在idea里面用sbt构建项目

sbt构建项目

2024-09-03 11:13:31 634

原创 【在centos7上安装mysql5.7】

在centos7里面安装mysql数据库

2024-09-02 11:01:20 1177

原创 【hive-4.0.0 保姆级安装部署】

hadoop3.3.6版本下安装hive4.0版本,mysql版本选的是8.37,也可选择其他mysql版本,需要注意的一个点就是,jdbc驱动的名称略有区别

2024-07-11 12:00:00 1436

原创 kafka部署

前置条件。

2024-07-10 12:00:00 258

原创 【Hadoop-3.X(HA)高可用的保姆级教程】

master启动journalnode: hdfs --daemon start journalnode。slave1中没有 namenode 则 hdfs namenode -bootstrapStandby。==>目的是:除master的其他namenode节点上同步信息(备份namenode) 执行一次。master格式化namenode: hdfs namenode -format。master格式化zk: hdfs zkfc -formatZK。然后在slave1上启动备用的namenode。

2024-07-10 08:30:00 2092

原创 【hbase-2.5.8分布式的保姆级教程】

前置条件。

2024-07-09 19:00:00 249

原创 zookeeper部署

在三台虚拟机上部署zookeeper。

2024-07-09 14:35:06 288

原创 【Hadoop-3.3.6 完全分布式的保姆级教程】

解决了mapreduce找不到主类的错误

2024-07-08 20:16:52 1509

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除