- 博客(11)
- 收藏
- 关注
RSS订阅原创 使用cfr.jar反编译jar包查看源码
在开发过程中遇到只有部署的程序jar包丢失源码的情况，为获取源码我们可以使用反编译工具cfr把jar反编译成java源文件。反编译完成后可在目标目录output20240108下查看。
2025-01-08 17:54:28
262
原创 集合转RDD过程中报错java.lang.ArrayIndexOutOfBoundsException: 10582
【代码】集合转RDD过程中报错java.lang.ArrayIndexOutOfBoundsException: 10582。
2025-01-07 14:40:14
125
原创 hbase ExportSnapshot迁移hbase表
ExportSnapshot工具将与快照相关的所有数据(hfiles、日志、快照元数据)复制到另一个集群。
2022-11-18 13:42:37
1092
原创 数据文件推送sftp文件服务器脚本
脚本：从impala中抽取数据生成文件(.csv/.dat)，并生成.chk检查文件将生成的本地文件put到sftp文件服务器#!/bin/bashpath="$(cd "$(dirname "$0")"; pwd)"cd $path##配置文件名conf=${1}# 跑批时间trade=${2}current_date=`date "+%Y%m%d"`current_time=`date "+%H%M%S"`mkdir -p /data/TextData_Transfer
2022-01-05 15:09:42
847
原创 hbase ImportTsv的使用
标题ImportTsv的使用ImportTsv 是一个将 TSV 格式的数据加载到 HBase 的工具类。它有两种不同的用法：1.通过 Puts 将 HDFS 中的 TSV 格式的数据加载到 HBase 中；2.通过生成StoreFile的方式使用completebulkload将数据加载到HBase中。通过 Puts 将 HDFS 中的 TSV 格式的数据加载到 HBase 中$ bin/hbase org.apache.hadoop.hbase.mapreduce.ImportTsv '-Di
2021-12-29 16:00:40
1533
原创 hbase备份表
hbase备份表disable目标表disable 'accumulation_profit'建立目标表的快照snapshot 'accumulation_profit','accumulation_profit_20211227'克隆目标表的快照clone_snapshot 'accumulation_profit_20211227','accumulation_profit_bak'删除快照delete_snapshot 'accumulation_profit_2
2021-12-27 15:55:28
1075
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人