自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(1)
  • 收藏
  • 关注

原创 如何在IDEA IDE 开发环境中直接以 Yarn 方式提交Spark 代码到远端 Yarn集群运行

IDEA IDE 中直接以Yarn 方式调试Spark 程序,无需打包上传

2024-05-20 16:20:35 1587 1

Doris 数据库 自动查找需要compaction 的tablet ,并自动执 compaction shell script

!!内部代码要自己修改为自己的目录,不是立马可执行! 【一 功能】: (1) 自动查找系统数据库职位务数据库中的表 (2)根据 get_need_compaction_tables.sh 中 的阈值 version_count_max=500 筛选出需要手工进行compaction的tablets (3)根据生成的结果执行 compaction; 【二 .脚本介绍】 (1)get_need_compaction_tables.sh : 根据 version_count_max=500 筛选出需要进行compaction的表列表。 (2)auto_compact_doris_tablet.sh : 本地生成命令文件 (3)run_base.sh : 执行(2) 生成的命令文件 base compaction 类型 (4)run_cumul.sh : 执行(2)生成的命令文件 cumulative compaction 类型; 三、 使用cron 排程运行 run_cumul.sh(常用) 或 run_base.sh

2024-11-12

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除