greenplum 单表磁盘空间持续高速增长，解决办法(2)

最新推荐文章于 2025-03-19 22:04:09 发布
最新推荐文章于 2025-03-19 22:04:09 发布
阅读量606 收藏
点赞数
分类专栏： greenplum 文章标签： 数据库 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/a290450134/article/details/109513722
版权

描述

自上次解决空间增长问题后，又出现了此问题。初步解决方案还是上次的步骤，但是感觉治标不治本，这不是个办法，而且只有一张或两张表有这个问题。

这样就有了一个排查的入手点了。是因为频繁的插入删除么，还是频繁的更新新呢？

  1. GP物理空间使用的特性建议去了解一下
  2. 简单介绍一下，就是修改的动作，是逻辑删除，空间不释放
  3. 运行一段时间后有修改的表，需要进行真空处理

发现其中一张表是有删除、插入动作，另一张表只有插入动作。尝试了一下 真空还能释放空间，这就比较郁闷了。没有进行逻辑删除，那释放的空间是什么呢？

原因

排查后发现，两张表都有一个特点就是批量写入失败 重试。。。。

  1. 复杂的多表关联查询，然后写入汇总表
  2. 关联查询的同时，某些数据是异步的，拿不到
  3. 生成的数据对应汇总表的字段，有些异步字段是分布键

 

  1. 上游接口变更没有通知下游
  2. 比如类型变更，长度变更

以上情况导致了批量写入失败。

分析

以上情况分析原因，可能是在插入数据之前，会先在各个节点上申请足量的空间，比如数据，索引、静态分析等。

申请到空间后才会写入，但是写入失败了，空间也没有进行回收操作。这时程序触发的重试操作，没有回收的空间也不会再次 被分配，而是分配新的空间给到请求。

就导致了大量的闲置空间。

后果

线上使用到这种表的代码，会逐渐卡顿，温水煮蛙啊，等意识到卡顿的时候，去看表的大小 ，就几十个G了。如果是那种PV较高的平台，不回会让你有时间去停服处理的。只能用方案一种的方法。

如果必须要查询的情况下，就必须在临时表 生成对应条件的数据了，可能时间就比较紧迫了。

以上仅为个人观点，如有错误欢迎指正

 

ISBN号码
qq_38847794的博客
12-01 750
题目描述 每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括99位数字、11位识别码和33位分隔符，其规定格式如x-xxx-xxxxx-x，其中符号-就是分隔符（键盘上的减号），最后一位是识别码，例如0-670-82162-4就是一个标准的ISBN码。ISBN码的首位数字表示书籍的出版语言，例如0代表英语；第一个分隔符-之后的三位数字代表出版社，例如670代表维京出版社；第二个分隔符...
C++ISBN号码问题
PanDaoxi
07-19 1420
C++ISBN号码问题！
CCF CSP 201312-2 ISBN号码
Yuhan的博客
09-15 549
试题编号： 201312-2 试题名称： ISBN号码 时间限制： 1.0s 内存限制： 256.0MB 问题描述： 　　每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括9位数字、1位识别码和3位分隔符，其规定格式如“x-xxx-xxxxx-x”，其中符号“-”是分隔符（键盘上的减号），最后一位是识别码，例如0-670-82162-4就是一个标...
C++04函数-1与字符相关的函数:3、3242：【例40.3】ISBN码，让小孩子也能够理解的思路，C++信奥赛/竞赛/专项选拔赛
最新发布
Alan的博客
03-19 659
每一本正式出版的图书都有一个 ISBN 号码与之对应，ISBN 码包括 9 位数字、11位识别码和 3位分隔符，其规定格式如"x−xxx−xxxxx−x"，其中符号"−−"是分隔符（键盘上的减号），最后一位是识别码，例如 "0−670−82162−4" 就是一个标准的 ISBN 码。首位数字乘以1加上次位数字乘以2⋯以此类推，用所得的结果mod11，所得的余数即为识别码，如果余数为 10，则识别码为大写字母'X'。"，否则，按照规定的格式，输出正确的 ISBN 号码（包括分隔符"−"）。
C++中的ISBN号码问题
Linwk的博客
07-10 5949
#include<iostream> #include<cstring> using namespace std; int main(){ //ISBN char a[14]; cin>>a; int b[10],j=0,sum=0; for(int i=0;i<13;i++){ if(a[i]!=...
【C++】牛客——ISBN号码
一岁就可帅的博客
05-23 917
每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括9位数字、1位识别码和3位分隔符，其规定格式如“x-xxx-xxxxx-x”，其中符号“-”是分隔符（键盘上的减号），最后一位是识别码，例如0-670-82162-4就是一个标准的ISBN码。以此类推，用所得的结果mod 11，所得的余数即为识别码，如果余数为10，则识别码为大写字母X…共一行，假如输入的ISBN号码的识别码正确，那么输出“Right”，否则，按照规定的格式，输出正确的ISBN号码（包括分隔符“-”）。
经典C++题目ISBN号码
10-22
CCF某次考试的真题
c++:ISBN号码
weixin_65799100的博客
08-12 726
c++:ISBN号码
ISBN号码(c++)
wtj20100601的博客
05-28 1162
c++满分代码鸭~
【c++ISBN号码】题解与做题感想交流
JaneSilver的博客
07-03 1554
这次感谢的不是学长是我同桌，他每次都能想到我想不出的简单做法。。。每次我写一大堆，他只要些一点点代码就能解决。。这次能肝出这篇博客多亏了他的帮助ヾ(๑╹◡╹)ﾉ"问题 : ISBN号码时间限制: 1 Sec  内存限制: 128 MB题目描述（绿字是科普，对做题没啥用就隐藏了( ･´ω`･ )）每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括9位数字、1位识别码和3位分隔符，其规定...
ISBN码C++（C++学习）
Creeper05的博客
10-31 1973
#include<bits/stdc++.h> using namespace std; string s; int sum=0,pos=0; int main(){ cin>>s; for(int i=0;i<s.size();i++){ if(s[i]=='?') pos=i; } for(int i=0;i<s.size();i++){ if(s[i]>='0'&&s[i]<='9'){ sum+=(s[i]-
C++ [NOIP2008 普及组] ISBN 号码
Zr1ose的博客
03-22 1948
以此类推，用所得的结果 $ \bmod 11$，所得的余数即为识别码，如果余数为；一个字符序列，表示一本书的 ISBN 号码（保证输入符合 ISBN 号码的格式要求）你的任务是编写程序判断输入的 ISBN 号码中识别码是否正确，如果正确，则仅输出。ISBN 码的首位数字表示书籍的出版语言，例如。，否则，按照规定的格式，输出正确的 ISBN 号码（包括分隔符。一行，假如输入的 ISBN 号码的识别码正确，那么输出。就是分隔符（键盘上的减号），最后一位是识别码，例如；之后的三位数字代表出版社，例如。
Day - 27 ISBN号码（字符串处理）
灯火阑珊_
02-15 204
AcWing 433.ISBN号码 考点:字符串处理、模拟 每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括9位数字、1位识别码和3位分隔符，其规定格式如“x-xxx-xxxxx-x”，其中符号“-”是分隔符（键盘上的减号），最后一位是识别码，例如0-670-82162-4就是一个标准的ISBN码。 ISBN码的首位数字表示书籍的出版语言，例如0代表英语；第一个分隔符“-”之后的三位数字代表出版社，例如670代表维京出版社；第二个分隔之后的五位数字代表该书在出版社的编号；最后一位为识别
YSU-ISBN码识别C++实现
Fo_Pluto的博客
03-10 3458
国际标准书号（International Standard Book Number），简称ISBN，是专门为识别图书等文献而设计的国际编号。随着科技的不断发展，我们早已进入了信息时代，计算机科学正在融入到我们生活的方方面面，而视觉技术的应用也越来越广泛，利用OpenCV并在C++语言的开发下，对ISBN号进行识别就是其中一种应用。但是，OpenCV对原始图像的识别是非常困难的，所以需要对图像进行预处理。这需要先将图像转为灰度图、进行去噪、图像二值化、边缘检测、角度调整。
3242：【例40.3】ISBN码（C++、python）
青少年趣味编程
09-09 2219
3242：【例40.3】ISBN码（C++、python）
【CCF】ISBN号码（C++小白版）
BlupleZara的博客
08-13 5773
最大公约数和最小公倍数 本题要求两个给定正整数的最大公约数和最小公倍数。 输入格式: 输入在一行中给出两个正整数M和N（≤1000）。 输出格式: 在一行中顺序输出M和N的最大公约数和最小公倍数，两数字间以1空格分隔。 #include <bits/stdc++.h> using namespace std; int main() { int M,N,i; cin>>M>>N; i=M>N?N:M; for(;i>=
CCF记录----ISBN号码
Brioal Is Hardworking
04-14 676
CCF记录—-ISBN号码题目：问题描述每一本正式出版的图书都有一个ISBN号码与之对应，ISBN码包括9位数字、1位识别码和3位分隔符，其规定格式如“x-xxx-xxxxx-x”，其中符号“-”是分隔符（键盘上的减号），最后一位是识别码，例如0-670-82162-4就是一个标准的ISBN码。ISBN码的首位数字表示书籍的出版语言，例如0代表英语；第一个分隔符“-”之后的三位数字代表出版社，例如6
CCF 201312-2 ISBN号码 C++语言实现
SDUchen1998的博客
11-11 717
#include <iostream> #include <string> #include<vector> using namespace std; // 这道题需要厘清char 和 int 之间的关系 // 并且清楚在string可以如何访问数据，访问到的数据类型是什么？ int main() { string input; //定义输入 vector<char> store; //用于存储非分隔符元素 // 拼接输...
ISBN号码 c++
01-25
### C++ 中处理 ISBN 号码的方法 #### 验证 ISBN 的有效性 为了验证一个给定的 ISBN 是否有效，可以采用加权求和的方式计算校验位。对于长度为13的标准ISBN（即带有前缀），可以通过下面的算法来检验： - 对于每本书籍对应的 ISBN 编号，除去最后一位作为识别码外，其余各位数字分别乘以权重因子(位置奇数则权重为1,偶数则为3)，再将这些积相加以获得总和。 - 将上述得到的结果除以10取余数，并用10去减这个余数得出最终应该有的识别码。 如果实际给出的识别码等于通过此方法算出来的理论值，则说明该ISBN是有效的；反之则是无效的[^4]。 ```cpp bool isValidISBN(const std::string& isbn){ int sum = 0; for(int i=0; i<isbn.length()-1;i++){ if(isbn[i]!='-' && (isbn[i]<'0'||isbn[i]>'9')){ return false; } if(i%2==0){ sum += isbn[i]-'0'; }else{ sum += 3*(isbn[i]-'0'); } } char lastDigit = '0' + (10-(sum % 10))%10; return isbn.back() == lastDigit || isbn.back()=='X'&&lastDigit=='0'+10; } ``` #### 处理并修正错误的 ISBN 输入 当接收到可能不正确的 ISBN 输入时，程序应当尝试纠正它。这通常涉及到移除非数字字符以及调整到合适的格式。一旦清理完毕后，就可以应用前面提到的有效性检查逻辑来进行验证。如果不匹配，则可以根据已知规则推测最有可能正确的版本[^2]。 ```cpp std::string correctISBN(std::string inputIsbn){ // Remove all non-digit characters except the final check digit. auto newEnd = std::remove_if(inputIsbn.begin(),inputIsbn.end(), [](char c){return !isdigit(c)&&c!='X';}); *newEnd='X';// Assume X as placeholder for unknown value while(newEnd!=inputIsbn.end()){ *(newEnd--)=(isValidISBN(inputIsbn))?(*(newEnd)):((*(newEnd)=='X')?('0'):('X')); } // Ensure proper formatting with hyphens at positions 1 and 5 from end. inputIsbn.insert(inputIsbn.size()-4,"-"); inputIsbn.insert(inputIsbn.size()-9,"-"); return inputIsbn; } ``` 以上代码片段展示了如何在C++中实现基本的ISBN验证功能及其纠错机制。需要注意的是这里假设了未知情况下最后一个可能是‘X’的情况，实际情况可能会更复杂一些取决于具体应用场景的要求[^3]。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值