tidb-gc相关问题

原创 已于 2022-06-02 14:49:43 修改 · 211 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#数据库

于 2022-06-02 14:37:58 首次发布
这篇博客探讨了在数据量保持稳定的情况下，RocksDB的compaction过程可能会进入稳定态，导致tikv_gc_safe_point在一天内未触发的情况。作者指出这在测试环境中可能遇到，但在实际应用中较为罕见。文章持续更新中，深入理解RocksDB的内部机制对于数据库管理和优化至关重要。

tikv_gc_safe_point不变的原因：
这个在实际使用中很少遇到，测试中会有可能遇到，原因是因为
数据量如果没有变化， rocksdb 的 compaction 会进入稳定态。即会出现 1 天内没有任何 compaction 任务触发

持续更新中

https://asktug.com/t/topic/63358

PCTA 认证考试——保姆级经验分享
Mei_Shi_Xiong的博客
08-15 4960
本文详细介绍了考取 PingCAP TiDB 数据库专员认证证书（PCTA）的全流程。
TIDB-cdc的初步使用
line_on_database的博客
09-15 2467
一、背景 目前想用tidb支撑一个主要的业务，为了安全，需要在后面接一个mysql用来备份，闪回及关键时刻切回的操作 二、操作流程 1.安装ticdc 这一步可以通过部署部署集群的时候安装，也可以后期扩容，这一步比较简单 2.tidb端的操作 因为同步没法找到一个准确的时间点，且主库又无法停业务，所以需要提前复制一部分 2.1 查看tidb的gc配置 # ticdc的start-ts 的值需要大于 TiDB 集群当前的 tikv_gc_safe_point mysql> select VARIABLE
TiDB学习笔记（八）-数据库故障处理
干货满满~
01-09 1486
tidb数据库故障处理
【TiDB】大数据存储组件TiDB原理+实战篇
互联网小阿祥
11-12 1万+
大数据组件TiDB原理+实战篇
TiDB 学习笔记
十二的博客
07-29 1248
Tidb 学习笔记
PCTA考试经验分享
Du.的博客
04-08 3261
考了OBCP，又从多个渠道听说TiDB和OceanBase的相似性，所以一直想了解TiDB原理。学习的最大驱动力就是考试了，所以就报了PCTA。 备考包括观看TiDB提供的【301 TiDB 系统管理基础】视频课程和学习TiDB提供的在线文档 文档可以直接下载PDF，学习很方便；视频的话就需要在线观看了 视频总共800分钟以上，TiDB建议观看60%就合格，但是强烈建议大家看完，因为我刚开始可以1.25倍速看 https://learn.pingcap.com/learner/course/3000
【TiDB数据库技术】TiDB-PTCA真题解析：涵盖TSO、缓存、HTAP特性及在线DDL等核心考点的深度分析
08-11
题目涉及的内容广泛，包括但不限于TSO的组成、TiDB Server缓存机制、TiDB Cloud数据所有权、在线DDL、HTAP特性、Raft日志复制、数据转换为key-value形式、内存悲观锁的应用、MVCC机制、GC机制、Raft与Multi-Raft、...
TiDB 组件 GC 原理及常见问题
weixin_42241611的博客
06-01 1103
通过对 TiDB 分布式事务实现的了解，我们知道 TiDB 集群具体的数据存储在 TiKV 上，集群的元数据信息存在 PD 上，TiDB 要做数据旧版本的回收，则需要有个类似 GC worker 的角色从 PD 拿到元数据信息然后对 TiKV 中的数据做垃圾回收工作。假设我们直接删除，删除之后，如果用户要读 t4 这个快照里面 B 的值，发现 B 上有个指向 (A，t1) 的这个 lock, 我们开始从 A 上确认事务 t1 的状态，但是在 TiKV 中找不到 （A，t1) 这个事务，也就无法确认其状态。
centos7.5离线安装部署TiDB-6.5.0分布式系统
北凉徐凤年的博客
05-17 2106
TiDB 是 PingCAP 公司自主设计、研发的开源分布式关系型数据库，是一款同时支持在线事务处理与在线分析处理 (Hybrid Transactional and Analytical Processing, HTAP）的融合型分布式数据库产品，具备水平扩容或者缩容、金融级高可用、实时 HTAP、云原生的分布式数据库、兼容 MySQL 5.7 协议和 MySQL 生态等重要特性。
TiDB-从0到1-TiCDC数据同步工具
MZZHAO23的博客
08-23 1105
TiDB原生数据同步工具TiCDC
TiDB深度翻译出现内存溢出问题
luostudent的博客
09-21 4804
为什么SQL会占用到这么大的内存，怎么查看执行计划，怎么调优
TIDB-Error 1105: Out Of Memory Quota问题解决
line_on_database的博客
05-20 6703
一、背景 复杂sql查询报错 二、原因 单条s q l使用内存默认为1G 三、解决 tiup clusteredit_config tidb-test server_configs: tidb: mem-quota-query: 4294967296 # 修改大小 tiup cluster reload tidb-test -R tidb 问题解决 ...
TiDB---PCTA认证
热门推荐
http://DBAtao.cn/
02-24 1万+
【前言】 各位小伙伴们大家好鸭，我又又来了，最近又去备考数据库方面的证书了—PCTA，下面咱们聊一聊它。 PCTA是属于TiDB分布式数据库的认证考试，目前发布的考试有2个级别，PCTA和PCTP，PCTP是需要在通过PCTA的基础上才可进行认证，今天咱们来聊一聊PCTA。 温馨提示：备考资料三连之后私聊我即可get哦，free的~ 最近就有认证考试，两个星期举办一次，原价699，现在不要69，也不要6.9，只要一颗爱学习的心， []~~(￣▽￣)~* 考试报名链接：https://learn.pingc
TiDB集群的GC不回收案例（案情二）
TiDB 社区干货传送门
06-17 319
作者：dbapower 原文来源： https://tidb.net/blog/3d9ed0a2 ...
TiDB 内存控制文档
weixin_42241611的博客
07-17 1446
目前TiDB已经能够做到追踪单条SQL查询过程中的内存使用情况，当内存使用超过一定阈值后也能采取一些操作来预防OOM或者排查OOM原因。你可以使用系统变量LOGCANCEL。
【TiDB】PCTA认证课后习题整理
授人以鱼不如授之以渔
03-09 3537
整理的TiDB PCTA课程后的习题 之前整理的习题，分享给大家，一定要多刷，每个选项都要多刷
tidb数据库 应用卡顿问题解决思路
2301_80339661的博客
10-18 508
1、在分析系统中SQL分析数据的时候需要做大量的数据抽取、计算，除了优化数据库本身，我们还更应该关注程序上的优化，合理避免出现大量资源消耗情况，提高系统的稳定性和安全性，更多关于内存优化的配置可以参考内存调优。
TiDB-PCTA课程课后习题
coding0820的博客
06-24 3896
TiDB-PCTA认证，学习
PingCAP TiDB数据库专员PCTA认证笔记
handsomestWei的博客
12-23 1168
PingCAP TiDB数据库专员PCTA认证笔记
我的集群这样的。[tidb@zy-nph-skg-fat-dba-dbworker10 ~]$ tiup cluster display test Cluster type: tidb Cluster name: test Cluster version: v7.5.6 Deploy user: tidb SSH type: builtin Dashboard URL: http://172.31.28.214:2379/dashboard Grafana URL: http://172.31.28.214:3000 ID Role Host Ports OS/Arch Status Data Dir Deploy Dir -- ---- ---- ----- ------- ------ -------- ---------- 172.31.28.215:8300 cdc 172.31.28.215 8300 linux/x86_64 Up /tidb-data/cdc-8300 /tidb-deploy/cdc-8300 172.31.28.216:8300 cdc 172.31.28.216 8300 linux/x86_64 Up /tidb-data/cdc-8300 /tidb-deploy/cdc-8300 172.31.28.214:3000 grafana 172.31.28.214 3000 linux/x86_64 Up - /tidb-deploy/grafana-3000 172.31.28.214:2379 pd 172.31.28.214 2379/2380 linux/x86_64 Up|L|UI /tidb-data/pd-2379 /tidb-deploy/pd-2379 172.31.28.214:9090 prometheus 172.31.28.214 9090/12020 linux/x86_64 Up /tidb-data/prometheus-9090 /tidb-deploy/prometheus-9090 172.31.28.214:4000 tidb 172.31.28.214 4000/10080 linux/x86_64 Up - /tidb-deploy/tidb-4000 172.31.28.214:20160 tikv 172.31.28.214 20160/20180 linux/x86_64 Up /tidb-data/tikv-20160 /tidb-deploy/tikv-20160 172.31.28.215:20161 tikv 172.31.28.215 20161/20181 linux/x86_64 Up /data/deploy/install/data/tikv-20160 /data/deploy/install/deploy/tikv-20160 172.31.28.216:20161 tikv 172.31.28.216 20161/20181 linux/x86_64 Up /data/deploy/install/data/tikv-20160 /data/deploy/install/deploy/tikv-20160 Total nodes: 9 [tidb@zy-nph-skg-fat-dba-dbworker10 ~]$ 写个 ticdc 命令
最新发布
08-31
### 相关问题 1. 如何验证 TiCDC 同步数据的完整性？ 2. 二进制部署下如何实现 TiCDC 配置的热更新？ 3. 同步任务中断后如何避免全量重新同步？ 4. 如何监控 TiCDC 的内存和 CPU 使用峰值？ 5. 当同步延迟持续...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值