浅谈过期数据在各种数据库中的删除

最新推荐文章于 2024-09-27 13:03:24 发布
原创 最新推荐文章于 2024-09-27 13:03:24 发布 · 2.1k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#数据库

本文介绍了Redis、MySQL和MongoDB三种数据库中处理过期数据的不同策略，包括Redis的删除策略、MySQL的事件触发器及MongoDB的TTL索引等。

记录可能不全面，想到什么就记录一下

Redis

redis的删除过期数据策略如一下三个所示：

  • get/set 一个过期数据的时候，redis会进行清除
  • redis定期清除过期的key的数据
  • 数据存储超过内存限制的时候，触发主动清除策略 （策略有很多种，可自己进行定义）

MySQL

  • 基于事件触发器 event_scheduler来定时删除 （相当于mysql后台的定时任务）

MongoDB

  • 设置ttl索引，删除过期数据

当然还有就是在后端程序中自己设置过期删除的策略，这个就比较灵活了。
一般都可以通过 1、查询时候进行更新删除 2、后端定时任务执行sql语句

浅谈时序数据库（TSDB）
qq_47159522的博客
08-11 1万+
时序数据库（TSDB）：全称时间序列数据库，主要分为时间戳（timestamp）、标签（tag）、存档（filed）三部分，按照时间顺序记录数据。 物联网时代的兴星，万物互联的的思想，利用物联网设备的传感器传输设备的实时数据到时序数据库，对设备的异常、IO等数据进行记录。......
医疗数据库性能优化的关键策略浅谈
最新发布
AllenLV的博客
12-02 1820
在当今数据智能化时代，医院信息系统对于医院的高效运行起着至关重要的作用。医院信息系统的数据库管理系统，其重要性不言而喻。医院每天都要处理大量的患者信息、医疗记录、药品库存、医疗设备维护记录等数据，这些数据对于医院的日常运营和医疗决策至关重要。数据库以其强大的功能和稳定性，成为了医院信息系统的重要组成部分。优化医院数据库性能对于医院的高效运行具有必要性。首先，高效的数据库性能可以提高医疗服务的效率。在医疗服务流程中，从患者挂号、就诊、检查到治疗，每一个环节都涉及到大量的数据处理。如果数据库性能不佳，可能会导致
数据库Redis 过期删除策略和内存淘汰机制
12-25 140
数据库Redis 过期删除策略和内存淘汰机制 Redis 设置过期时间 Redis 有四个不同的命令可以用于设置键的生存时间（键可以存在多久）或过期时间（键什么时候会被删除）： EXPIRE——将键 key 的生存时间设置为 ttl 秒。 PEXPIRE——将键 key 的生存时间设置为 ttl 毫秒。 EXPIREAT——将键 key 的过期时间设置为 timestamp 所指定的秒数时间戳。 PEXPIREAT——将键 key 的过期时间设置为 timestamp 所指定的毫秒数时间...
mysql定时删除过期数据记录的简单方法
09-09
今天小编就为大家分享一篇mysql定时删除过期数据记录的简单方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
sql语句实现数据库备份和删除过期备份
05-03
使用sql语句实现数据库备份和删除过期备份
mysql利用存储过程删除数据库历史的过期数据
sxo112233的博客
09-21 1969
最近遇到老板一个任务，要求我删除我们生产数据库产生的流水表的历史的数据，总共大约有2千万条数据。由于流水表正在使用，如果直接删除2千万条这么多的数据会造成卡死，甚至锁表，影响业务。我也考虑过新建一个表，把要保留的数据导入新表，然后再删除旧表，但是由于这个表正在使用，所以这个方案不太合适。后来就查找资料，想到用存储过程的方式，创建一个存储过程，每次删除1万条数据，每次删除都sleep 5秒的时间，这样数据库不会有太大的压力，不会造成锁表。这样写，每次删完都会输出还剩多少行，比较直观清楚。
在PostgreSQL中实现数据的自动清理和过期清理例子解析
IT老农民的博客
09-27 978
对于需要定期清理大量过期数据的场景，使用定时任务或事件触发器可能更为合适。例如，可以创建一个函数来删除过期的订单数据，并在每次对订单表进行操作后触发该函数。在PostgreSQL中实现数据的自动清理和过期清理可以通过多种方法实现。可以定期删除过期的分区来实现数据的自动清理。然后，可以创建操作系统级别的定时任务（如Linux的。：可以创建一个存储过程来执行数据清理，然后使用定时任务来定期调用该存储过程。来记录事务的提交时间，然后根据这个时间戳来清理过期数据。，可以创建作业来定期执行数据清理命令。
浅谈Redis数据库的键值设计
12-15
此外，Redis的键空间通知功能还可以帮助监控和管理键的生命周期，例如在键过期或被删除时触发相应操作。而在关系型数据库中，这样的实时监听通常需要额外的轮询或触发器。 总的来说，Redis键值设计的关键在于理解和...
浅谈SQL Sever 2008数据库的备份和恢复 (1).pdf
09-19
在探讨SQL Server 2008数据库的备份和恢复过程中，需要了解的关键知识点包括数据库备份的意义、备份方法、恢复流程、数据库维护和清理策略。 首先，数据库备份的重要性体现在确保数据的安全性和完整性。由于数据库...
浅谈分布式锁的几种使用方式（redis、zookeeper、数据库）
12-16
在上述场景中，当业务从单服务器扩展到多服务器时，为了保证并发操作的正确性，需要引入分布式锁。 分布式锁应具备以下特性： 1. 可重入性：允许同一个线程多次获取锁，防止死锁。 2. 阻塞或非阻塞：根据业务需求...
处理数据仓库中历史数据的若干问题
weixin_30642029的博客
02-24 550
常见的DWH的构架，简易的来说如下图一和图二和图三。一般的企业，从数据生命周期而言，只有5-7年，特别是明细数据，数据的粒度层次越低，生命周期越短，数据的粒度越高，生命越长。对于一个银行的流水账数据而言，你或许在10年之后还想查询一下这个记录的明细，但是这样的概率是非常的低的，我们的企业也不可能为了一个在10年之后只有万分之一操作概率，而把这10年的数据都保留在一个实时查询的数据库中，当然我这里说...
正确处理移除list中数据
weixin_34129696的博客
10-12 787
2019独角兽企业重金招聘Python工程师标准>>> ...
Redis-数据库&过期
l_dongyang的博客
08-16 893
一、数据库 Redis中的键值对保存的地方叫做Redis的数据库，数据库的结构信息使用redisServer来描述。Redis服务器启动时，默认是初始化16个数据库，一般我们使用的都是0号数据库。 当然，可以通过使用select选择你要操作的数据库，一般时候，我们通过redis-cli客户端连接Redis的服务器的时候，会在会话处显示默认连接的数据库是[0]，可以使用select x来切换数据库，直接看到会话处的数据库标识变化。 但是，一般不建议切换数据库来进行数据分开存储，因为这需要使用者自己维护选
定时删除过期数据（MySQL数据表）
李玺
05-29 4892
需求： Mysql用户信息表，每隔15天进行一次清理，只保留15天内的用户数据 1.表结构 class UserInfo(db.Model): __tablename__ = '用户信息表' id = db.Column(db.Integer, primary_key=True) username = db.Column(db.String(32), index=True...
sql删除过期数据
weixin_34015566的博客
04-04 368
declare @i smallintdeclare @j smallintset @j=1--字段j用于控制循环select @i=count(distinct num) from spring --字段i用于存放客户的总人数while @j<=@ibegin delete from spring where timer in(select distinct timer from spr...
MYSQL：指定时间删除过期数据
热门推荐
Tam_KIng的博客
12-12 1万+
要求内容：要求在每天的凌晨一点定时删除sys_msg_offline表上的上一个月数据，防止表中数据过多 注意内容：为防止删除的数据量过大，造成删除时出现卡库，必须限制每次删除的数量（建议1000条） 设计思路：采用mysql自带的event事件，设计一个存储过程用于删除数据，之后创建event运行存储过程即可。 表结构：DROP TABLE IF EXISTS `sys_msg_offlin
Mysql数据库定时删除三天以上过期数据
qq_34462436的博客
10-18 6823
Mysql数据库定时删除三天以上过期数据简述定时器删除过期数据查询三天以上过期数据创建存储过程写Event事件打开事件事件开启与关闭：修改事件开启与关闭修改定时器时间间隔 简述 由于霍尼韦尔门禁项目要求，需要把设备信息存到数据库当中，并需要实现数据三天有效期，过期数据会定时检查删除掉。 定时器删除过期数据 查询三天以上过期数据 方式一 mysql> select * from t_de...
MySQL自动删除过期数据
qq_40425961的博客
10-08 1万+
做图书管理系统时，有一项需求是预约书籍后两小时后预约失效。我们预约的数据表是Reserve(book_id,user_id,reserve_time),于是打算在MySQL里面每隔10秒钟删除过期的预约（当前时间-reserve_time &amp;gt; 7200 秒）。百度了一下，基本上都是利用event实现的。下面是利用navicat实现自动取消预约的过程以及一些要注意的问题。 1.打开 event...
浅谈在MySQL数据库中应用程序设计
06-08
4. 数据库事务的处理：在应用程序中，需要对数据库操作进行事务处理，以保证数据的一致性和完整性。应用程序需要掌握MySQL的事务处理机制，并编写出能够正确处理事务的程序代码。 5. 数据库的性能优化：在MySQL中，...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值