mysql采样查询

文章介绍了如何处理大数据量查询时可能导致的前端页面卡住或崩溃问题,提出通过均匀采样策略来展示数据。具体实现是根据自增ID或时间戳等字段进行采样,例如每两个数据取一个,以此减少前端负载。示例包括基于主键ID、时间戳和临时生成ID的采样查询方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、背景

        需要一次性查询全量的数据,但是全量的数据吐出到前端页面渲染会导致页面卡住或者崩溃,所以需要通过均匀采样的方式突出数据。

2、实现思路

        根据特殊字段(值顺序增加或减少)进行均匀采样取数,比如自增id,自增时间戳,或者自己临时增加的自增字段。采样的核心逻辑就是看自增字段值是否整除采样间隔数。

3、数据准备

-- ----------------------------
-- Table structure for sample
-- ----------------------------
DROP TABLE IF EXISTS `sample`;
CREATE TABLE `sample`  (
  `id` int NOT NULL AUTO_INCREMENT,
  `name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NULL DEFAULT NULL,
  `timestamp` bigint NULL DEFAULT NULL,
  PRIMARY KEY (`id`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 1 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_general_ci ROW_FORMAT = Dynamic;

-- ----------------------------
-- Records of sample
-- ----------------------------
INSERT INTO `sample` VALUES (1, '熊大', 1690374458);
INSERT INTO `sample` VALUES (2, '熊二', 1690374459);
INSERT INTO `sample` VALUES (3, '熊三', 1690374460);
INSERT INTO `sample` VALUES (4, '熊四', 1690374461);
INSERT INTO `sample` VALUES (5, '熊五', 1690374462);
INSERT INTO `sample` VALUES (6, '熊六', 1690374463);
INSERT INTO `sample` VALUES (7, '熊七', 1690374464);

4、采样查询demo

1)根据自增主键id进行采样查询

SELECT * from sample where id % 2 = 0

2)根据单向变化的时间戳进行采样查询

SELECT * from sample where timestamp % 2 = 0

3)根据临时生成的id进行采样查询

select 
	* 
from (
	select @n:= @n+1 as n, a.* from (select * from sample )a,
	(select @n:= 0)b
)c 
where c.n % 2 = 1

注意:这里的2便可以看作采样间隔

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值