使用redis碰到maxmemory

Redis内存设置 需要注意, maxmemory限制的是Redis实际使用的内存量, 也就是used_memory统计项对应的内存。由于内存碎片率的存在, 实际消耗的内存可能会比maxmemory设置的更大, 实际使用时要小心这部分内存溢出。通过命令修改(重启失效):config set maxmemory-policy allkeys-lru 命令设置内存淘汰策略,config get maxmemory-policy 命令获取当前采用的内存淘汰策略。allkeys-lru:对所有key使用LRU算法进行删除(生产推荐) 阅读详情

使用redis碰到maxmemory

最近碰到一个问题,在测试环境高并发调用生产数据,等到数据清理的定时任务完成时,仍然发现大量的数据未被清理,占用较大内存空间。
因为我的key之间会有关联关系,分析残留的数据,发现数据的关联关系并不完整,不完整的数据不能被寻址所以最终残留下来了。
查看redis内存信息:

> info memory
# Memory
maxmemory:14000000000
...
used_memory_peak_human:13.04G

刚开始没注意,后来发现maxmemory的单位是byte,按照1024换算是13.038G,而下面的used_memory_peak_human:13.04G表示内存已经达到过峰值,峰值就是maxmemory!

经过多番资料查找,参考:https://blog.youkuaiyun.com/codetomylaw/article/details/50017633,我环境的redis配置就是allkeys-random。

> config get maxmemory-policy
1) "maxmemory-policy"
2) "allkeys-random"

所以,罪魁祸首就是redis在达到上限后随机删除了部分key,导致数据链不完整。
解决办法:根据redis maxmemory和单位数据的大小计算可容纳的数据个数,在redis达到峰值前做好保护,主动清理最老的数据。

关于社交媒体上病毒式传播的一些小研究 关于社交媒体上病毒式传播的一些小研究 调研目的:探究为什么一些信息可以在社媒上获得大量的转发量,信息的发布者到底利用了接受者的什么特点使得自己的信息可以快速传播。 调研方式:线上问卷调研 调研对象:问卷主要向学生发放 互联网刚刚兴起的时候,就有许多的病毒式传播的信息。最有名的莫过于“金锁链”,即将一封邮件转发给你最好的几位朋友让他们继续接力。在人们高度依赖社交媒体的现在,自然有更多的信息在不同的人... 阅读详情

相关推荐

Python脚本自动化芯片设计?PyAether实战教程带你玩转EDA

本文通过PyAether实战教程,详细介绍了如何利用Python脚本实现芯片设计自动化。内容涵盖环境搭建、核心对象模型解析,并重点演示了原理图自动生成、参数化单元创建及设计验证流程集成,帮助EDA工程师从重复性手动操作中解放,显著提升设计效率与一致性。

e4f5g6h的博客 1319

redis.conf详解之maxmemory

本文基于 redis_version:6.2.5 用法 控制节点能使用的最大内存 maxmemory <bytes>   注意事项: maxmemory的默认值是0,也就是不限制内存的使用。 32bit系统如果使用默认配置或配置为maxmemory 0则最大使用3G内存(详见下方源码)。 maxmemory的值没有最小限制(但是如果低于1MB,会打一条WARNING日志)。 如果设置了maxmemory选项(值 >= 1),redis在接收命令时总是会判断当前是否已经超出.

weixin_47214315的博客 1万+

从PX4的FRD到Mavros的FLU:手把手教你正确配置`setpoint_raw/local`话题发布无人机目标点

本文详细解析了PX4的FRD与Mavros的FLU坐标系转换问题,手把手教你正确配置`setpoint_raw/local`话题发布无人机目标点。通过实战指南和常见错误排查,帮助开发者避免方向错乱问题,提升无人机控制精度。

weixin_33712987的博客 422

Redis 配置中maxmemory 参数

在 Redis 配置中,是一个非常重要的参数,用于限制 Redis 实例可以使用的最大内存量。以下是对。

Leon_Jinhai_Sun的博客 1982

城市规划师必备:ArcMap里用这个免费工具,5步完成建筑群通风廊道分析

本文介绍了城市规划中利用ArcMap进行建筑群通风廊道分析的高效方法,重点讲解了迎风面投影指数(FAI)的应用。通过5个步骤,从数据准备到规划应用,帮助规划师快速评估城市通风潜力,优化建筑布局,提升城市风环境质量。

weixin_26800111的博客 412

Yolov5自定义图片训练测试及模型调优(详细过程)

Yolov5自定义数据训练及测试1. 图像数据获取、标注2. 数据集划分及准备3. 配置训练参数,准备训练:3.1 修改data/训练配置xxx.yaml文件:3.2 修改models模型配置xxx.yaml文件4. 开始训练5. 测试训练后的模型: 1. 图像数据获取、标注 如果自定义训练自己的数据集,首先需要数据标注,至于数据来源可以是下载现有的开发数据集、拍照、爬虫等等。 如果是拍照、爬虫等获取的数据图片,需要进行数据标注,这个过程可以使用工具来做,但也需要一些手动操作 。。并且图片越多越好,如果

HowieXue 薛永浩的博客 10万+

REdis之maxmemory解读

redis.conf中的maxmemory定义REdis可用最大物理内存,有多种书写方式,以下均为合法: maxmemory1048576 maxmemory1048576B maxmemory1000KB maxmemory100MB maxmemory1GB maxmemory1000K maxmemory100M ...

一见 5100

15、人工智能社会学:关系视角下的机器相遇

本文探讨了将人工智能视为社会主体的可能性,提出了一种关系视角下的人工智能社会学。通过结合卢西亚娜·帕里西、艾伦·图灵和乔治·赫伯特·米德的理论,强调不确定性在人工智能运行中的核心地位,并分析了人工智能如何通过与社会环境的互动催生新奇性,从而拓展社会学的研究范畴。文章还讨论了人工智能对社会结构和社会互动的影响,以及其作为社会主体所带来的理论和实践意义,为未来人工智能社会学的发展提供了方向。

pea55的博客 74

Redis详解(2)内存使用与管理

一、内存使用情况 可以通过info memory命令查看内存使用情况 used_memory: Redis分配的内存总量,即存储的所有数据占用的内存。包括redis进程内部开销和使用的虚拟内存(即swap),单位byte。 used_memory_human: 以可读格式返回使用的内存量(只是显示更友好). used_memory_rss:从系统角度,显示Redis进程占用的物理...

黄规速博客:学如逆水行舟,不进则退 1万+

20、Citrix 云桌面常见VDA注册问题汇总

本文总结了与 VDA 中出现的 VDA 会话断开连接、注册、会话卡住以及挂起/崩溃相关的主要支持文章。

我在Citrix、VMware、Veeam、微软和NVIDIA等领域拥有丰富经验的专业人士,专注于设计和维护虚拟化基础设施、实施备份与灾难恢复策略,致力于优化企业的IT环境。 945

raw (R/G, B/G) 色度域从白点筛选到 mired 直方图的完整构建流程

raw 域用draw​δraw​筛出白点后,。,与 CIE uv 域流程逐步对应。

大熊 40

世界六大电脑病毒,你见过几个?

世界六大电脑病毒排名,你见过几个?

nwelcome的博客 4639

【即插即用模块】卷积篇 | CVPR 2025 | LSConv:大核捕全局,小核提速度,替换 3×3 卷积/自注意力,精度效率双飙升

文章摘要: LSConv是一种新型卷积模块,采用"大核感知+小核聚合"策略,在轻量级视觉任务中表现出色。该模块由两部分组成:7×7深度可分离卷积(LKP)捕捉全局信息,动态3×3卷积(SKA)实现高效特征聚合。相比传统卷积和自注意力机制,LSConv在降低计算量的同时提升了精度,尤其适合高分辨率视觉任务。实验表明,在轻量化模型中用LSConv替代3×3卷积或自注意力,可显著减少计算量并提高准确率。模块支持即插即用,提供Triton优化实现,可直接集成到现有卷积或Transformer架构

主要更新底层视觉(去噪、超分等)相关的科研内容,形式为【论文精读】+【论文复现】 1124

做为一个程序员,你都见过什么有趣的电脑病毒?

提起电脑病毒,小伙伴你最先想到的是什么?熊猫烧香,木马,还是前段时间很火的勒索病毒…做为一个程序员,你都遇到过那些有趣的电脑病毒? 壹 我以前中过一个病毒,在我电脑桌面左侧会多了一个可爱的卡通妹子,在哪里吃饭睡觉玩耍,她肚子饿了就去吃掉最靠近她的图标,所以我每天都要准备一堆复制出来的快捷方式让她吃。她**有时候无聊的时候会抖动你的屏幕,你如果不哄她玩,她就一直抖你的窗口。**最气人的是,如果你玩电...

suxue_java的博客 1283

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

做为一个程序员,你都见过什么有趣的电脑病毒?(非常详细)零基础入门到精通,收藏这一篇就够了

提起电脑病毒,小伙伴你最先想到的是什么?熊猫烧香,木马,还是前段时间很火的勒索病毒…做为一个程序员,你都遇到过那些有趣的电脑病毒?壹我以前中过一个病毒,在我,她肚子饿了就去吃掉最靠近她的图标,所以我每天都要准备一堆复制出来的快捷方式让她吃。她**有时候无聊的时候会抖动你的屏幕,你如果不哄她玩,她就一直抖你的窗口。**最气人的是,如果你玩电脑太晚了,她就会自动关机。看小字好像是说不要吵她睡觉……… 这玩意任务管理器上是看不到的,杀毒很多次了都没用,开机启动项目也发现不了。所以一直就让她闹腾下去了。

Javachichi的博客 1505

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

redis单机版部署

1、下载版本 以下是我使用的版本:redis-4.0.1 链接:https://pan.baidu.com/s/1No4Yvyhx7fgGR_w6-LhXtw 提取码:r3fu 2、上传解压 将下载好的源码包传送至/usr/local/redis目录,并解压 tar -zxvf redis-4.0.1.tar.gz 3、安装依赖包: yum install -y gcc 4、进入redis目录,执行编译 make PREF...

weixin_40482816的博客 3586

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

redis(5)、redis最大缓存设置策略

redis技术目录   一、最大缓存设置 示例:maxmemory 100mb  单位:mb,gb。 默认为0,没有指定最大缓存,如果有新的数据添加,超过最大内存,则会使redis崩溃,所以一点要设置。 设置maxmemory之后,配合的要设置缓存数据回收策略。   二、回收策略算法设置  当maxmemory限制到达的时候,Redis将采取的准确行为是由maxme...

conge 630

Redis 之内存管理

内存使用统计命令: info memory 属性说明: used_memory:Redis分配器分配的内存总量(单位是字节),也就是内部存储的所有数据内存占用量。used_memory_human只是显示更友好。 used_memory_rss:从操作系统的角度显示Redis进程占用的物理内存总量。 mem_fragmentation_ratio:内存碎片比率,该值是used_memory_rss / used_memory的比值。 当mem_fragmentation_ratio>1时,说明us

const_ 1605

Redis的相关问题

redis只存热点高频的数据 1.生产上Redis的内存设置为多少(在conf文件夹里面进行配置) maxmemory 决定redis的默认配置(它的单位为:字节类型) 默认的redis内存大小:在64位的操作系统下是不限制内存大小,如果是32位操作系统最大内存为3GB 生产推荐是占物理内存的四分之三 修改内存设置的两种方式: 1.conf文件进行配置 2.redis动态进行修改 进行redis内部:操作命令 #设置最大内存 config set maxmemory 1024 #获取相关信息 config

L_J_X03的博客 433

maxMemory-totalMemory-freeMemory

Runtime r = Runtime.getRuntime(); long maxMemory= r.maxMemory(); long totalMemory= r.totalMemory(); long freeMemory = r.freeMemory(); // Xmx 最大值,,Xms 最小值, maxMemory是java虚拟机从操作系统分配的最大内存值,单位是字节, 如果没有设置-Xmx,则最大值(默认)是64 * 1024*1024,也就是64M,如果设置了Xm...

beichuanweibo的博客 1004

Redis性能问题排查指引

Redis性能问题排查指引

weixin_45145848的博客 1159

Redis原理(1) 内存全面详解

一. 我们怎么观察线上Redis内存 我们如果在我们的redis.conf配置文件里面配置: # 最大内存设置,100M maxmemory 104857600 查看redis内存信息 (info Memory) 172.29.2.11:7002> info Memory # Memory used_memory:2598042 used_memory_human:2.48M used_memory_rss:3002368 used_memory_rss_human:2.86M maxm

吉他程序员的博客 1676

java freememory 单位_java里的totalMemory()、maxMemory()、freeMemory()究竟是什么

totalMemory() :返回 Java 虚拟机中的内存总量。maxMemory() :返回 Java 虚拟机试图使用的最大内存量。freeMemory() :返回 Java 虚拟机中的空闲内存量。这是API的解释。我写了这么一段代码public class RuntimeDemo{public static void main(String[] args) throws Exception...

weixin_33363025的博客 1188

redis内存限制管理---maxmemory配置详解

         作为内存数据库,为了防止redis占用过多的内存对其他的应用程序造成影响,redis的使用者可以在redis.conf文件中通过设置maxmemory选项对redis所能够使用的最大内存做限制,并通过maxmemory_policy对redis占用内存超过maxmemory之后的行为做定制。这篇文章,我们从redis源码的角度剖析一下redis的最大内存管理策略。       ...

孤独剑 5万+

Redis配置文件详解

redis是一款开源的、高性能的键-值存储(key-value store),和memcached类似,redis常被称作是一款key-value内存存储系统或者内存数据库,同时由于它支持丰富的数据结构,又被称为一种数据结构服务器(data structure server)。 编译完redis,它的配置文件在源码目录下 redis.conf  ,将其拷贝到工作目录下即可使用,下面具体解释r

脑袋不好使 6万+
上一篇: java代理的一个小坑
下一篇: Spring @Value引发的一次“血案”
CommanderZero
博客等级 码龄9年 6粉丝 28原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值