pika,ssdb,fatcache

最新推荐文章于 2022-11-16 20:01:55 发布
最新推荐文章于 2022-11-16 20:01:55 发布
阅读量994 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 分布式缓存数据库/Redis等
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wc996789331/article/details/104897081
本文探讨了使用SSD作为缓存kv数据库的方案，旨在解决Redis在处理超过50GB缓存时的问题。介绍了几种替代方案，包括支持Redis协议的Pika和SSDB，以及支持memcached协议的FatCache。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

基于SSD做大数据的缓存kv数据库，解决redis的50G以上
缓存的各种问题：
pika：支持redis协议，基于rocksDB作为存储引擎，多线程的结构，360开源
https://www.cnblogs.com/chenny7/p/5694887.html
ssdb: 支持redis协议, 基于Google LevelDB作为存储引擎
fatcache：支持memcached协议，Twitter 开源。

https://www.oschina.net/question/2903254_2240582

AI Pika 生成进击的巨人动漫分镜案例
独立开发，substack顶级编辑
12-06 1764
AI Pika 生成进击的巨人动漫分镜案例 Pika 是一个使用AI生成和编辑视频的平台。
Ruby-迁移SSDB到RedisPika工具集Ruby实现
08-15
迁移 SSDB 到 Redis/Pika 工具集，Ruby 实现
首发丨360开源的类Redis存储系统:Pika SSDB
木生的博客
10-06 2996
首发丨360开源的类Redis存储系统:Pika 请参考这里：http://www.360doc.com/content/16/0531/14/13247663_563808424.shtml#
Fatcache学习笔记
风过孤屿，山海自成诗行。
11-16 576
fatcache是来自Twitter, 基于SSD上面实现的cache, 使用mc的协议，数据存储在SSD (Ps:memcached是将数据放在内存中)。 fatcache的数据放在SSD(其实机械盘也可以，只是性能不佳), 所以相对于内存cache, 如memcached、redis，能容纳更多数据。
fatcache-note:fatcache学习笔记
07-13
fatcache-note 第一次写源码阅读笔记，很多表达不到位，或者错误的地方。 如查看过程中，发现相关问题，或者更好的表达方式，肯请指出，必当好好学习并修改。 目录 (100%) (100%) (100%) (100%) (100%) (100%) (100%) (100%) (100%) (100%) Contact Sina Weibo: Gmail: Blog:
运行于SSD的memcachedfatcache.zip
07-18
fatcache 可以让你在 SSD 上运行 memcached，你可以把它当作是大数据中的缓存，fatcache 是 Twitter 的开源项目。一些性能数据：单节点可每秒可处理 10 万 set 操作，每个数据包是 100 字节单节点可每秒处理 4.5k get 操作，每个数据 100 字节8 个 fatcache 实例可处理 32k get 操作/每秒到一个单 600GB 的 SSD 存储你可以通过将多个 SSD 连接到单个机器来提升 IO 性能详细的性能测试说明请看这里。 标签：fatcache
解决python3 pika之连接断开的问题
09-19
### 解决Python3 Pika之连接断开的问题 在使用Python3与RabbitMQ结合时，经常遇到的一个问题是连接在长时间未活动后自动断开。这种情况通常发生在使用`pika`库作为客户端的情况下，特别是在执行一些较为耗时的任务...
Ruby开发工具集助力SSDB向Redis/Pika的迁移
本资源提供了一个Ruby语言编写的工具集，旨在实现从SSDB迁移到Redis或Pika数据库的功能。SSDB是一个基于LevelDB的高性能、持久化、分布式的键值存储数据库，而Redis是一个开源的内存中数据结构存储系统，通常用作...
ssdb的导入导出
weixin_30527551的博客
11-07 302
ssdb导入导出有两种方式。 1：通过ssdb-cli 导出整个数据库: # backup current database into file backup.ssdb ssdb 127.0.0.1:8888> export backup.ssdb 按照 Key 区间导出数据库(交互模式): 命令export -i backup.ssdb将导出区间 [a, z] 内的 KV...
Redis学习笔记28——Pika：如何基于SSD实现大容量Redis
qq_34132502的博客
07-13 858
着业务数据的增加，就需要 Redis 能保存更多的数据。你可能会想到使用 Redis 切片集群，把数据分散保存到多个实例上。但是这样做的话，会有一个问题，如果要保存的数据总量很大，但是每个实例保存的数据量较小的话，就会导致集群的实例规模增加，这会让集群的运维管理变得复杂，增加开销。如果增加单个实例的内存容量，但是在实例恢复，主从同步过程中会引起恢复时间增长、主从切换开销大、缓冲区容易溢出。 可以使用基于SSD来实现大容量的Redis实例，即Pika键值数据库。 Pika有两个特点： 单实例可以保存大容量数
ssdb与redis
每天进步一点点的专栏
01-25 742
SSDB VS redis 现在有不少团队开始使用了一个新型高效的 NoSQL数据库 - SSDB，如 京东、唱吧 …… SSDB 官网的定义 一个高性能的支持丰富数据结构的 NoSQL 数据库，用于替代 Redis 官网 http://ssdb.io/zh_cn 特点 兼容 Redis，支持 Redis 客户端 有与 Redis 一样丰富的数据结构，如 list，hash，zset....
fatcache源码阅读记录
yi_1973的博客
07-25 401
fatcache源码简单介绍：http://godorz.info/2013/03/fatcache/ 想了解其内存，磁盘空间分配和使用 每个slab对应一个结构体slabinfo（slabinfo是永在内存中的） Fc_slab.c 中slab_init开始初始化，初始化内存和磁盘两部分的空间，fd指向磁盘路径 路径在运行时配置 -D, --ssd-device=S
360开源的类Redis存储系统:Pika
chenglinhust的专栏
05-15 2132
360开源的类Redis存储系统:Pika        介绍一个360开源的类Redis存储系统:Pika。       整体架构如下：               详细细节参考资料：           网址https://github.com/Qihoo360/pika
SSDB 与 Redis命令对比
Leodong的博客
10-13 1922
一、 【SSDB介绍】 一个高性能的支持丰富数据结构的 NoSQL 数据库, 用于替代 Redis.(源自官方) 特性(源自官方) 替代 Redis 数据库, Redis 的 100 倍容量  LevelDB 网络支持, 使用 C/C++ 开发  Redis API 兼容, 支持 Redis 客户端  适合存储集合数据, 如 list, hash, zset…  客户端 API 支持的语言包...
fatcache分配空间阅读记录
yi_1973的博客
07-26 455
slab_get_item(uint8_t cid) { rstatus_t status; struct slabclass *c; struct slabinfo *sinfo; struct slab *slab; ASSERT(cid >= SLABCLASS_MIN_ID && cid < nctable); c = &ctable[ci
首发丨360开源的类Redis存储系统:Pika
weixin_45583158的博客
05-12 519
编者按：本文由陈宗志在高可用架构群分享，转载请注明来自高可用架构「 ArchNotes 」。陈宗志，360公司基础架构组高级存储研发工程师， 负责设计实现了 bada, ...
Pika的设计及实现
weixin_34146986的博客
05-05 766
Pika    pika是360奇虎公司开源的一款类redis存储系统，主要解决的是用户使用 Redis 的内存大小超过 50G、80G 等等这样的情况，会遇到启动恢复时间长，一主多从代价大，硬件成本贵，缓冲区容易写满等问题。 Pika 就是针对这些场景的一个解决方案： Pika 的单线程的性能肯定不如 Redis，Pika 是多线程的结构，因此在线程数比较多的情况下，某些数据...
360 的 pika hscan 存在问题
记录点滴
04-25 1081
e5 2665 2.6G 双路 32核，32G 内存，SM951 存储。  以前使用ssdb存储数据，但是ssdb同步的时候老是出现 OUT_OF_SYNC 错误（master 在ssd，slave在普通磁盘），经过查资料，找到 360的pika，把数据从ssdb导入 pika，数据导完，开始进行业务。 一个hash有 50w field，field 是 32字节长度的 m
Pika使用入门(一)【介绍】
热门推荐
极客神殿
03-27 1万+
介绍Pika是AMQP 0-9-1协议的纯Python实现，试图保持与底层网络支持库相当独立。 支持Python 2.6+和3.3+。 由于线程不适合每一种情况，它不需要线程。 也不要禁止他们。 greenlets, callbacks, continuations and generators也是如此。 然而，它不一定是线程安全的，实际的结果可能会有些不同。。 人们可能正在使用 direct
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值