分布式内存和分布式数据库

最新推荐文章于 2025-11-12 09:51:57 发布

原创最新推荐文章于 2025-11-12 09:51:57 发布 · 1.2k 阅读

0 ·

CC 4.0 BY-SA版权

oracle-SQL 专栏收录该内容

8 篇文章

订阅专栏

本文介绍了几种常见的分布式内存数据库技术，包括memcached、redis、mongodb、hbase等，并特别提到了12306系统中使用的GemFire。此外还简单提及了mapreduce、spark等大数据处理框架。

分布式内存 :memcached,redis

分布式内存数据库：mangdodb,redis,hbase

12306分布式内存数据库：GemFire

mapreduce spark scala Hbase

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

ZLHZHJ

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Redis高性能分布式内存数据库

AI天才研究院

08-09

985

Redis（Remote Dictionary Server）是一个开源的、基于内存的Key-Value数据库。它支持多种数据结构，包括字符串类型，哈希类型，列表类型，集合类型，有序集合类型等，这些类型都可以用来存储各种形式的数据。Redis提供了丰富的命令用于操纵数据，并支持主从复制和集群功能。从3.0版本开始，Redis不再单纯只提供Key-Value类型的数据库服务了，它还新增了其他特性，如发布订阅模式、事务机制、 Lua脚本语言等。

11111111分布式数据库

wlq_567的博客

04-23

854

全局外模式← 引用 →全局概念模式← 分解 →分片模式← 映射 →分布模式→ 落地为各节点的局部概念模式局部内模式。从用户视角到物理存储，各模式逐层细化，屏蔽分布式系统的复杂性，最终实现数据的逻辑统一与物理分布的透明性。关键总结：为什么需要这六层模式？对用户：屏蔽分布式复杂性，像使用集中式系统一样简单（通过全局外模式和全局概念模式）。对设计者：通过分层设计（分片→分布→局部适配），逐步将逻辑模型转化为物理实现，便于优化性能、管理数据分布。对系统。

参与评论您还未登录，请先登录后发表或查看评论

SnappyData--一个统一OLTP+OLAP+流式写入的内存分布式数据库

lmalds的专栏

01-19

6867

一、背景：阔别个人博客有大半年了，这大半年来我从一个all in flink的角色转变到了一个兼顾实时流式处理与实时OLAP处理的角色。最近由于工作需要，在关注实时的OLTP+OLAP的HTAP场景的数据处理，优先保证低延迟的OLAP查询。说到这里，很容易让人想到Google的F1、Spanner，开源领域的代表TiDB。TiDB是个分布式的MySQL，对OLTP的支持很好

分布式事务内存数据库MemDB.zip

07-18

MemDB 是全球首个支持分布式事务的 MongoDB。高性能和可伸缩快速的内存数据访问，高达 25,000 ops (single doc read/write) /碎片 (each shard take one CPU core).系统可水平伸缩没有单点瓶颈真正的分布式 ACID 事务在分布式环境真正支持 ACID (Stands for Atomicity, Consistency, Isolation, Durability) 事务MemDB 让 MongoDB 支持 ACID 事务兼容 MongoDB 和 Mongoose直接使用 MongoDB 的查询 API内置 Mongoose 支持高可用性每个碎片都有一个或者多个 slaves，不会发生单点故障 MemDB shell：架构：Mdbgoose：var memdb = require('memdb-client'); var P = memdb.Promise; var mdbgoose = memdb.goose; // Define player schema var playerSchema = new mdbgoose.Schema({ _id : String, name : String, areaId : Number, deviceType : Number, deviceId : String, items : [mdbgoose.SchemaTypes.Mixed], }, {collection : 'player'}); // Define player model var Player = mdbgoose.model('player', playerSchema); var main = P.coroutine(function*(){ // Connect to memdb yield mdbgoose.connectAsync({ shards : { // specify all shards here s1 : {host : '127.0.0.1', port: 31017}, s2 : {host : '127.0.0.1', port: 31018}, } }); // Make a transaction in s1 yield mdbgoose.transactionAsync(P.coroutine(function*(){ var player = new Player({ _id : 'p1', name: 'rain', areaId : 1, deviceType : 1, deviceId : 'id1', items : [], }); // insert a player yield player.saveAsync(); // find player by id var doc = yield Player.findByIdAsync('p1'); console.log('%j', doc); // find player by areaId, return array of players var docs = yield Player.findAsync({areaId : 1}); console.log('%j', docs); // find player by deviceType and deviceId player = yield Player.findOneAsync({deviceType : 1, deviceId : 'id1'}); // update player player.areaId = 2; yield player.saveAsync(); // remove the player yield player.removeAsync(); }), 's1'); }); if (require.main === module) { main().finally(process.exit); } 标签：MemDB

【免费下载】推荐开源项目：MemDB - 实时分布式内存数据库

最新发布

gitblog_00046的博客

11-12

1318

是一个由[rain1017](https://github.com/rain1017)开发的实时分布式内存数据库系统。它设计的目标是提供高速的数据存储和检索能力，同时支持多节点的分布式环境，以实现数据的高可用性和容错性。该项目基于Go语言编写，易于集成到现有的后端服务中，为需要高性能、低延迟存储解决方案的开发者提供了新的选择。 ## 技术分析 ### 数据结构与算法 - **Goroutin

分布式--Redis 内存数据库

mazaiting的博客

04-23

446

1. Redis 内存数据库 1). Redis Redis是一个开源的，高性能，C语言开发的，键值对(key-value)存储数据的NOSQL数据库。 2). 基本概念 NOSQL ：Not Only Sql 泛指非关系型数据库 Redis MongoDB Hbase 关系型数据库： mysql oracle sybase sqlServer 3)...

分布式内存数据库 Geode

weixin_34162695的博客

04-25

1252

2019独角兽企业重金招聘Python工程师标准>>> ...

精选资源

分布式内存数据库数据并行快速加载与索引技术.doc

11-22

分布式数据库和内存数据库的出现，为这些问题提供了新的解决方案。 分布式数据库通过将数据分散存储在多个节点上，实现了良好的灵活性和可扩展性。这种架构在处理海量数据时，不仅在性能上优于集中式数据库，而且在...

精选资源

浅谈分布式内存数据库系统设计.pdf

08-11

分布式内存数据库系统设计是近年来随着大数据和云计算技术的发展，成为研究和实践的热点。分布式内存数据库是一种将数据分布存储于多台物理机器的内存中，通过网络实现数据共享与访问的数据库系统。 分布式内存...

分布式内存数据库的应用研究.pdf

08-08

在当今的大数据时代背景下，数据库系统是存储计算机数据的重要手段，其中内存数据库...在未来的数据库技术发展和应用中，如何优化分布式内存数据库的性能，提高其数据处理能力和效率，仍然是值得深入探讨的重要课题。

基于分布式内存数据库快速计算的设计与实现.pdf

08-08

这些框架不仅提供了数据分布式存储和计算的能力，还提供了易于使用的编程模型和丰富的库支持，使得开发分布式内存数据库应用变得更加高效和简单。在当前的大数据和云计算时代，分布式内存数据库作为一种前沿技术，...

分布式内存文件系统Tachyon

weixin_30856965的博客

11-27

191

UCBerkeley研发的Tachyon(超光子['tækiːˌɒn]，名字要不要这么太嚣张啊：)是一款为各种集群并发计算框架提供内存数据管理的平台，也可以说是一种内存式的文件系统吧。如下图，它就处于这样一个层次：在现有存储系统如HDFS之上，在Spark，MapReduce，Impala等各种计算框架之下。为什么要有这么一个框架呢？MapReduce就不说了，但像Spark这种内存计算框架，...

分布式内存数据库--Redis事务

chenfengdejuanlian的专栏

02-07

1980

一、事务：与关系型数据库一样redis也支持事务。也就是可以一次执行多个命令，本质是一组命令的集合。一个事务中的所有命令都会序列化，按顺序地串行化执行而不会被其它命令插入，不许加塞。二、事务能干嘛？一个队列中，一次性、顺序性、排他性的执行一系列命令。三、 redis事务支持的命令1、 MULTI：标记一个事务块的开始。随后的指令将在执行EXEC时作为一个原子执行。2、 EXEC：执

分布式内存文件系统：Tachyon

zdy0_2004的专栏

02-23

667

Tachyon http://www.open-open.com/lib/view/open1409754088791.html Tachyon是一个分布式内存文件系统，可以在集群里以访问内存的速度来访问存在tachyon里的文件。把Tachyon是架构在最底层的分布式文件存储和上层的各种计算框架之间的一种中间件。主要职责是将那些不需要落地到DFS里的文件，落地到分布式内存

Spark入门实战系列--10.分布式内存文件系统Tachyon介绍及安装部署

yirenboy的专栏

09-16

2776

Tachyon是AmpLab的李浩源所开发的一个分布式内存文件系统，可以在集群里以访问内存的速度来访问存在Tachyon里的文件。Tachyon是架构在最底层的分布式文件存储和上层的各种计算框架之间的一种中间件，其主要职责是将那些不需要落地到DFS里的文件落地到分布式内存文件系统中来达到共享内存，从而提高效率。

分布式数据库的开发-内存数据库

tan_yh的专栏

03-28

1385

一、背景现在的计算机技术的发展，基本上一年一变，特别是互联网。最近的分布式架构尤其突出，从反向代理、负载均衡到SOA、RPC这些东东，基本上都是解决了网络上的瓶颈，其实这网络上的问题大不了就是增加服务器，多个工具或一个环节来缓冲访问的时间和速度。还有最近的SPRINGCLOUD之类的，像这些也就是解决了程序上访问流通过程，但是，最终还是要在数据层出现瓶颈，数据层的控制就显而易见了，不过眼前的数...

分布式内存数据库--Voltdb

thinkone的博客

04-23

3668

http://www.binotes.net/read.php/106.htm 分布式内存数据库--Voltdb 1.引言1.1 What is VoltDB? VoltDB 是为满足极端多的事务处理以及以下需求而设计的关系数据库系统： 可以提供比传统数据库系统好很多的性能。 可以线性扩展。 兼容SQL 作为数据库管理接口。 兼容ACID ，满足数据一致与完整性。 7*24*365 高可用。 <br

分布式内存数据库概述

linux系统、网络编程和分布式计算

11-15

930

待续...

MemDB: 分布式事务型内存数据库

gitblog_00058的博客

01-11

500

MemDB: 分布式事务型内存数据库 MemDB 是一个基于 MongoDB 的分布式事务型内存数据库，主要使用 JavaScript 语言进行开发。该项目旨在将 MongoDB 的可扩展性与传统 SQL 数据库的事务支持相结合，提供高性能和 ACID 事务保障的数据库解决方案。核心功能 MemDB 的核心功能包括：高性能数据访问：单分片可达每秒 25000 次操作（单文档读写）。水平扩展...