
数据库和存储
文章平均质量分 55
wdwbw
这个作者很懒,什么都没留下…
展开
-
数据一致性
数据一致性通常指关联数据之间的逻辑关系是否正确和完整。而数据存储的一致性模型则可以认为是存储系统和数据使用者之间的一种约定。如果使用者遵循这种约定,则可以得到系统所承诺的访问结果。 常用的一致性模型有:a、严格一致性(linearizability, strict/atomic Consistency):读出的数据始终为最近写入的数据。这种一致性只有全局时钟存在时才有可能,在分布式网络环境不可能实原创 2009-05-13 21:59:00 · 15289 阅读 · 0 评论 -
MongoDB调查总结
源自:http://like-eagle.iteye.com/blog/850401 与关系型数据库相比,MongoDB的优点:①弱一致性(最终一致),更能保证用户的访问速度:举例来说,在传统的关系型数据库中,一个COUNT类型的操作会锁定数据集,这样可以保证得到“当前”情况下的精确值。这在某些情况下,例如通过ATM查看账户信息的时候很重要,但对于Wordnik来说,数据是不断更新和增转载 2011-06-24 16:20:00 · 1952 阅读 · 0 评论 -
GlusterFS分布式集群文件系统安装、配置及性能测试
<br />源自<br />http://hi.baidu.com/farmerluo/blog/item/469dd9f95391de55242df23e.html<br /> <br />1. 版本历史<br /><br />Revision Author(s) Date Summary of activity<br />1.0 罗辉 2009-6-1 创建本文档<br /><br />2. 参考文档<br /><br转载 2011-04-08 10:37:00 · 1169 阅读 · 0 评论 -
分布式文件系统选型
<br />源自:<br />http://my.chinaunix.net/space.php?uid=16480950&do=blog&id=103952<br /> <br /> <br />1.针对目前的情况<br />业界在大数据量存储方面存在着两种解决方案:集中式存储和分布式存储。<br />集中式存储的代表厂商:NetApp,EMC,使用集中式存储的互联网代表企业Facebook;<br />分布式存储的代表厂商兼互联网企业:google。<br />集中式存储相比分布式存储最大的问题在于购置转载 2011-02-16 09:39:00 · 6459 阅读 · 1 评论 -
查询各阶段时,一旦mysql server出现各种故障下的表现形式
<br />1、从连接池拿到一个连接之前<br /> a、如果连接池中之前没有连接<br /> 拿不到连接,立即返回 Can't connect to MySQL server on '127.0.0.1' (111)<br /> b、如果连接池中之前有连接 <br /> server被关闭或强制kill时能拿到连接,拿回的连接ping返回false,如果用此连接执行query,则立即返回MySQL server has gone away<br原创 2010-12-16 16:46:00 · 789 阅读 · 0 评论 -
流行的开源分布式文件系统比较
<br />源自<br />http://shen2.cn/2010/08/distributed-filesystems/<br /> <br />我现在有海量的数据文件(1000万个文件)需要存储,需要让其他计算机可以很容易地访问,数据无价,我还希望这个文件系统带冗余功能。<br />我首先注意到的是Ubuntu Enterprise Cloud的提供者:Eucalyptus。它提供了和AWS(Amazon Web Service)几乎完全兼容的云计算接口。看起来似乎是个云存储的靠谱解决方案。<br /转载 2010-12-14 10:27:00 · 9007 阅读 · 1 评论 -
MYSQL中关于insert语句速度的优化
<br />源自<br />http://www.ej38.com/showinfo/mysql-155336.html<br /> <br />1.分析<br />插入一行分下面几个动作,括号后面是其大约比例额<br />Connecting(3)<br />Sendint query to server(2)<br />Parsing query(2)<br />Inserting row(1*size of row)<br />Inserting indexes(1*numbe转载 2010-11-29 20:02:00 · 1148 阅读 · 0 评论 -
根据status信息对MySQL服务器进行优化
http://hi.baidu.com/xiaohuo37/blog/item/07b2512c37deb8ec8a139907.html1、检验 key_buffer_size 参数大小是否合适(适用 MyISAM 表)key_buffer_size指定索引缓冲区的大小,它决定索引处理的速度,尤其是索引读的速度。通过检查状态值Key_read_requests和Key_reads,可以知道key_buffer_size设置是否合理。比例key_reads /key_read_request转载 2010-08-26 19:40:00 · 2934 阅读 · 0 评论 -
HBase vs Cassandra: why we moved
原文地址:http://ria101.wordpress.com/2010/02/24/hbase-vs-cassandra-why-we-moved HBase vs Cassandra: why we moved 下文中将讨论为何选择Cassandra作为我们的NOSQL方案。 是否Cassandra的血统预言了未来?我发现在软件问题上,我们先去考虑上层问题而翻译 2010-03-10 22:45:00 · 3313 阅读 · 0 评论 -
Cassandra源代码阅读笔记
1、目的 满足大数据量、大量随机的读写操作应用场景下的数据存储需求。更是用于实时在线应用。 2、功能概要 BigTable存储结构+Dynomo分布式模型 多副本 高可原创 2010-03-10 22:57:00 · 3317 阅读 · 0 评论 -
NoSQL数据库探密
作者:老纪原载:老纪博客版权所有。转载时必须以链接形式注明转载自老纪博客 [http://www.jifuyi.com/]。本文链接地址:http://www.jifuyi.com/nosql-database-explore/ 今天转一篇robbin的关于nosql数据库的文章,希望对大家有帮助 地址随着互联网web2.0网站的兴起,非关系型的数据库现在成转载 2010-03-08 16:55:00 · 673 阅读 · 0 评论 -
Cassandra数据模型
源自http://www.hellodba.net/2010/02/cassandra.html 提起NoSQL这个话题,仿佛不应该是DBA要关注的事,而是架构师应该关心的。但是作为一名DBA,在使用传统的关系型思想建模时,应该有必要了解NoSQL的建模方法。各种NoSQL数据库有很多,我最关注的还是BigTable类型,因为它是一个高可用可扩展的分布式计算平台,用来处理海量的转载 2010-02-22 19:11:00 · 806 阅读 · 0 评论 -
mysql explain中的using filesort
Using filesort表示在索引之外,需要额外进行外部的排序动作。导致该问题的原因一般和order by有者直接关系,一般可以通过合适的索引来减少或者避免。 explain SELECT * FROM table_item WHERE user_id = 2 ORDER BY item_id LIMIT 0, 5user_id 和 item_id 分别建立一个索引,对此语句My原创 2010-01-25 23:16:00 · 7106 阅读 · 0 评论 -
遇到的一个mysql备份恢复的问题
数据库特点--使用partition,存在上百个分区--建表时指定了data_dir和index_dir,数据不是存储在默认位置,而是在mysqld的数据目录下link到真正的数据文件 备份恢复要求--备份出来的数据恢复时要恢复成不同的表名--恢复出来的数据实际存储位置也要存储在与原表不同的位置 问题如果直接mysqldump-source恢复-change table name,原创 2010-01-21 21:51:00 · 774 阅读 · 0 评论 -
分布式事务处理
分布式事务处理( Distributed Transaction Processing , DTP )涉及多个分布在不同地方的数据库,但对数据库的操作必须全部被提交或者回滚。只要任一数据库操作时失败,所有参与事务的数据库都需要回滚。Open 组织定义的分布式事务处理模型X/Open DTP 模型(1994)包括应用程序( AP )、事务管理器( TM )、资源管理器( RM原创 2009-05-13 22:10:00 · 4578 阅读 · 0 评论 -
SAN网络存储共享软件全攻略
在高性能专用存储网络需求的驱使下,SAN存储区域网络系统大量应用于高性能计算网络系统、大型网站系统、非线性编辑系统等网络系统中,存储设备与计算机主机系统之间一对一的关系,被可供多个系统共享同一个存储设备网络的关系所取代。为确保多大量客户端主机对同一存储设备的共享访问权限和和管理权限的统一,就需要安装专门的存储共享管理软件或采用专门的共享文件系统。SANergy、ImageSAN、StorNex转载 2011-10-28 10:29:29 · 972 阅读 · 0 评论