- 博客(8)
- 资源 (1)
- 收藏
- 关注
原创 开源代码Hadoop NFS connector (链接分享)
Hadoop 本身有自己的文件系统HDFS,传统的做法是数据保存到Hadoop Cluster的HDFS系统,然后再做数据分析。在很多实际应用,数据往往分布在各种各样的存储系统或者文件系统,比如亚马孙公有云AWS的S3,Linux EXT3,Window的NTFS等等。NFS 是网络文件系统,是一种分布式文件系统协议,很好地解决了网络间的文件共享问题,被广泛使用,具体介绍参见 http
2016-09-22 22:58:16
836
转载 ACPI 高级配置与电源接口 (介绍的比较详细)
本文出自 http://blog.chinaunix.net/uid-21354120-id-1827655.html高级配置与电源接口维基百科,自由的百科全书高级配置与电源接口(Advanced Configuration and Power Interface),简称ACPI,1997年由Intel、Microsoft、Toshiba 所共同制定提供操作系统应用
2015-07-03 22:28:55
10865
转载 分布式系统领域经典论文翻译集
分布式领域论文译序sql&nosql年代记SMAQ:海量数据的存储计算和查询一.google论文系列1. google系列论文译序2. The anatomy of a large-scale hypertextual Web search engine3. 面向星球的网络搜索:google集群架构4.
2015-05-11 22:21:22
577
转载 分布式一致性Paxos算法学习笔记:算法详解
阅读本文前最好能先阅读参考文献[2]。最近在写毕业论文,导致这边学习笔记也写得很生硬........ 大家轻拍。文章为本人对paxos算法(basic paxos)的理解,水平有限难免有理解不到位的地方,欢迎批评。 一、简介1.1Paxos算法处理的问题 Paxos 算法解决的问题是一个分布式系统如何就某个值(决议)达成一致。一个典型的场景是,在一
2015-05-02 00:58:21
515
转载 Linux 内核中的 Device Mapper 机制
从https://www.ibm.com/developerworks/cn/linux/l-devmapper/转载Device Mapper 是 Linux2.6 内核中支持逻辑卷管理的通用设备映射机制,它为实现用于存储资源管理的块设备驱动提供了一个高度模块化的内核架构,如图 1。图1 Device Mapper的内核体系架构在内核中它通过一个一个模块化
2015-04-10 21:27:16
435
转载 linux内核调度器进化史:O(n)->O(1)->O(log(n))
一开始的调度器是复杂度为O(n)的始调度算法(实际上每次会遍历所有任务,所以复杂度为O(n)),这个算法的缺点是当内核中有很多任务时,调度器本身就会耗费不少时间,所以,从linux2.5开始引入赫赫有名的O(1)调度器,所以现在能看到的网上很多资料及教程书里面都讲的都是这个调度算法。然而,linux是集全球很多程序员的聪明才智而发展起来的超级内核,没有最好,只有更好,在O(1)调度器风光了
2015-03-23 22:29:09
707
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人