bluetropic的专栏

hadoopHDFS数据备份放置策略目录(?)[+]对于分布式文件系统来说，为了保证数据的高可用性和系统容错能力，往往会把同一数据块在多个节点上进行备份，那么如何分配这些复制数据的位置，不同的文件系统会有不同的策略。一、业界分析在介绍HDFS之前，先简单了解一些其它文件系统的放置策略：1. Lustre——一致性哈希环对于不同的数据备份，需要放到不同的节点上面，一种

原文链接：http://www.alidata.org/archives/2439随着公司业务的飞速发展，集群规模的逐步扩大，各计算系统，存储系统，应用系统也随着业务的发展，一个接一个的被创造了出来。但集群规模扩大以后，却带来很多问题，如自动化部署，集群整体利用率偏低等问题也逐步的暴露出来。所以，迫切的需求一套集群资源调度系统来解决这些问题。各大互联网公司也相继搞出了一些系统，如omega

独家供稿：移动Labs    美国时间的今天，也就是2013年2月27日，三年前被EMC收购的GreenPlum公司拿出了他们在2013年的重大动作，发布了Pivotal HD，这是一个Hadoop协议栈。与之前OEM的MapR的Hadoop协议栈不一样，这个新的协议栈是GreenPlum自己研发的，主要的目的就是支撑其上被称为HAWG的技术。    发布会演讲可以在这

分析和优化云集群性能 使用可配置参数监视和调优 Hadoop 集群的性能Yu Li, 软件工程师, IBMYu Li 是一位中国软件工程师。他是 IBM InfoSphere BigInsight 团队的成员，这个团队的任务是在 Apache Hadoop 上构建分析平台。他的专业领域包括云计算、性能调优、数据挖掘、数据库技术和中间件技术。简介： Hadoop 是一个可以分布式操纵

十二、如果遇到如下错误：FAILED java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI:***就是URI里边出现了不允许出现的字符，比如冒号：之类的，操作系统不允许的文件命名字符。详细的可以根据提示的部分（星号部分）来进行grep匹配查看。消除

http://club.techtarget.com.cn/space/viewspacepost.aspx?postid=5827我们所知道的最普遍的传统数据库包括Oracle和MySQL等，如果按照数据存储的介质，我们可以把它们称为硬盘数据库，因为数据是存放在外部存储介质当中的。相对应，还有一种数据库我们可以称它为内存数据库，即In-Memory Database，简称IMDB(同某知名被

原文作者：申毅，IBM 中国软件开发中心 WebSphere Portal 部门软件工程师。地址：http://www.ibm.com/developerworks/cn/linux/l-cn-nohup/ 我们经常会碰到这样的问题，用 telnet/ssh 登录了远程的 Linux 服务器，运行了一些耗时较长的任务， 结果却由于网络的不稳定导致任务中途失败。如何让命令提交后不

TechTarget中国原创内容，原文链接：http://www.searchcloudcomputing.com.cn/showcontent_67013.htm导读：Hadoop工具因大数据的火热而流行起来，但你是否真的已经掌握的Hadoop的使用技能，本文基于Cloudera CDH 3u4编写的，提供了一些关于Hadoop的管理方法。关键词：Hadoop Hadoop集群 Hado

http://www.16kan.com/post/113877.htmlSpark是一个小巧玲珑的项目，由Berkeley大学的Matei为主的小团队所开发。使用的语言是Scala，项目的core部分的代码只有63个Scala文件，充分体现了精简之美。Spark之依赖（1）Map Reduce模型作为一个分布式计算框架，Spark采用了MapReduce模型。在它身上，Goo

空间 »博客 »Openstack列表模式：标题+预览 |标题+全文 |仅标题Openstack虚拟机实例备份方案测试分类: Openstack 统计: 0评/109阅/0顶 282013-04 Openstack api 使用方法分类: Openstack 统计: 0评/483阅/0顶 2

目录(?)[+]Ganglia是一个用于集群性能监测的工具，为了说明其使用方法，本文结合Hadoop集群环境讲解ganglia的安装过程，希望能给感兴趣的朋友提供参考帮助。测试环境Ubuntu 12.04 LTSHadoop 0.20.2ganglia 3.1.7主要概念数据监测节点（gmond）：这个部件装在需要监测的节点上，用于收集本节点的运行情况，并将这些统计

hadoop2.2.0集群搭建    PS：apache提供的hadoop-2.2.0的安装包是在32位操作系统编译的，           因为hadoop依赖一些C++的本地库，所以如果在64位的操作上安装           hadoop-2.2.0就需要重新在64操作系统上重新编译1.准备工作:(参考伪分布式搭建)        1.1修改Linux主机名