- 博客(23)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 无线网络自动获取IP批处理脚本
@echo offnetsh interface ip set address name="无线网络连接" source=dhcpnetsh interface ip set dns name="无线网络连接" source=dhcpecho.
2016-10-31 20:27:13
1360
原创 无线网络静态IP设置批处理脚本
@echo 更改“无线网络连接”IP地址@echo IP：192.168.6.112@echo 网关：192.168.1.1@echo DNS：10.10.198.31@pause@echo offnetsh interface ip set address name="无线网络连接" source=static addr=192.168.6.112 mask=25
2016-10-31 20:24:33
2703
转载 HBase Coprocessor to Index Columns into ElasticSearch
http://www.open-open.com/doc/view/c2af706064f84e128d0f74826523a1ea
2015-06-06 15:53:29
824
转载 基于QJM/Qurom Journal Manager/Paxos的HDFS HA原理及代码分析
转载 http://yanbohappy.sinaapp.com/?p=205HDFS HA的解决方案可谓百花齐放，Linux HA, VMware FT, shared NAS+NFS, BookKeeper, QJM/Quorum Journal Manager, BackupNode等等。目前普遍采用的是shard NAS+NFS，因为简单易用，但是需要提供一个HA的共享存储设备。而
2013-05-13 16:07:18
2414
原创 hadoop namenode 高可用（HA）搭建指南 QJM方式
一、HDFS的高可用性1.概述 本指南提供了一个HDFS的高可用性（HA）功能的概述，以及如何配置和管理HDFS高可用性(HA)集群。本文档假定读者具有对HDFS集群的组件和节点类型具有一定理解。有关详情，请参阅Apache的HDFS的架构指南。http://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-s
2013-05-13 15:51:11
12693
转载 HBase如何合理设置客户端Write Buffer
http://blog.linezing.com/2012/11/how-to-use-hbase-client-write-bufferHBase客户端API提供了Write Buffer的方式，即批量提交一批Put对象到HBase服务端。本文将结合HBase相关源码，对其进行深入介绍，分析如何在实际项目中合理设置和使用它。什么时候需要Write Buffer？
2013-04-12 16:50:26
989
原创 Hbase Shell官方详解
HBASE SHELL COMMANDS: alter Alter column family schema; pass table name and a dictionary specifying new column family schema. Dictionaries are described below in the GENERA
2013-04-10 14:52:18
1445
转载 Putty的颜色设置
默认的Putty颜色非常难看，深蓝色，绿色，深红色...看着很不舒服，尤其是目录默认为深蓝色，不仔细看很难看清楚。这里有一个可以让putty展示更好看点的解决方案，先看效果图设置方法1.下载配置文件:igvita-desert.regPutty的配置文件实际上是一注册表文件，Putty会从注册表中读取配置。2.导入
2013-04-10 09:48:06
4271
原创 HBase业务开发测试
业务开发测试HBase之旅一：HTable基本概念http://www.taobaotest.com/blogs/qa?bid=13850业务开发测试HBase之旅二：通过HBase Shell与HBase交互http://www.taobaotest.com/blogs/qa?bid=13871业务开发测试HBase之旅三：通过Java Api与HBase交互http://w
2013-04-09 17:59:56
902
转载 HBase性能优化方法总结（一）：表的设计
转自http://www.cnblogs.com/panfeng412/archive/2012/03/08/hbase-performance-tuning-section1.html本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第一部分内容：表的设计相关的优化方法
2013-04-08 17:49:38
751
转载 HBase性能调优
原文链接：http://kenwublog.com/hbase-performance-tuning配置优化zookeeper.session.timeout默认值：3分钟（180000ms）说明：RegionServer与Zookeeper间的连接超时时间。当超时时间到后，ReigonServer会被Zookeeper从RS集群清单中移除，HMaster收到移
2013-04-08 17:47:17
679
转载 BTree,B-Tree,B+Tree,B*Tree
转自：http://blog.youkuaiyun.com/manesking/archive/2007/02/09/1505979.aspxB树 即二叉搜索树： 1.所有非叶子结点至多拥有两个儿子（Left和Right）； 2.所有结点存储一个关键字； 3.非叶子结点的左指针指向小于其关键字的子树，右指针指向大于其关
2013-04-08 15:01:12
778
转载 HBase源码分析_Master启动过程
构造函数：1. 创建RPC服务：i. 创建Listener，主要负责为处理线程创建job，该Listener会创建读取线程（Reader），线程个数为ipc.server.read.threadpool.size，Reader判断Selector中是否有数据，如果有，则把数据读出，然后加入到call队列或者优先队列中。ii.
2013-04-02 10:19:58
1005
原创 cdh4.2.0源码搭建hadoop+hbase+zookeeper开发环境
1. 准备工作（1） 首先在cloudera的官网上下载CDH4的hadoop-2.0.0-cdh4.2.0、hbase-0.94.2-cdh4.2.0、zookeeper-3.4.5-cdh4.2.0的tar包（2） 在安装hbase开发环境之前，先安装好java开发环境，配置好环境变量（3） 准备三台主机，在用vi 打开/etc/sysconfig/network
2013-03-27 14:19:48
2245
原创 hadoop+hbase+zookeeper环境搭建过程总结
安装的环境要求：我用的是x86_64的CentOS6.3 linux操作系统，安装过程很简单，一路默认即可。 搭建开发环境是学习一门新技术的首先要面对的，当然技术的选型也是相当重要，刚开始搭建环境的时候公司让用cloudera manager CDH4自动在cloudera官网下载安装hadoop、hbase、zookeeper等，但是这个过程在网速不好的情况下是相当的缓慢。（在天朝
2013-03-27 10:23:05
4498
1
原创 Hadoop2.0.3-alpha包结构分析
Hadoop2.0的目录结构：Hadoop2.0的目录结构很像Linux操作系统的目录结构，各个目录的作用如下： (1) 在新版本的hadoop中，由于使用hadoop的用户被分成了不同的用户组，就像Linux一样。因此执行文件和脚本被分成了两部分，分别存放在bin和sbin目录下。存放在sbin目录下的是只有超级用户(superuser)才有权限执行的脚本，比如star
2013-03-20 14:12:00
1063
原创 Cloudera Manager和CDH4的安装
Cloudera Manager和CDH4的安装Cloudera Manager安装1. ClouderaManager的安装需要先修改机器的三个配置：l 关闭防火墙：service iptables stop；l 关闭selinux：setenforce 0或修改/etc/selinux/config：SELINUX=disabled；l 配置代理：在/et
2013-03-04 16:50:33
3196
原创 HRegionServer启动和停止过程分析
HRegionServer的功能1. HRegionServer主要负责响应用户I/O请求，向底层文件系统中读写数据，是HBase中最核心的模块。 HRegionServer内存管理了一系列的HRegion对象，每个HRegion对应了table中的一个Region. HRegion由多个HStore组成，每个HStore对应了table中的一个colum family的存
2013-03-01 11:46:46
5580
转载 Hbase最好的入门文档
转自阿里集团数据平台一、简介history started by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype created as Hadoop contrib2007.10 First useable Hbase20
2013-02-28 14:30:35
773
原创 Hbase学习总结一
数据模型：1.用户在表格里存储多行数据行；2.每个数据行都包括一个可排序的关键字，和任意数目的列；3.表格是稀疏的；4.列名是":"形式，其中和可以是任意字符串；5.一个表格的列族集合是固定的，除非使用管理员权限来改变表格的列族；6.可以在任何时候增加新的标签；7.hbase在磁盘上按照列族存储数据，所以一个列族里所有项有相同的读/写方式。8.写操作是行锁定的，对行
2013-02-28 13:44:58
625
转载 大数据处理相关的好博文
（1）大数据Scribe是Facebook开源的日志收集系统ØMQ(ZeroMQ)简介storm简介使用Storm实现实时大数据分析Yahoo! s4和Twitter storm的粗略比较Yahoo!S4分布式流处理引擎分析总结Storm在淘宝的实践（2）Redis+memcached+leveldb为什么使用 Redis及其产品定位Redis复制与可扩
2013-02-21 17:51:00
1112
jsp实现的企业招聘管理系统
2011-04-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人