cxz_hijacker-优快云博客

原创关于zero-copy

详情参考：https://www.ibm.com/developerworks/linux/library/j-zerocopy/一、传统发送示意图Listing 1. Copying bytes from a file to a socketFile.read(fileDesc, buf, len);Socket.send(socket, buf, len);

2014-01-09 12:50:56 936

原创 Hadoop 0.20.205.0的源码阅读(1)

一. 先说说如何进行简单的调试1. 修改hadoop-env.sh增加如下参数：-Xdebug -Xrunjdwp:transport=dt_socket,address=8849,server=y,suspend=n比如要调试NameNode，将其中的HADOOP_NAMENODE_OPTS修改如下：#export HADOOP_NAMENODE_OPTS="-Dcom.

2014-01-03 17:07:51 965

原创安装redis-live监控redis集群

监控redis集群服务的软件还不少，但是可视化的不多，了解到的就是redis-live和radish。但是radish国内貌似登陆不了，要翻墙，而且是收费软件，没用上。这里主要就是描述一下redis-live的安装和使用。相关网址：https://github.com/nkrode/RedisLive目前所知的监控软件基本都是根据redis的命令monitor和info来做的，如果

2013-11-21 16:27:22 5173

原创编写Mysql JDBC程序导入数据到mysql

package com.cxz.test;import java.io.ByteArrayInputStream;import java.io.InputStream;import java.sql.DriverManager;import java.sql.Connection;import java.sql.PreparedStatement;import java

2013-10-29 11:45:20 957

原创 Linux下搭建Mysql 5.1.72

a. 下载mysql部署包mysql-5.1.72-linux-x86_64-glibc23.tar.gz b. su groupadd mysql useradd -g mysql -m mysql -s /bin/bash passwd mysql (mysql/mysql) cd /usr/local tar zxvf /home/ch

2013-10-29 11:10:46 1632

原创 hadoop+kerberos的跨域互信

背景介绍：rock集群和stone集群，希望能够互相访问1. 添加互信的principal(两个集群的kdc都要进行操作)kadmin: addprinc -e "des3-hmac-sha1:normal des-cbc-crc:normal" krbtgt/KERBEROS.STONE@KERBEROS.ROCKkadmin: addprinc -e "des3-hmac-sh

2013-10-08 09:26:09 6275

原创 hadoop集群中添加kerberos认证

hadoop集群中添加kerberos认证可以参照cloudera的官网方法：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Security-Guide/CDH4-Security-Guide.html但本人的配置与其有所不同，更简单一点本人使用的是hadoop_cloud

2013-09-27 10:30:32 4810

原创安装kerberos服务

a. 下载kerberos：http://web.mit.edu/kerberos/dist/ b. 解压编译： cd /home/cxz/krb5-1.11.3/src ./configure --prefix=/home/cxz/kerberos5 make && make install c. 设置环境变量 export KRB5_CONFIG=/home/c

2013-09-26 17:53:23 3963

原创记录一下自己常用的maven工程的pom.xml模板

1. 带有hadoop-CDH4.2.1的pom.xml模板<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.o

2013-09-17 20:05:44 2792

原创 Linux的磁盘管理

1. 分区查看磁盘设备：fdisk -l记住几个分区id号：系统分区为83， swap分区为82，扩展分区为85 对设备进行分区：fdisk /dev/sdb敲m查看help信息，然后根据帮助命令行动。建立swap分区，建立好逻辑分区后修改分区id号为82，命令T. 2. 格式化格式化为ext4文件系统：mkfs -t ext4 /dev/sdb5格

2013-09-17 19:50:04 887

原创 hadoop集群工具distcp使用笔记

1. 环境描述两个集群：rock 和 stonerock无kerberos权限认证，stone有要求认证。 1. 从rock复制到stone，采用hdfshadoop distcp -i hdfs://rock-nn:8020/user/cxz/input hdfs://stone-nn:8020/user/cxz/运行在rock端，即源端问题：报版本不对的问题（的确该

2013-09-17 19:27:48 1610

原创 Redis使用及性能(redis-2.6.14)

= redis简单调研 === 简介 ==redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string、list、set、zset和hash。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一样，

2013-09-12 11:17:18 1375

原创 vim配置备份

set nuset hlsearchset ignorecaseset showmatchsyntax onset tabstop=4set softtabstop=4set shiftwidth=4set expandtabset cursorlineset autoreadfiletype onset rulerau BufReadPost

2013-09-09 21:08:06 763

原创自我工作中常用的Linux命令记录

###################### Linux ###########################1. ubuntu中添加/删除用户 useradd -d /home/cxz -s /bin/bash -m cxz | userdel -r cxz2. 将用户添加到sudoer中 sudo adduser cxz sudo 或者用 su

2013-09-09 21:06:59 726

原创读书笔记之《Rework》

1. 这边书是写给那些想干点什么事情，或者直接说是给想创业的人。个人读完，挺有感触的，也觉得此书甚好。写下此笔记，只是为了让自己印象深刻一点，有所收获。2. Ignore The Real World 真实世界只是一个借口，只是为了不去尝试找借口。 Learning from the mistakes is overrated. 从失败中学

2013-08-31 23:06:17 932

原创 Hadoop 0.20.205.0 + zookeeper + hbase安装历程

一、规划 a) 集群名称：rock b) rock-hdpnn 192.168.15.59 master rock-hdp1 192.168.15.60 slaves rock-hdp2

2013-08-20 19:48:19 974

原创 Kerberos原理

Kerberos原理说明：此文为本人根据http://web.mit.edu/Kerberos/dialogue.html中的对话进行撰写，此对话是为了帮助人们理解kerberos的原理而写的一篇对话集。对应的中文版本：http://www.cnblogs.com/haogj/archive/2010/10/04/1841715.html Step 1: 系统服务通过单独一台计算机

2013-08-12 18:53:30 845