
大数据
天限天空
这个作者很懒,什么都没留下…
展开
-
hadoop 2.2.0 在 windows 8.1 64bit、jdk1.8的编译问题
为了增加内存,将系统升级到windows 8.1 64bit,原来在windows 7 32bit jdk1.7编译的hadoop 2.2.0编译不过了,花了接近一天的定位,终于搞定参考 http://bbs.chinahadoop.cn/thread-6327-1-1.html 这篇文章,能在windows 7 64bit下编译(如果是32bit的,需要自动手动修改hadoop的V原创 2014-03-30 22:45:00 · 2830 阅读 · 0 评论 -
hadoop通讯(rpc)抓包解包工具(对分析hadoop内部机制或者问题定位很有帮助)
工具地址https://github.com/liukeyou/hadoop-wireshark/wiki1. 先编译wireshark 1.10.82. 在下载链接的代码,使用vs2010编译插件3. 将编译好的插件copy到wireshark插件目录4. 将hadoop或者hbase的proto文件copy到wireshark的profile目录5.运行原创 2014-07-26 23:51:17 · 4200 阅读 · 0 评论 -
hadoop-2.3.0-cdh5.1.0 windows 8.1 下的编译
和hadoop 2.2 有些差别1. 只能使用jdk 1.7 (jdk1.8 编译提示错误)2. 先执行 hadoop-2.3.0-cdh5.1.0\cloudera\apply-patches ../src ./patches 将cloudera的修改合入hadoop 2.3的代码3. 修改 hadoop-2.3.0-cdh5.1.0\src\hadoop-common-projec原创 2014-08-03 17:27:23 · 2441 阅读 · 2 评论 -
Cloudera hadoop-2.3.0-cdh5.1.0 在Centos 6.5 下的安装
安装前准备1. 虚拟机3个,安装Centos 6.5, 内存设置为4GB 2. 配置yum源为163(不配置,在安装软件时,慢的要死)3. 关闭防火墙( iptables),disabled SELinux4. 配置静态IP,并在/etc/hosts中将Hadoop集群中的主机名加进去安装 1. 在Cloudera官网上下载 cloudera-manager-i原创 2014-08-08 23:26:48 · 2842 阅读 · 1 评论 -
hadoop-wireshark V0.8 支持hadoop hfds data解析了
hadoop-wireshark V0.8 支持hfds data解析了原创 2014-11-09 23:33:08 · 1453 阅读 · 0 评论