- 博客(9)
- 收藏
- 关注
hadoop+hive配置
首先根据http://cp1985chenpeng.iteye.com/blog/1328541中配置好hadoop分布式。然后在master上下载hive安装hive很简单,首先解压缩。然后配置环境变量以ubuntu为例$sudo vim /etc/environment添加JAVA_HOME="/usr/lib/jvm/java-6-sun" HADOO...
2011-12-28 17:51:52
153
hadoop+hbase完全分布式
一 。完全安装hadoop集群在伪分布式基础上修改几个配置文件即可,现在假定安装两台机器的集群,一台master,一台slaves1.修改两台机器的/etc/hosts文件在文件中添加机器的hostname和IP,用以通讯。Master需要知道所有的slave的信息。对应的slave只需要知道Master和自身的信息即可。#vim /etc/hosts在后面添加...
2011-12-28 14:03:17
150
原创 hadoop-Streaming 整合hbase执行C代码实例
这两天一直在弄hadoop-streaming整合hbase执行C语言的问题。昨天在Eclipse上自己写了一个TextTableInputFormat类继承了InputFormat类去解析hbase,然后通过自己写的mapreduce测试没有问题。下面这个类是分析InputFormat Hbase的基类。import java.io.IOException; import j...
2011-12-17 21:16:05
290
原创 hadoop-Streaming执行C代码实例
C CodeMap: Mapper.c#include <stdio.h>#include <string.h>#include <stdlib.h> #define BUF_SIZE 2048#define DELIM "\n" int main( int argc, char *arg...
2011-12-15 20:56:27
214
原创 hadoop-Streaming学习
1.概述 Hadoop Streaming是 Hadoop提供的一个编程工具,它允许用户使用任何可执行文件或脚本文件作为 Mapper和 Reducer,例如: $HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/hadoop-streaming.jar \ -input /user/test/input \ ...
2011-12-15 20:35:33
203
原创 java客户端操作Hbase
java客户端操作Hbase 首先,配置好 hadoop+hbase 环境后,确保 hbase 正常启动。 1. 搭建开发环境 1.1、运行 Eclipse,创建一个新的 Java工程“ HBaseHelloWorld”,右键项目根目录,选择 “ Properties”->“Java Build Path”-&g...
2011-12-14 13:43:05
141
hadoop+hbase伪分布式安装
安装hadoop+hbase伪分布式 1.安装hadoop伪分布式 1.1安装jdk-6u24-linux-x64-rpm.bin,需要说明的是,尽可能的使用64位的JDK版本。 1.2进入到CDH3的官方下载网址http://archive.cloudera.com/cdh/3/下载最新ha...
2011-12-14 12:38:40
120
ubuntu下运行bochs
安装gcc编译环境sudo apt-get install build-essential sudo apt-get install xorg-dev sudo apt-get install libgtk2.0-dev 下载bochs最新版本http://bochs.sourceforge.net/ 安装命令$tar vxzf bochs-2.4...
2011-07-12 17:28:11
397
保护模式-内存寻址
好久以前就想系统的学习一下linux源码了,由于懒得一直没有执行,最近终于下定决定开始学习了。 首先从保护模式开始吧。 1、系统标志寄存器EFLAGS系统标志寄存器EFLAGS控制这I/O,可屏蔽中断,调试,任务切换以及保护模式和多任务环境下虚拟8086程序的执行。其中系统标志:VM-虚拟8086模式,RF恢复标志;NT-嵌套标志;IOPL-I/O特权标志...
2011-06-23 23:08:19
327
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人