- 博客(24)
- 收藏
- 关注
转载 mahout0.6版本中,启动出现找不到PrepareTwentyNewsgroups的解决办法
安装完mahout后,会出现java.lang.ClassNotFoundException: org.apache.mahout.classifier.bayes.PrepareTwentyNewsgroups这个错,...
2014-08-31 15:04:45
113
转载 在Hadoop中,引入第三方JAR包时,报ClassNotFoundException问题的解决办法
本人在Windows下用Eclipse开发Hadoop程序,用常规的方法,把第三方的JAR包用Config Build Path的方法引入JAR包,但是运行报错, 后来我把JAR包放到hadoop/lib目录,...
2014-08-24 14:34:07
181
转载 关于在IE8下禁用兼容模式的方法
参见:http://www.iefans.net/ie-jianrong-moshi-mogui-tianshi/ ...
2014-08-05 17:23:09
183
转载 datafu-1.0.0.jar下载
https://www.versioneye.com/java/com.linkedin.datafu:datafu/1.0.0 ...
2014-08-03 15:33:10
106
转载 shell小工具查看Hadoop中System.out输出的日志
#!/bin/bashrm ~/log.logecho "Please Input JobID:"read NAMEmap_log="/home/grid/hadoop-1.2.1/logs/userlogs/$...
2014-07-13 22:56:29
102
转载 Linux Shell脚本截取字符串
http://blog.youkuaiyun.com/gumanren/article/details/5601544 ...
2014-07-13 22:28:15
68
转载 在VI下进行搜索
你在命令模式下敲斜杆(/)这时在状态栏(也就是屏幕左下脚)就出现了 “/”然后输入你要查找的关键字如果你要继续查找此关键字,敲字符n就可以继续查找了。 ...
2014-07-02 23:31:34
74
转载 个人对shuffle的理解
1)mapping的过程就是把原始数据读成key,value对的形式2)reducer的过程就是把mapping的键值对计算成为我们最终我们想要的数据3)shuffle的定义是:把key相同的行聚合到一起,形成一个{ke...
2014-06-29 22:58:58
116
转载 关于运行Hadoop是报:Type mismatch in key from map
找了好久MaxTemperatureMapper的22行,好像也没有问题,结果在MaxTemperature.java中没有指定:job.setOutputValueClass(IntWritable.class);因为默认...
2014-06-29 09:30:14
131
转载 以JAR包的形式运行Hadoop程序
1.先用带classpath的形式编译所有的java文件:javac -classpath ../hadoop-core-1.2.1.jar *.java2.把所有的class文件打成jar包:jar cvf MaxTe...
2014-06-29 08:46:02
97
转载 Hadoop下添加节点和删除节点
http://www.dataguru.cn/forum.php?mod=viewthread&tid=175348 ...
2014-06-28 23:21:41
76
转载 hadoop 1.2.1的API地址
http://hadoop.apache.org/docs/r1.2.1/api/index.html ...
2014-06-22 22:16:41
68
转载 在Hadoop1.2.1上运行第一个Hadoop程序FileSystemCat
1.设置hadoop-env.sh的exportHADOOP_CLASSPATH=/home/grid/hadoop-1.2.1/myclass 2.设置JAVA_HOME和ClassPath ...
2014-06-22 21:52:05
95
转载 Hadoop常用命令
1.向Hadoop中复制文件,一定要是目录对目录:bin/hadoop fs -put ../input in2.查看Hadoop的文件:bin/hadoop fs -ls ./in3.启动集群:bin/star...
2014-06-14 14:32:32
78
转载 hadoop在子节点上没有datanode进程
经常会有这样的事情发生:在主节点上start-all.sh后,子节点有TaskTracker进程,而没有DataNode进程。环境:1NameNode 2DataNode三台机器,Hadoop为1.2.1解决办法:...
2014-06-14 13:30:52
287
转载 Linux下出现command not found的解决办法
不管是普通用户还是ROOT用户,修改~/.bash_profile文件,在文件最后加上:export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr...
2014-06-08 09:18:32
217
转载 配置Hadoop1.2.1
1.从Apache官网上下载1.2.1,地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz2.拷贝文件到虚拟机下(v...
2014-06-07 23:19:24
94
转载 Linux下我常用命令
1.scp:scp ./id_rsa.pub master@192.168.37.1:/home/slave1/.ssh/authorized_keys--从一台机器拷贝到另外一台机器2.tar -xzvf xxx.gz--...
2014-06-07 22:23:26
76
转载 在Linux下实现SSH免密码登录
1.在第两台台PC上输入:ssh-keygen -t rsa,然后敲三下回车,然后ll -a看下是否有.ssh目录2.在第一台机器上把id_rsa.pub以authorized_keys为文件名拷贝到第二台机器上,第二台机器...
2014-06-07 22:05:39
58
转载 Linux下修改用户名
修改用户名:以root身份登录,然后使用下列命令进行修改usermod -l NewUser -d /home/NewUser -m OldUser-l 修改用户名-d 修改登录后使用的路径-m 修改登录名称...
2014-06-07 17:28:57
74
转载 在Ubuntu安装JDK1.6详细步骤
1.首先安装JDK1.6,下载地址:http://pan.baidu.com/s/1c0u2iVA2.下载完成后是BIN格式的文件,拷贝到/home/master下3.执行:sudo chmod u+x jdk.bin,...
2014-05-25 00:24:55
145
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人