
hadoop
文章平均质量分 63
李承锦MJ
机器学习小生一枚
2017.06-至今 奇虎360 深度学习工程师
2015.01-2017.06 春雨医生 数据挖掘工程师
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop学习笔记———《MultipleOutputs———将结果输出到指定的多个文件或文件夹》
在MapReduce中使用MultipleOutputs将结果输出到多个文件或文件夹 使用步骤主要有三步: 1、在reduce或map类中创建MultipleOutputs对象,将结果输出; class TestReducer extends Reducer{ //将结果输出到多个文件或多个文件夹 private MultipleOutputs mo原创 2015-10-12 17:33:58 · 2473 阅读 · 1 评论 -
Hadoop学习笔记———《读、写HDFS文件》
读取HDFS上的文件 /** * Created by MJ on 15/12/06. * * @use 读取HDFS上的指定文件的内容并返回 * * @param filePath 待写入的HDFS文件路径 * @return String 文件的内容 * @exception Exception 异常返回null原创 2015-12-24 11:12:03 · 986 阅读 · 0 评论 -
Hadoop学习笔记———《HDFS基础命令》
1、查看目录(列表)信息 $ bin/hadoop dfs -ls /dirname/ 2、创建dirname目录 $ bin/hadoop dfs -mkdir dirname 3、删除dirname目录 $ bin/hadoop dfs -rmr dirname 4、上传filename文件到HDFS的dirname目录 $ bin/hadoop dfs -put filenam原创 2015-04-15 11:53:59 · 583 阅读 · 0 评论 -
Hadoop学习笔记———《Mac OS X 下hadoop2.6.0安装教程》
官网2.6.0的安装教程:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html hdfs指令:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/FileSystemShell.ht原创 2015-04-14 20:45:50 · 2810 阅读 · 0 评论