
hadoop
文章平均质量分 94
ecjtusbs
csdn博客已停更,cnblogs搜索ecjtusbs
展开
-
hadoop集群配置记录
Hadoop集群安装笔记硬件配置软件配置软件安装设置环境变量配置Hadoop运行启动Hadoop遇到的问题汇总ssh连接问题安装ssh-sever如何免密码登录hostname设置原创 2017-05-17 10:25:16 · 619 阅读 · 0 评论 -
hadoop-eclipse插件使用
hadoop-eclipse插件使用环境 - Ubuntu 16.04 - Hadoop 2.7.3 - eclipse-java-neon-3 - 插件名称:hadoop-eclipse-plugin-2.7.3.jar插件安装拷贝hadoop-eclipse-plugin-2.7.3.jar(优快云网站有资源)到eclipse安装路径下的dropins目录中,重启eclipse。插件使原创 2017-07-28 17:17:34 · 499 阅读 · 1 评论 -
Hadoop二次排序
问题描述:对如下的数据,进行排序,要求不同年龄的数据分为一组,同龄的数据按照身高升序排列。 。 大白话:左列为“年龄”,右列为“身高”。当然这里数据范围明显不合常理,但与本文关注重点无关,忽略。问题分析这原创 2017-11-22 19:14:05 · 471 阅读 · 0 评论 -
自定义RecordReader
自定义RecordReaderHadoop默认的InputFormat为TextInputFormat,对应的数据解析器默认为LineRecordReader。 我们可以根据需要自定义InputFormat和RecordReader来个性化对输入的处理。下面这个例子是我学习过程中参考视频教程做的一个练习,查了很多资料,大概弄懂,满心欢喜,兴致勃勃,欲记之,研墨毕,惊觉早有此例之详述,吾至而立之年以原创 2017-12-04 16:00:51 · 1459 阅读 · 0 评论