- 博客(3)
- 收藏
- 关注
原创 Hadoop 常用参数项整理
Hadoop 常用参数项整理常用重写函数(代码案例整理自网上)学习了Hadoop有一小段时间了,简单的了解了hadoop的原理,也尝试着编写代码解决一些实际的问题。在这里也对hadoop常用,实践中可调整的一些参数项进行了整理。1. Partitioner Shuffle 阶段在Map端的核心。决定了Mapper的输出将由哪一个reducer处理 public static class MyPar
2016-01-27 23:37:05
643
1
原创 vi 常用命令整理
vi 命令整理 vi编辑器是Linux和Unix上最基本的文本编辑器,工作在字符模式下。由于不需要图形界面,vi是效率很高的文本编辑器。尽管在Linux上也有很多图形界面的编辑器可用,但vi在系统和服务器管理中的功能是那些图形编辑器所无法比拟的。 总而言之vi是Linux平台中的一款强大的编辑器。从刚刚入门、上手vi, 到完全熟悉vi,再到能熟练的使用vi编写程序,超过其他编辑器编写的速度还是需要不
2016-01-19 21:17:22
671
原创 # 从零开始搭建Hadoop2.7.1的分布式集群
从零开始搭建Hadoop2.7.1的分布式集群Hadoop 2.7.1 (2015-7-6更新),Hadoop的环境配置不是特别的复杂,但是确实有很多细节需要注意,不然会造成许多配置错误的情况。尽量保证一次配置正确防止反复修改。网上教程有很多关于Hadoop配置的,但是每一个教程都对应了一个版本信息,有一些教程也存在很大的问题,配置环境,系统环境都没说清楚。在此我将记录下来从零搭建Hadoop2.7
2016-01-17 21:49:43
17758
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人