bad_2007_boy-优快云博客

原创 win7 64bit 企业版编译Hadoop2.7.2源码+插件+部署伪分布式开发环境

参考资料： http://blog.youkuaiyun.com/buxinchun/article/details/71335937 http://blog.youkuaiyun.com/antgan/article/details/52067441 源码目录building.txt 第一部分：源码编译如果编译hdp2.6.5版本需要jdk7 1. 安装 JDK, 设置 JA

2017-11-30 15:34:12 544

翻译 Creating Practical Scripts Part IV

Creating Practical Scripts Part IV ************************************** Chapter 24 Writing Simple Script Utilities ************************************** Section : Performing Ar

2017-11-17 16:22:34 390

翻译 Linux Command Line and Shell Scripting Bible,3rd，Part 3

Linux Command Line and Shell Scripting Bible,3rd，Part III

2017-11-08 11:39:05 982

翻译 Linux Command Line and Shell Scripting Bible,3rd，Part II

Part II Shell Scripting Basics

2017-09-29 09:46:48 1679

转载如何调试bash脚本

参考： http://blog.youkuaiyun.com/wzhwho/article/details/6415197 http://blog.youkuaiyun.com/yfkiss/article/details/8636758 1. 使用bash -x bash -x打印出脚本执行过程中的所有语句 2. set 有的时候，我们的脚本非常复杂，使用bash -x得到的输

2017-08-31 16:48:29 462

翻译 Linux Command Line and Shell Scripting Bible,3rd，PartI

PartI TheLinuxCommandLine Chapter1 Starting with Linux Shells Chapter2 Getting to the Shell Chapter3 Basic bash shell Commands

2017-08-30 17:00:35 1135

转载关于虚拟机导入linux没有eth0解决办法

原文：http://jingyan.baidu.com/article/6f2f55a151b0ddb5b93e6cc4.html 1.删除配置文件 rm /etc/udev/rules.d/70-persistent-net.rules 重启 2.打开70-persistent-net.rules vim /etc/udev/rules.d/70-per

2017-08-25 10:33:51 1080

转载 Hadoop知识点参考

官方文档：http://hadoop.apache.org/docs/r2.7.2/ 启动＝＝＝＝＝ start-dfs.sh start-yarn.sh mr-jobhistory-daemo.sh start histroyserver 查看＝＝＝＝＝ NameNode : http://localhost:50070/ Applicatios :

2017-04-21 20:29:59 269

翻译 Hadoop The Definitive Guide 4th Editon

Hadoop The Definitive Guide 4th Editon ＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝ I.[Hadoop Fundamentals] －－－－－－－－－－－－－－－ 1.Meet Hadoop 2.MapReduce ————————— Hadoop provides its own set of basic types tha

2017-04-21 20:24:36 755

原创 hadoop linux集群角色

hosts 127.0.0.1 localhost 192.168.110.130 master 192.168.110.131 slave1 192.168.110.132 slave2 登录用户 hadoop （全部3个主机的用户都是同样的）网关 192.168.110.1

2017-04-20 10:16:02 498

原创 Hadoop 2.7.2 开发环境配置（Mac 10.11.5）

1. －－－－－－－－－－－－－－－－－ Hadoop272开发环境（Mac）： [1]. ssh安装以及免密码登录设置 [[1]]测试：ssh localhost 会有错误提示信息，表示当前用户没有权限。更改设置：系统偏好设置->共享->勾选"远程登录"-> ，设置允许访问所有用户。 [[2]]#配置免密钥登陆 ssh-keygen -t rsa -P '' -f ~

2017-04-20 10:14:14 674

原创 Hadoop 2.7.2 linux分布式环境配置（centos 6.8 32bit）

/////////////////////////////////////////////// Hadoop 272 Linux分布式环境： 1. 创建用户hadoop， sudo useradd –d /home/hadoop –m hadoop –G admin,root sudo passwd hadoop 主机名设置， master,slave1,sl

2017-04-20 10:10:14 803

原创 Hadoop 开发笔记

调试相关： ============= 安装HDFS（即格式化）： hadoop namenode -format hadoop jar ./hadoop-examples-1.2.1.jar pi 10 100 ============== 1.可以在http://localhost:50070 看到hdfs管理页面，http://localhost:8088 看到

2017-04-20 10:06:03 362

原创 CentOS 6.8(32)相关操作

CentOS6.8(32) ======================= 查看Linux内核版本命令 cat /proc/version 查看Linux系统版本的命令 lsb_release -a 查看linux机器是32位还是64位的方法：file /bin/ls 0. Linux 启动模式，text/graphics 如果想开机直接进入“命

2017-04-20 10:01:22 971

bad_2007_boy的博客