- 博客(7)
- 收藏
- 关注
原创 Linux上yum安装MySQL文档
务必:先安装库yum install ld-linux.so.2 务必:再安装库yum install gcc-c++ yum install libstdc++.i686 解决安装问题:yum clean all 确定本地没有mysql:rpm -qa | grep -i mysql rpm -e --nodeps mysql-libs-5.1....
2019-09-10 11:36:05
116
原创 Linux安装rz,vim,同步时间命令
安装rz:yum install -y lrzsz安装vim:yum -y install vim*同步时间:yum install ntpdate
2019-09-10 11:26:40
259
原创 配置linux网卡
vim /etc/sysconfig/network-scripts/ifcfg-eth0DEVICE=eth0TYPE=EthernetONBOOT=yesBOOTPROTO=staticIPADDR=192.168.2.132GATEWAY=192.168.2.1NETMASK=255.255.255.0DNS=192.168.2.1查看一下配置文件/etc/resolv...
2019-09-10 11:25:51
132
原创 Hadoop的Shuffle机制和优化
1)Map方法之后Reduce方法之前这段处理过程叫Shuffle2)Map方法之后,数据首先进入到分区方法,把数据标记好分区,然后把数据发送到环形缓冲区;环形缓冲区默认大小100m,环形缓冲区达到80%时,进行溢写;溢写前对数据进行排序,排序按照对key的索引进行字典顺序排序,排序的手段快排;溢写产生大量溢写文件,需要对溢写文件进行归并排序;对溢写的文件也可以进行Combiner操作,前提是...
2019-09-10 11:18:28
365
原创 Hadoop常用端口号
dfs.namenode.http-address:50070dfs.datanode.http-address:50075SecondaryNameNode辅助名称节点端口号:50090dfs.datanode.address:50010fs.defaultFS:8020 或者9000yarn.resourcemanager.webapp.address:8088历史服务...
2019-09-10 11:05:58
264
原创 Linux常用命令
序号 命令 命令解释 1 top 查看内存 2 df -h 查看磁盘存储情况 3 iotop 查看磁盘IO读写(yum install iotop安装) ...
2019-09-10 11:04:36
102
原创 启动和停止storm和zookeeper集群的shell脚本
准备:1、免密码登录ssh-keygen -t rsassh-copy-id hostname(前提:配置好了hosts文件)2、在脚本同级目录创建vim supervisor-hostsmasterslave01start-all.sh#!/bin/bash. /etc/profilebin=/opt/soft/storm-0.9.7/bi
2018-01-09 21:04:51
639
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人