- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 停止启动集群命令
192.168.2.101 hadoop beixin*K88切记一定要用hadoop账户停止hadoop集群cd /opt/hadoop-2.6.0/sbin./stop-all.shhbase集群关闭cd /opt/hbase-0.98.11/bin./stop-hbase.shzookeeper集群关闭ser
2016-02-14 13:21:04
1552
原创 常用shell例子
1、列出目录及其子目录和文件#!/bin/sh function scandir() { local cur_dir parent_dir workdir workdir=$1 cd ${workdir} if [ ${workdir} = "/" ] then cu
2015-11-12 17:26:09
658
原创 shell必懂知识点
1、exec 3>&1 #在当前SHELL环境中将文件标识3与标准输出相关联（备份一个stdout）exec 3>&- #为SHELL后续代码关闭文件标识32、 &>/dev/null解释：> 代表重定向到哪里，例如：echo "123" > /home/123.txt：/dev/null 代表空设备文件：2> 表示stderr标准错误：& 表示等
2015-11-06 20:10:23
848
原创 工作常用命令汇总
1、查看磁盘总体使用情况以及可使用情况 df -lh2、hadoop命令查看文件大小 hadoop fs -du -h /3、hadoop查看总体使用情况 hadoop dfsadmin -report4、查看文件在哪里locate 文件名5、文件按时间排序ll -rt6、查看tomcat是否启动ps -ef | grep tomcat
2015-11-05 15:23:39
1398
原创 hive数据迁移
数据迁移脚本：1、在原集群上创建，并设置相应权限hadoop fs -mkdir /tmp/hive-export2、生成导出脚本hive -e "use fangyc;show tables " | awk '{printf "use fangyc;export table %s to @/tmp/hive-export/%s@;\n",$1,$1}' | sed "s/@/'
2015-11-04 21:07:38
1167
原创 java通过thrift调用python远程执行shell
1、首先是在centos安装thrift2、thrift不懂得可以参考http://blog.youkuaiyun.com/weiliu0626/article/details/8237983这篇文章3、首先编写middle.thrift文件namespace java com.vrv.bigdata.deploystruct ReturnMessage { 1: list shellL
2015-10-16 19:32:01
1650
原创 内网编译thrift 0.8
1、因为thrift的内网编译比较特殊，它需要在网络环境下面下载所依赖的maven的jar包所以需要我们现在网络环境下安装thrift，如下网址为在网络环境下安装http://www.cnblogs.com/siwei1988/archive/2012/07/23/2605140.html安装完成后把/thrift-0.8.0/lib/java/build/tools目录中的m
2015-08-31 17:38:45
898
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人