
大数据之Linux
Felix_CB
我总高高在上,但却走不出这人生低谷
展开
-
linux 登录用户用户名显示bash-4.2
这种情况一般是用户目录被删除导致解决方案:1.删除该用户,重新创建userdel -r felixuseradd felix2.拷贝.bashrc和 .bash_profile 文件到该用户目录下cp /etc/skel/.bashrc /home/felix/cp /etc/skel/.bash_profile /home/felix/...原创 2019-10-21 09:31:17 · 2454 阅读 · 0 评论 -
shell使用脚本——自动处理重复数据
#!/bin/bashUsage="Usage : $0 (arg1:the data file; arg2:the duplicate content file; arg3:the output file"if [ $# -lt 3 ];then echo $Usage exit 1filine_num=`cat $1 | wc -l`for (( i=1; i<=$li...原创 2019-06-20 23:08:27 · 978 阅读 · 0 评论 -
vi/vim 操作图解
图片源自:http://www.viemu.com/a_vi_vim_graphical_cheat_sheet_tutorial.html本文链接:转载 2019-06-10 11:43:28 · 377 阅读 · 0 评论 -
判断linux文件、文件夹是否存在
shell 判断文件夹或文件是否存在文件夹不存在则创建if [ ! -d "/data/" ];then mkdir /data else echo "文件夹已经存在"fi#文件存在则删除if [ ! -f "/data/filename" ];then echo "文件不存在" else rm -f /data/filenamefi#判断文件夹是否存在...转载 2019-05-28 17:08:32 · 34384 阅读 · 0 评论 -
linux显卡常用查询命令
1.查看显卡基本信息lspci | grep -i nvidia 2.查看显卡驱动版本nvidia-smi -a3.查看gpu使用情况nvidia-smi转载 2019-04-19 15:57:51 · 4672 阅读 · 0 评论 -
Centos 7系统安装教程
一、下载系统镜像官方地址:http://vault.centos.org/阿里云:http://mirrors.aliyun.com/centos/网易云:http://mirrors.163.com/centos/华为云:https://mirrors.huaweicloud.com/centos/二、制作u盘系统安装盘,或系统光盘usbWriter下载:(会格式化u盘)h...原创 2019-03-23 16:56:40 · 483 阅读 · 0 评论 -
Centos常用环境配置操作(防火墙,selinux, 句柄数。。。)
centos 防火墙开启关闭操作:#centos6#查看防火墙状态service iptables status#关闭防火墙service iptables stop#开启防火墙service iptables start#重启后保持关闭chkconfig iptables off#开机启动防火墙chkconfig iptables on#centos7#查看防火墙状态...原创 2019-03-21 14:30:20 · 414 阅读 · 0 评论 -
ssh 指定端口连接服务器
ssh -p 端口 用户@ip地址原创 2019-02-28 20:12:49 · 13329 阅读 · 0 评论 -
linux中文件格式转换,dos转为unix
dostype=dosfile=xxxxif [ -f $file ]; then typename=`file $file | grep -q CRLF &amp;&amp; echo dos || echo unix` if [[ $typename == $dostype ]]; then sed -i "s/.$//g" $file fifi转载 2019-02-13 11:24:41 · 1472 阅读 · 0 评论 -
实用脚本 之 将指定目录下符合规定的文件移动/拷贝到 规定目录中
#!/bin/bash#源文件所在目录dirArray=( /opt/bigdata/FtpDir1/ /opt/bigdata/FtpDir2/ )#最终存储的目录aimDir=/opt/bigdata/mytxt/#正则匹配表达式regex=*.txtif [ ! -d $aimDir ]; then mkdir -p $aimDirfifor (( i=0;i&amp;amp;lt;...原创 2019-01-23 15:16:02 · 1202 阅读 · 0 评论 -
实用shell脚本 文件整理移动清除,可指定时间
#!/bin/bashimsiRecordDir=/opt/dir1/aimDir=/opt/dir2/#源目录集合dirArray=( $imsiRecordDir )#正则查找文件regex=&amp;amp;quot;.*\(log\)$&amp;amp;quot;#清除策略minTime=`expr 10 * 1 * 1 * 1`currentTime=$(date +%s)time=`expr $(date +%s) ...原创 2019-01-25 17:02:45 · 684 阅读 · 0 评论 -
shell实用脚本之,清除指定目录指定时间点之前的文件
#!/bin/bashdir1=/opt/dir1dir2=/opt/dir2dir3=/opt/dir3#删除最小粒度控制minTime=`expr 60 * 60 * 24 * 1`array=($dir1 $dir2 $dir3)currentTime=$(date +%s)#echo "当前时间:"$currentTimefor(( i=0;i&lt;${#array[@...原创 2019-01-09 15:12:31 · 1721 阅读 · 0 评论 -
linux ls -l 为什么第五列目录都是4096
ls -l 命令第5列的数字:1、对于普通文件,显示的是文件的大小(字节数)2、对于设备文件是指主设备号(第6列为次设备号)3、对于目录,是指目录大小(目录内inode列表所占空间,而不是目录内文件所占的空间大小)4、对于符号链接,是指链接文件的路径名的字节数原文:https://www.cnblogs.com/zhq--blog/p/9603425.html...转载 2019-01-07 15:56:29 · 2906 阅读 · 1 评论 -
磁盘IO和网络IO的评估、监控、性能定位与优化知识总结
生产中经常遇到一些IO延时长导致的系统吞吐量下降、响应时间慢等问题,例如交换机故障、网线老化导致的丢包重传;存储阵列条带宽度不足、缓存不足、QoS限制、RAID级别设置不当等引起的IO延时。社区上周举办了交流活动,针对磁盘IO和网络IO,重点围绕IO评估、评估工具、监控方法、性能问题的定位与调优等方面展开讨论。由活动嘉宾杨建旭(中国人民银行清算总中心性能测试团队负责人、高级技术经理)系统整理其所...转载 2019-01-07 15:55:03 · 1477 阅读 · 0 评论 -
Linux 任务调度 crontab 简单使用
查看crontab 定时任务crontab -l编辑crontab定时任务crontab -e查看crontab服务 是否开启service crond status开启crontab服务service crond start关闭crontab服务service crond stopcrontab定时任务说明* * * * * 任务执行命令分 时 天 月 星期 (...原创 2018-12-29 22:39:53 · 273 阅读 · 0 评论 -
工作中 Liunx 常用命令(基于centos) 总结
命令代码功能描述jps -lm查看java进程的pid 和启动程序的全类名或包名jps -lmvV查看java进程的详细启动参数(jvm,classpath)ps -ef | grep pid/pname查看对应进程的详情df -h查看磁盘空间du -sh ./*查看当前目录下所有文件或文件夹所占磁盘空间大小free -h查看当前系统内...原创 2018-12-28 09:13:48 · 396 阅读 · 0 评论 -
nohup 后台不挂断启动
nohup COMMAND &这样就能使命令永久的在后台执行例如:sh test.sh &将sh test.sh任务放到后台 ,即使关闭xshell退出当前session依然继续运行,但标准输出和标准错误信息会丢失nohup sh test.sh将sh test.sh任务放到后台,关闭标准输入,前台不再能够接收任何输入(标准输入),重定向标准输出和标准错误到当前目录下...原创 2018-12-27 21:57:45 · 1112 阅读 · 0 评论 -
windows 下的 Linux虚拟机安装 CentOS 6.x
一、 window下安装虚拟机确认系统已开启虚拟化若未开启则在BIOS中选择虚拟化开启Insyde 机型安装VMWare软件创建虚拟机先攒机, 下一步在装系统为虚拟机安装Centos操作系统①指定ISO系统映像文件②启动虚拟机, 安装系统③自定义布局磁盘分区一般分三个区, /boot引导区, swap 交换区, 剩下的为/根目录④重新引导后 可...原创 2018-12-21 17:09:35 · 290 阅读 · 0 评论