miahhrgbfcyur的博客

sh -sh *

mv 文件名 目标路径 复制文件 cp 文件名 文件路径 更改文件名 mv 文件名 新的文件名

首先先写一个shell脚本： hql=" " hive -e "$hql" >> 文件名 如果要输出表头： 再加入config config=" set hive.cli.print.header=true; " hql=" $config " hive -e "$hql" >> 文件名

将文件从服务器上传到hdfs上: hadoop fs -put 文件名 hdfs路径 将文件从hdfs上拉到本地： hadoop fs -get hdfs路径 本地路径 查看hdfs文件目录 hadoop fs -ls 文件夹名

第一行： 两次按g 第二行： shift+g 任意一行： vi 文件名 +行号

less 文件名

awk '{print NR}' test1.csv|tail -n1

awk 'BEGIN{FS="\t";OFS=","}{$1=$1;print $0}' train.csv> data.train

中文版

这篇文章讲的特别好

不要有重复的列表

这两篇博客写的比较好： http://cn.linux.vbird.org/linux_basic/linux_basic.php https://www.linuxprobe.com/chapter-04.html xshell下拉取文件： sz 上传： rz

今天在xshell下运行.sh的脚本，里面写的是hive语句，但是报\r：command not find 的错误，查了一下说是linux下不能认出win的换行符，所以在vi界面下输入：:set fileformat=unix即可将doc模式切换到unix模式，在win下编辑器里写的时候，也要注意先将模式切换到unix。 切记不要在win和linux下来回的粘贴复制，这不是一个好的程序员的素养。 ...

这篇文章记录新手小白在使用ubuntu18.04系统中遇到的所有问题及解决方案，不定期更新。