weixin_42102379的博客

功能：进行列提取（但也需要按行进行数据提取，即先读取文本的一行数据，在行中判断是否有符合条件的字段，然后再处理下一行）区分：grep命令是在文件中提取符合条件的行命令格式：[root@localhost ~]# cut [选项] 文件名选项说明：-f列号：需要提取的列号，如提取第2列，即-f 2-d分隔符：按照指定分隔符来分隔列，如使用“|”，即-d "|" 默认分隔符为制...

功能：命令格式：[root@localhost ~]# awk '条件1 {动作 1} 条件 2 {动作 2} …' 文件名命令说明：条件：一般为关系表达式动作格式化输出流程控制语句命令使用：格式化输出：列出 student.txt 文件的第二个字段和第六个字段[root@localhost ~]# awk '{printf $2 "\t" $6 "\n&

功能：printf是awk的重要格式化输出命令注意事项：printf输出动作和printf输出动作的区别：在 awk 中可以识别 print 输出动作和 printf 输出动作，区别是：print 会在每个输出之后自动加入一个换行符；而 printf 是标准格式输出命令，并不会自动加入换行符，如果需要换行，则需要手工加入换行符，但是在 Bash 中只能识别标准格式化输出命令 printf...

一、业务需求上游数据存储到kafka中，使用flume来采集数据，传输至hdfs等多种flumeSink。在此过程中，若kafka的数据生产速度高于了flume的消费速度，就会产生数据积压。为了对此过程进行监控，需要定时来监控kafka的生产与消费的状态。二、知识积累知识参考：https://blog.youkuaiyun.com/yxgxy270187133/article/details/5366...