Linux学习之sort/uniq/awk

最新推荐文章于 2024-05-11 09:25:34 发布
原创 最新推荐文章于 2024-05-11 09:25:34 发布 · 313 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何使用awk命令逐行读取数据，并以指定字符作为分隔符来筛选和处理数据。此外还介绍了如何结合sort和uniq命令进行排序及去除重复数据的方法。
部署运行你感兴趣的模型镜像

|awk 逐行读取数据，默认以空格为分隔符，把数据分组。也可以制定分隔符  |awk F':'  以：为分隔符

|awk '{print $n}' 从每行数据中筛选第n组

|awk '{print $(NF-1)}' 从每行数据中筛选倒数第二组 

|sort 排序

|uniq 去重 -c 统计重复次数(只会统计连续重复次数，所以要先使用sort排序)


您可能感兴趣的与本文相关的镜像

Llama Factory

Llama Factory

模型微调
LLama-Factory

LLaMA Factory 是一个简单易用且高效的大型语言模型（Large Language Model）训练与微调平台。通过 LLaMA Factory，可以在无需编写任何代码的前提下，在本地完成上百种预训练模型的微调

Tdbtx_j
关注
sort+awk+uniq三者结合使用
weixin_33749131的博客
09-27 280
（1）统计文件中出现次数最多的前10个单词 #ps -ef > ps.file #cat ps.file | awk ‘{print $1}’ | sort | uniq -c | sort -n -r -k1 | head -10 （2）输出至少出现3次的的单词 # cat ps.file | awk '{print $1}' | sort | uniq -c | sort -n ...
awk笔记
小波的专栏（u012893325）
06-13 449
awk基础变量： 变量名                    含义  ARGC              命令行变元个数  ARGV              命令行变元数组  FILENAME        当前输入文件名  FNR                 当前文件中的记录号  FS                   输入域分隔符，默认为一个空格  RS        
awk命令在ps -ef中的应用
modi000的博客
06-28 5767
1、awk作用： 处理每一行的字段内的数据，默认的字段的分隔符为空格或tab键。 2、格式： awk '条件类型1{动作1} 条件类型2{动作2}' filename 示例： ps -ef |grep $1 |grep -v "grep" |grep -v "/binsh"|awk '{print $2}' ---------------------->awk '{print $2}'-------------->打印第二个字段 ...
【Linux】ps -ef|grep -v grep|awk ‘{print $2}‘ 命令详解
huotongwangbs的专栏
03-26 3785
【Linux】ps -ef|grep -v grep|awk '{print $2}' 命令详解
linux常用命令积累(常更新)
东杰书屋
12-31 2447
手动清理内存缓存 echo 1 > /proc/sys/vm/drop_caches 批量替换文件夹中多个文件中的字符串 sed -i "s/大小多少/日月水火/g" `grep 大小多少 -rl /usr/aa`    注意grep前面和最后面的引号为反引号就是tab键上面的引号 列出当前文件夹目录大小，以G，M，K显示。 du -b --max-depth 1 | s
19.Linux中字符处理sort和uniq命令详解
小鹏linux的博客
04-11 1856
linux命令行提供了非常强大的文本处理功能，组合利用linux命令能实现好多强大的功能。本文这里举例说明如何利用Linux命令行进行文本按行去重并按重复次数排序。主要用到的命令有sort，uniq和cut。其中，sort主要功能是排序，uniq主要功能是实现相邻文本行的去重。
学习篇 | Linux 三剑客『 awk / sed / grep 』
keyu123的博客
04-24 539
Linux 常用命令 -- linux 三剑客『 awk / sed / grep 』，老大 awk 最擅长取列，老二 sed 最擅长取行，老三 grep 最擅长过滤，是 Linux 运维人员必会的三个基本命令
提升效率的Linux命令实战：cat, sort, uniq, awk, grep
文中通过对比研发中处理数据的方法，展示了如何使用cat、sort、uniq、awk和grep命令高效地完成数据处理任务，而不仅仅是依赖Excel。文章没有涵盖基础命令如vim、cd、ls、mv和cp，而是选择了作者认为在工作中更为实用...
Linux初学（十一）AWK进阶
ys1215的博客
04-03 3128
AWK进阶
linux使用/etc/hosts.deny拒绝恶意ssh到本机
最新发布
潇洒哥的运维之道
05-11 1945
etc/hosts.allow 优先于 /etc/hosts.deny。如果在allow和deny文件中都有某个ip，那么这个ip是被允许ssh。如果在allow中有，deny没有，那么这个ip是被允许ssh。如果allow中没有，deny有，那么这个ip是被禁止ssh。还可以在 /etc/hosts.deny文件里追加一个额外配置，让其读取另外一个ip列表。这样可以使你以后维护需要禁止的ip更方便。
linux下ps ef命令详解,linux中ps -ef命令
weixin_32184669的博客
04-28 1万+
linux中ps -ef命令发布于 2016-01-05 10:56:52 | 422 次阅读 | 评论: 0 | 来源: PHPERZLinuxLinux是一套免费使用和自由传播的类Unix操作系统，是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。ps -ef 查看正在活动的进程ps -ef |grep abc ...
linux ps -ef|grep 命令的以下几列分别代表什么
gangsijay888的博客
06-04 3460
1) root 进程用户ID（UID）， 2) 2978 进程ID（PID） 3)2652 父进程ID（PPID） 4) 0 CPU调度情况（C） CPU用于计算执行优先级的因子。 5)09:27 进程启动的时间（STIME） 6) pts/0 启动进程的终端名 7)00:00:00 进程共占用CPU的时间（TIME） 8) grep redis 启动进程的命令（CMD） ht...
ps -x |grep anaconda3|awk ‘{print$1}‘ |xargs kill -9
u010848594的博客
09-18 738
ps -x |grep anaconda3|awk '{print$1}' |xargs kill -9
ps -ef | grep java
weixin_33920401的博客
09-13 3809
ps -ef | grepxx ps命令将某个进程显示出来 grep命令是查找 中间的|是管道命令 是指ps命令与grep同时执行 PS是LINUX下最常用的也是非常强大的进程查看命令 grep命令是查找，是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。 grep全称是Global Regular Expression Print，表示全局正则...
unix 中 ps -ef命令详解
sunxiaopengsun的专栏
02-27 4888
ps -ef 查看正在活动的进程 ps -ef |grep abc 查看含有"abc"的活动进程 ps -ef |grep -v abc 查看不含abc的活动进程       　　1）ps a 显示现行终端机下的所有程序，包括其他用户的程序。   　　2）ps -A 显示所有程序。   　　3）ps c 列出程序时，显示每个程序真正的指令名称，而不包含路径，参数或常驻服务的标示
awk命令详解+示例
热门推荐
jsut_rick的博客
08-08 4万+
WK数据过滤工具(类似于grep，比grep强大) Awk编程语言/数据处理引擎 创造者：Aho、Weinberger、Kernighan 基于模式匹配检查输入文本，逐行处理并输出 通常用在Shell脚本中，获取指定的数据，单独使用时，可对文本数据做统计 #whichawk #rpm-qf/bin/awk 语法格式： 格式1：前置命令|awk[选项]‘条...
Linux中awk工具的使用
谢公子的博客
10-09 4万+
目录 awk awk的用法 awk中字符的含义 print 打印 字符匹配 格式化输出 举例 awk awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，默认以空格为分隔符将每行切片，切开的部分再进行各种分析处理。 awk是行处理器,相比较屏幕处理的优点，在处理庞大文件时不会出现内...
ps -ef查看进程，并杀死特定进程
water
07-26 2617
命令如下，之后在补充各自的意义 ps -ef | grep file-flume-kafka | grep -v grep |awk '{print $2}' | xargs kill -9 [jiang@studyMachine mock0401]$ ps -ef | grep file-flume-kafka | grep -v grep |awk '{print $2}' 8912 [jiang@studyMachine mock0401]$ ps -ef | grep file-flume
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值