sort命令的k选项大讨论

本文深入探讨了Linux命令sort中-k选项的详细用法,包括如何按多个字段排序,实现复杂排序逻辑,以及如何利用-k选项的高级特性进行自定义排序。通过实例演示,读者能够掌握sort命令的强大功能,提升Linux脚本处理能力。

本原创文章属于《Linux大棚》博客,博客地址为http://roclinux.cn。文章作者为rocrocket。

为了防止某些网站的恶性转载,特在每篇文章前加入此信息,还望读者体谅。

===

[正文开始]
有时候学习脚本,你会发现sort命令后面跟了一堆类似-k1,2,或者-k1.2 -k3.4的东东,有些匪夷所思。今天,我们就来搞定它—-k选项!

1 准备素材

 

  1. $ cat facebook.txt
  2. google 110 5000
  3. baidu 100 5000
  4. guge 50 3000
  5. sohu 100 4500

 

 

第一个域是公司名称,第二个域是公司人数,第三个域是员工平均工资。(除了公司名称,其他的别信,都瞎写的^_^)

2 我想让这个文件按公司的字母顺序排序,也就是按第一个域进行排序:(这个facebook.txt文件有三个域)

 

  1. $ sort -t ' ' -k 1 facebook.txt
  2. baidu 100 5000
  3. google 110 5000
  4. guge 50 3000
  5. sohu 100 4500

 

看到了吧,就直接用-k 1设定就可以了。(其实此处并不严格,稍后你就会知道)

3 我想让facebook.txt按照公司人数排序

 

  1. $ sort --t ' ' -k 2 facebook.txt
  2. guge 50 3000
  3. baidu 100 5000
  4. sohu 100 4500
  5. google 110 5000

 

不用解释,我相信你能懂。

但是,此处出现了问题,那就是baidu和sohu的公司人数相同,都是100人,这个时候怎么办呢?按照默认规矩,是从第一个域开始进行升序排序,因此baidu排在了sohu前面。

4  我想让facebook.txt按照公司人数排序,人数相同的按照员工平均工资升序排序:

 

  1. $ sort --t ' ' -k 2 -k 3 facebook.txt
  2. guge 50 3000
  3. sohu 100 4500
  4. baidu 100 5000
  5. google 110 5000

 

看,我们加了一个-k2 -k3就解决了问题。对滴,sort支持这种设定,就是说设定域排序的优先级,先以第2个域进行排序,如果相同,再以第3个域进行排序。(如果你愿意,可以一直这么写下去,设定很多个排序优先级)

5 我想让facebook.txt按照员工工资降序排序,如果员工人数相同的,则按照公司人数升序排序:(这个有点难度喽)

 

  1. $ sort --t ' ' -k 3r -k 2 facebook.txt
  2. baidu 100 5000
  3. google 110 5000
  4. sohu 100 4500
  5. guge 50 3000

 

此处有使用了一些小技巧,你仔细看看,在-k 3后面偷偷加上了一个小写字母r。你想想,再结合我们上一篇文章,能得到答案么?揭晓:r和-r选项的作用是一样的,就是表示逆序。因为sort默认是按照升序排序的,所以此处需要加上r表示第三个域(员工平均工资)是按照降序排序。此处你还可以加上n,就表示对这个域进行排序时,要按照数值大小进行排序,举个例子吧:

 

  1. $ sort -t ' ' -k 3nr -k 2n facebook.txt
  2. baidu 100 5000
  3. google 110 5000
  4. sohu 100 4500
  5. guge 50 3000

 

看,我们去掉了最前面的-n选项,而是将它加入到了每一个-k选项中了。

6 -k选项的具体语法格式

要继续往下深入的话,就不得不来点理论知识。你需要了解-k选项的语法格式,如下:

[ FStart [ .CStart ] ] [ Modifier ] [ , [ FEnd [ .CEnd ] ][ Modifier ] ]

这个语法格式可以被其中的逗号(“,”)分为两大部分,Start部分和End部分。

先给你灌输一个思想,那就是“如果不设定End部分,那么就认为End被设定为行尾”。这个概念很重要的,但往往你不会重视它。

Start部分也由三部分组成,其中的Modifier部分就是我们之前说过的类似n和r的选项部分。我们重点说说Start部分的FStart和C.Start。

C.Start也是可以省略的,省略的话就表示从本域的开头部分开始。之前例子中的-k 2和-k 3就是省略了C.Start的例子喽。

FStart.CStart,其中FStart就是表示使用的域,而CStart则表示在FStart域中从第几个字符开始算“排序首字符”。

同理,在End部分中,你可以设定FEnd.CEnd,如果你省略.CEnd,则表示结尾到“域尾”,即本域的最后一个字符。或者,如果你将CEnd设定为0(零),也是表示结尾到“域尾”。

7 突发奇想,从公司英文名称的第二个字母开始进行排序:

 

  1. $ sort -t ' ' -k 1.2 facebook.txt
  2. baidu 100 5000
  3. sohu 100 4500
  4. google 110 5000
  5. guge 50 3000

 

看,我们使用了-k 1.2,这就表示对第一个域的第二个字符开始到本域的最后一个字符为止的字符串进行排序。你会发现baidu因为第二个字母是a而名列榜首。sohu和google第二个字符都是o,但sohu的h在google的o前面,所以两者分别排在第二和第三。guge只能屈居第四了。

8 又突发奇想,,只针对公司英文名称的第二个字母进行排序,如果相同的按照员工工资进行降序排序:

 

  1. $ sort -t ' ' -k 1.2,1.-k 3,3nr facebook.txt
  2. baidu 100 5000
  3. google 110 5000
  4. sohu 100 4500
  5. guge 50 3000

 

由于只对第二个字母进行排序,所以我们使用了-k 1.2,1.2的表示方式,表示我们“只”对第二个字母进行排序。(如果你问“我使用-k 1.2怎么不行?”,当然不行,因为你省略了End部分,这就意味着你将对从第二个字母起到本域最后一个字符为止的字符串进行排序)。对于员工工资进行排序,我们也使用了-k 3,3,这是最准确的表述,表示我们“只”对本域进行排序,因为如果你省略了后面的3,就变成了我们“对第3个域开始到最后一个域位置的内容进行排序”了。

9 在modifier部分还可以用到哪些选项?

可以用到b、d、f、i、n 或 r。

其中n和r你肯定已经很熟悉了。

b表示忽略本域的签到空白符号。

d表示对本域按照字典顺序排序(即,只考虑空白和字母)。

f表示对本域忽略大小写进行排序。

i表示忽略“不可打印字符”,只针对可打印字符进行排序。(有些ASCII就是不可打印字符,比如\a是报警,\b是退格,\n是换行,\r是回车等等)

10 思考思考关于-k和-u联合使用的例子:

 

  1. $ cat facebook.txt
  2. google 110 5000
  3. baidu 100 5000
  4. guge 50 3000
  5. sohu 100 4500

 

这是最原始的facebook.txt文件。

 

  1. $ sort --k 2 facebook.txt
  2. guge 50 3000
  3. baidu 100 5000
  4. sohu 100 4500
  5. google 110 5000
  6. $ sort --k 2 -u facebook.txt
  7. guge 50 3000
  8. baidu 100 5000
  9. google 110 5000

 

当设定以公司员工域进行数值排序,然后加-u后,sohu一行就被删除了!原来-u只识别用-k设定的域,发现相同,就将后续相同的行都删除。

 

  1. $ sort -k 1 -u facebook.txt
  2. baidu 100 5000
  3. google 110 5000
  4. guge 50 3000
  5. sohu 100 4500
  6. $ sort -k 1.1,1.-u facebook.txt
  7. baidu 100 5000
  8. google 110 5000
  9. sohu 100 4500

 

这个例子也同理,开头字符是g的guge就没有幸免于难。

 

  1. $ sort --k 2 -k 3 -u facebook.txt
  2. guge 50 3000
  3. sohu 100 4500
  4. baidu 100 5000
  5. google 110 5000

 

咦!这里设置了两层排序优先级的情况下,使用-u就没有删除任何行。原来-u是会权衡所有-k选项,将都相同的才会删除,只要其中有一级不同都不会轻易删除的:)(不信,你可以自己加一行sina 100 4500试试看)

11 最诡异的排序:

 

  1. $ sort --k 2.2,3.1 facebook.txt
  2. guge 50 3000
  3. baidu 100 5000
  4. sohu 100 4500
  5. google 110 5000

 

以第二个域的第二个字符开始到第三个域的第一个字符结束的部分进行排序。

第一行,会提取0 3,第二行提取00 5,第三行提取00 4,第四行提取10 5。

又因为sort认为0小于00小于000小于0000….

因此0 3肯定是在第一个。10 5肯定是在最后一个。但为什么00 5却在00 4前面呢?(你可以自己做实验思考一下。)

答案揭晓:原来“跨域的设定是个假象”,sort只会比较第二个域的第二个字符到第二个域的最后一个字符的部分,而不会把第三个域的开头字符纳入比较范围。当发现00和00相同时,sort就会自动比较第一个域去了。当然baidu在sohu前面了。用一个范例即可证实:

 

  1. $ sort --k 2.2,3.-k 1,1r facebook.txt
  2. guge 50 3000
  3. sohu 100 4500
  4. baidu 100 5000
  5. google 110 5000

 

12 有时候在sort命令后会看到+1 -2这些符号,这是什么东东?

关于这种语法,最新的sort是这么进行解释的:

On older systems, 'sort' supports an obsolete origin-zero syntax '+POS1 [-POS2]' for specifying sort keys.  POSIX 1003.1-2001 (*note Standards conformance::) does not allow this; use '-k' instead.

原来,这种古老的表示方式已经被淘汰了,以后可以理直气壮的鄙视使用这种表示方法的脚本喽!

(为了防止古老脚本的存在,在这再说一下这种表示方法,加号表示Start部分,减号表示End部分。最最重要的一点是,这种方式方法是从0开始计数的,以前所说的第一个域,在此被表示为第0个域。以前的第2个字符,在此表示为第1个字符。明白?)

结束语:

本文是互联网上仅有的比较全的关于sort的k选项的论述文章,如需转载请务必注明“转自Linux大棚-Linux主题博客”,谢谢各位:)

sort的-k选项基本就是这堆内容了,如果大家有什么补充,就留言吧:) 欢迎交流!

<think>首先,用户的问题是关于Linux的sort命令,具体是询问如何按数字小排序的方法。用户说:"我想了解 sort 按数字小排序的方法",意思是想知道如何使用sort命令来实现基于数字值的排序。 回顾用户的查询历史:用户提供了几个引用,这些引用都是从站内引用的。我需要参考这些引用,因为它们提供了相关信息。 - 引用[1]:解释了为什么数字排序可能不正确,比如10比2小,因为默认按字符排序。它提到了sort的-n选项来解决这个问题。 - 引用[2]:列出了sort命令的常见选项,包括-n用于按数值排序。 - 引用[3]:讨论sort的默认行为,并提到了默认是按字符排序。 - 引用[4]:提到了sort命令用于排序,uniq用于统计,但没有直接相关数值排序的新信息。 用户上一次的问题和我的回答:在之前的交互中,用户提到了sort命令,但在这个对话中,这是用户第一次直接提问sort按数字排序的具体方法。用户之前的消息是引用了一些内容和一个明确的查询。 系统级指令要求: - 所有行内数学表达式使用$...$格式(但这里可能不适用,因为主题是Linux命令)。 - 独立公式使用$$...$$(同样,可能不适用)。 - LaTeX语法正确(确保任何公式正确)。 - 使用中文回答。 - 生成相关问题。 - 在回答中引用的段落末尾自然地添加引用标识,如[^1]。 用户可见层要求: - 回答结构清晰,逐步解决问题。 - 尽量保证真实可靠。 所以,回答结构: 1. **理解问题**:确认用户的需求是sort命令按数字小排序。 2. **解释问题**:简要说明默认排序行为的问题(字符排序 vs. 数值排序)。 3. **提供解决方案**:详细介绍如何使用-n选项。 4. **给出示例**:提供示例命令以直观展示。 5. **添加其他相关选项**:如-r(反向排序),-k(指定列)等,以增强实用性。 6. **结尾生成相关问题**:根据指令,生成相关问题。 生成相关问题:指令说"生成相关问题",所以在回答结束时列出2-3个相关问题。 引用标识:在回答中,当引用内容时,在末尾添加[^n],比如引用[1]或[2]。 关键点从引用: - 引用[1]:强调-n选项用于数值排序。 - 引用[2]:列出了-n选项。 - 引用[3]:解释了默认行为。 - 引用[4]:不直接相关,但提到sort和uniq的结合。 核心解决方案:使用sort命令的-n选项来按数值排序。 完整命令示例: - 基本:sort -n filename - 指定列:sort -n -k3 filename(用于第三列) 确保回答用中文。 纲回答: 1. 介绍:解释为什么需要按数值排序(默认字符排序导致问题如10<2)。 2. 解决方案:介绍-n选项。 3. 示例:展示命令用法。 4. 其他选项:如-r、-k等。 5. 生成相关问题。 相关问题想法: 1. 如何处理文件中有混合数据类型(数字和文本)的排序? 2. 如何结合其他选项如-u(去重)使用? 3. 在脚本中使用sort进行数值排序的最佳实践? 引用用户提供的引用源。 </think>### sort 命令按数字小排序的方法 在 Linux 系统中,`sort` 命令默认使用字符排序(即按字典序),例如数字 "10" 会被视为以 "1" 开头的字符串,因此排序时可能出现 "10" 排在 "2" 前面的情况(如引用[1]所述)[^1]。为了解决这个问题,您需要使用 `-n` 选项来实现按数值小排序。以下是详细的步骤和解释,帮助您轻松掌握此方法。 #### 1. **理解数值排序的基本原理** - **默认行为问题**:`sort` 命令默认将输入行作为字符串比较(例如,比较 "10" 和 "2" 时,先比较第一个字符 "1" 和 "2",导致 "10" 被认为小于 "2")。 - **数值排序解决方案**:使用 `-n` 选项,强制将输入视为数字进行排序(例如,"10" 作为整数 10 处理,"2" 作为整数 2 处理,确保 2 < 10)。 - 这种数值排序适用于整数和浮点数(但需要注意浮点数的处理限制)。 - 引用[2]明确提到 `-n` 选项用于“转化为数字,按照数值的小排序”[^2]。 #### 2. **基本命令语法** - **核心格式**:使用 `sort -n` 后跟文件名或输入流。 - 示例:对文件中的数字升序排序。 ```bash sort -n filename.txt ``` - 如果您没有文件,可以直接从管道输入数据: ```bash echo -e "10\n2\n5" | sort -n ``` 输出: ``` 2 5 10 ``` - **说明**: - `-n` 确保数值排序(升序)。 - 如果数字前有空格或非数字字符,`sort` 会自动忽略(但如需更精确控制,可结合其他选项如 `-b`)。 #### 3. **结合其他选项增强功能** - **反向排序(降序)**:使用 `-r` 选项实现从到小排序。 - 示例: ```bash sort -n -r filename.txt # 输出: 10, 5, 2 ``` - 引用[2]指出 `-r` 用于“反向排序”[^2]。 - **指定排序列**:当数据是多列时(例如 CSV 或日志文件),使用 `-k` 选项选择基于某一列排序。 - 示例:对第三列数值升序排序。 ```bash sort -n -k 3 filename.txt ``` - 如果列中包含非数字字符,建议添加 `-b` 忽略空格(如引用[2]所述)[^2]。 - **处理混合数据**:如果文件中有数字和文本混合,数值排序只影响数字部分;其他部分按默认规则处理。 - 示例:文件 `data.txt` 内容: ``` apple 5 banana 10 cherry 2 ``` 命令: ```bash sort -n -k 2 data.txt # 按第二列数值升序排序 ``` 输出: ``` cherry 2 apple 5 banana 10 ``` - 引用[3]解释了排序行为的优先级:`sort` 会先对指定列数值排序,如有重复则默认回退到整行字符排序[^3]。 - **其他常用选项**: - `-u`:去除重复行(数值排序后去重)。 - `-o`:将输出保存到文件(如 `sort -n input.txt -o sorted.txt`)。 - `-t`:指定列分隔符(如逗号分隔文件:`sort -n -t ',' -k 2 file.csv`)。 #### 4. **实际应用示例** - **场景**:假设您有一个文件 `numbers.txt` 内容: ``` 100 20 5 15 ``` - **命令**:按数值升序排序。 ```bash sort -n numbers.txt ``` - **输出**: ``` 5 15 20 100 ``` - **常见错误避免**:如果数字前有空格(如 " 5"),默认会被忽略,但使用 `-b` 可确保更可靠(如引用[2]建议)[^2]。 #### 5. **注意事项** - **浮点数支持**:`-n` 选项能处理简单浮点数(如 "3.14"),但对于科学计数法(如 "1e3")可能存在兼容问题,建议测试数据。 - **性能**:数值排序比字符排序略慢(需转换数据类型),但对数据量影响较小。 - **最佳实践**:在脚本中结合其他命令(如 `uniq` 统计重复值,如引用[4]所示)[^4],确保排序高效可靠。 通过以上步骤,您就能轻松使用 `sort -n` 实现按数字小排序。如果在实践中遇到问题(如混合数据排序),可以结合具体数据测试命令参数。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值