awk比较两个文件中多列相同或者不同的行

最新推荐文章于 2022-12-07 15:07:23 发布

转载最新推荐文章于 2022-12-07 15:07:23 发布 · 4.8k 阅读

8 ·

CC 4.0 BY-SA版权

原文链接：http://stackmirror.caup.cn/page/rhoezkk0vghd

文章标签：

#awk

Bash 专栏收录该内容

2 篇文章

订阅专栏

本文介绍如何使用awk命令进行数据文件的对比校验，通过具体示例展示了awk的强大功能，包括读取两个文件并比较其数据一致性，确保数据的准确性和完整性。

http://stackmirror.caup.cn/page/rhoezkk0vghd

awk -F, 'NR==FNR{ arr[$2]=$2 $1; next } 
    { print $0, (arr[$2]==$2 $3?"ok":"nok") }' OFS=, def.txt data.txt

d1,40,gold,ok
d2,30,silver,ok
d3,20,bronze,ok
d4,10,iron,ok
d5,5,wood,ok
d6,20,gold,nok
d7,10,wood,nok
d8,5,gold,nok
d9,10,silver,nok

awk 'NR==FNR{a[$2,$3];next} ($2,$3) in a' file1 file2

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

卢子墨

关注关注

0
点赞
踩
8

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

awk按某列key相同合并多行到一行，并对一对多情况进行统计

Knight_M_Moon的博客

06-13

4706

awk按第一列key相同，合并多行；并对一对多情况进行统计

Linux shell——将两个文件的内容按列合并

qq_36480087的博客

12-02

2903

有a.txt，内容如下： g18 g27 g109 g741 g742 有b.txt，内容如下： 13 89 90 0 0 现要将a.txt与b.txt内容按列合并，方法一：使用数组 node=($(awk '{print $1}' a.txt)) value=($(awk '{print $1}' b.txt)) num=${#node[@]} echo $num cat /dev/null > scoap.txt for((i=0;i<$num;i++));do echo $i ech

参与评论您还未登录，请先登录后发表或查看评论

awk 命令处理两份数据文件，依据id相同，筛选相同的数据

qq984676583的博客

07-11

2595

awk处理两份数据文件，将拥有相同id的数据筛选出来。不久之前我领导部署给我一份任务，一份数据量百万级的文件和另一份数据量百万级的文件筛选拥有相同id的文件，这种数据量级别的文件靠WPS是无法完成的，电脑配置一般的话甚至打开文件都无法做到，所以我将两份文件上传到linux环境下，执行以下命令。文件1：shannxi.csv 3000行文件2：basepoi.csv 4500...

awk比较两个文件

Knight_M_Moon的博客

06-13

4268

AWK按行或按某列比较两个文件相同和不同

awk找出两个文件不同或相同的内容

hanzhonghai2010的博客

11-07

7457

找出两个文件相同或不同的内容在Linux 系统查找中要找出两个文件相同或不同的内容，可以借助awk 的命令来实现。找出文件2中不同的值 awk ‘NR==FNR{a[$0]}NR>FNR{ if(!($0 in a)) print $0}’ file1 file2 找出两文件中相同的值 awk ‘NR==FNR{a[$0]}NR>FNR{ if($0 in a) prin...

用awk比较两个文件是否含有相同的数据

lx83350475的专栏

01-18

1412

现在两个文件格式如下： test1: aaa bbb ddd test2: aaa|1000 bbb|2000 ccc|3000 ddd|4000 awk -F'|' 'NR==FNR{a[$1]++}NR!=FNR{if($1 in a){print}}' test1.txt test2.txt

awk 查找两个文件中含有相同字段的列

weixin_40357360的博客

12-10

1103

awk -F ‘,’ ‘ARGIND1{a[$1]=$0}ARGIND2{b=$1;if(b in a) print $0}’ a.txt b.txt > c.txt 说明:两个文件中，一列有多个字段，其中某个字段相同，筛选出此列。

awk 两个文件相同的列输出

02-28

### 使用 `awk` 命令比较两个文件中的相同列为了比较两个文件中特定列的内容并输出匹配的结果，可以使用 `awk` 的特性来实现这一目标。下面是一个具体的例子：假设有一个场景，其中有两个文件 `file1` 和 `file2...

linux如何把两个文件按照第一列对比，把相同的不同的抓出来

06-06

如果我们想要输出两个文件中第一列相同的行（每个文件中的行都输出）：awk'NR==FNR{a[$1]++;next}{if($1ina)print}'file1.txtfile2.txt>common_in_file2.txt上面这个输出file2中匹配的行。同时再输出file1中匹配的行...

相同行数的两个文件，gVim如何将第二个文件中的内容逐行插入并替代掉第三列

热门推荐

xinxin_zhang的专栏

08-03

1万+

1.文件1 [root@bi-3 bin]# cat push TCL_P728M TCL 74eda717a4aef660f362f1806eb85d9d TCL_S720_JB2 TCL ecb6724875f6361466f4e91df603f06c TCL_P728M TCL f654f6d4f2157a658c0d7f688

awk 比较两个文件的多个列，找出相同或者不同的部分

youyouJaney的博客

06-05

1744

awk定义列值

awk合并某一列相同的行

seamoon的博客

12-07

1147

将文件合并第一列相同的值，呈现如下效果：只需执行命令：

linux 匹配多个字段,linux – 使用awk进行多列匹配和调整

weixin_32133403的博客

05-13

2128

我有一个问题,让我有点头疼,但它往往不需要作为一个相对初学者.我有一个看起来像这样的文件ID A1 A2 A31 A G A2 T G A3 T A G4 T G A5 A A G6 A C A7 C T G它是数千行,由G,C,T,A组成,其中G补充C和A补充T.我要做的是在A2或A3中搜索A1的匹配.如果存在匹配,则将其保持原样并且如果不将A2和A3改...

shell命令处理两个文件中的相同部分

hzhj的博客

06-12

3860

行完全相同输出两个文件中相同的行 grep -f $file1.txt $file2.txt root@ae02635267dc:/workspace/autohome/test/shell/awk# cat file2.txt |shuf|head -n 2 >file2_part.txt root@ae02635267dc:/workspace/autohome/test/shell/awk# cat file2.txt name1 data1 dada2 data3 data4 dad.

awk 合并相同列的行

abcdef0966的专栏

03-06

8801

Q: 怎么做来着？如果第一列与第二列相同，就合并行 cat a.txt a b c a b d a b e 结果为 a b c e d A: awk '{v=$1" "$2;a[v]=a[v]$3}END{for (j in a) print j,a[j]}' file

linux用行脚本,Linux实用脚本3：gawk获取匹配行的前（后）指定行

weixin_34440860的博客

04-30

168

文本源jwllinux@jwlLinux ~/shell $ cat test.txt1 aa2 bb3 cc4 dd5 ee6 ff7 gg需求找到4 dd后打印其后面/前面某行(以两行为例)命令1. 找匹配行后的第二行jwllinux@jwlLinux ~/shell $ awk -v line=$(awk '/dd/{print NR}' test.txt) '{if(NR==line+2)...

比较两个文本文档的不同，并显示第一出不同的行号列号

weixin_33862041的博客

04-05

658

比较两个文本文档的区别，并打印出第一处不同点的行号列号#!/usr/bin/env python#coding=utf-8file1=raw_input("please input the firest filename:") //输入第一个文件名file2=raw_input("please input the second filename:")...