awk将某个字段按照分隔符分割之后统计次数

Shell脚本与MongoDB查询

最新推荐文章于 2024-08-02 21:30:07 发布

转载最新推荐文章于 2024-08-02 21:30:07 发布 · 3.6k 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/peizhe123/p/6516099.html

文章标签：

#awk #操作系统 #shell

本文介绍如何使用Shell脚本处理文件数据，并演示了基于特定条件查询MongoDB的方法。

cat label_movie2|grep BBD252CC0A4FE7D10C990261D5CEACB5|awk -F "," '{for(i=2;i<NF;i++) print $i}'|wc -l

在label_movie2文件中按照某个ID查找，然后按照分隔符“，”分割，最后统计结果

cat label_movie2|awk '$1 ~/^BBD/'|

查找文件开头以BBD字母为首的字段。

mongodb result集合查询：db.getCollection('labelmovie').find({cards:"AB5BE8ABAF2B438BAED580D00146A98A",result:{$elemMatch:{id:'11d30e048c9d95bce767ab60fd47aefb'}}})

转载于:https://www.cnblogs.com/peizhe123/p/6516099.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_30493321

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

awk指定输入分隔符，输出分隔符

qq_21478261的博客

03-26

1087

FS='@' ，指定输入分割符为@OFS=','，指定输出分割符为,

Linux 三剑客之awk（二）分隔符

bigblue00的博客

09-17

1077

awk的默认分割符是空格，其实awk的分隔符还分为两种，“输入分隔符” 和 “输出分隔符” 。输入分隔符，英文原文为field separator，此处简称为FS 输入分割符，默认是空白字符(即空格)，awk默认以空白字符为分隔符对每一行进行分割。输出分割符，英文原文为output field separator，此处简称为OFS awk将每行分割后，输出在屏幕上的时候，以什么字符作为分隔符，awk默认的输出分割符也是空格。输入分隔符 输入分隔符比较容易理解，当awk逐行处理文本的时候，以输入分隔符为

参与评论您还未登录，请先登录后发表或查看评论

awk使用多分隔符进行数据切分

鱼爻

04-28

3454

假如我们数据是这样的： mshing#24-mshing@msezi.com|A zhynin#18|zhynin@msezi.com-B mm-12-mm@123-c 分割符号为#,-,|不同的符号而且每一行的格式还不一致。但是数据的格式都是一样的，我们想通过分隔符提取数据。使用多次awk的方法行不通，但别忘了强大的awk是可以一次指定多次分隔符的。上代码： mshing@remtor:~$ cat text.txt | awk -F '[#|-]' '{print $1, $2, $3, $4}'

awk 中的字段、记录和变量

微信-sjk6070

11-25

654

Awk 有好几个变种：最早的 awk，是 1977 年 AT&T 贝尔实验室所创。它还有一些重构版本，例如 mawk、nawk。在大多数 Linux 发行版中能见到的，是 GNU awk，也叫 gawk。在大多数 Linux 发行版中，awk 和 gawk 都是指向 GNU awk 的软链接。输入 awk，调用的是同一个命令。GNU awk 用户手册中，能看到 awk 和 gawk 的全部...

使用awk聚合和排序

dhcao1112的博客

12-04

1269

用cat和grep筛选文件之后，awk对文件做聚合，sort进行排序

Linux使用tr或awk命令使用：以空格为分隔符统计分割后字符串数量

学亮编程手记

08-01

583

【代码】Linux使用tr或awk命令使用：以空格为分隔符统计分割后字符串数量。

awk分组统计

grllery的博客

08-15

1599

分组统计字符串长度函数length 条件判断if

使用，awk 按照分隔符分割字符串，并将分隔符去掉，输出分割的结果

09-15

在Unix/Linux命令行工具awk中，可以利用内置的split()函数按照指定的分隔符分割字符串，并通过for循环或其他操作去除分隔符。awk的基本语法是`awk '{action} pattern' input_file`，其中，`action`是你想要对每个...

awk使用begin块指定分隔符

热门推荐

Knightley_K的博客

10-09

1万+

awk实现分组统计一、根据某列进行分组计数二、根据某列对另一列进行分组求和三、根据限定条件进行分组计数或求和举例：以下为待分析内容：北京|少年|23 河北|少年|15 北京|青年|35 上海|少年|6 北京|中年|19 上海|青年|28 三列分别为地区、年龄段、去过城市个数一、根据某列进行分组计数根据地区统计人数 cat test.txt|awk -F '|' '{x[$1]++;} END{for(i in x) print(i ":" x[i])}' 结果如下：上海:2 河北:1 北京

awk 高级用法

xumneg111的博客

09-21

1293

awk 文章目录一、简介二、基本语法常用的选项参数匹配机制awk常用的内置变量一、简介 AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫 AWK 是因为其取了三位创始人 Alfred Aho，Peter Weinberger, 和 Brian Kernighan 的 Family Name 的首字符。二、基本语法 //awk [选项] ‘脚本命令’ 文件名 awk [选项参数] 'script' var=value file(s) 或者 awk [选项参数] -f scriptf

awk使用、awk统计案例

darling_user的博客

02-25

305

(一)语法结构 cut -d: -f1 xx.txt 一般使用命令行模式五、awk使用进阶常见的两个打印函数

awk学习笔记

weixin_34006965的博客

04-30

5291

不错的学习链接：所以拷贝下来了http://sebug.net/paper/books/awk/ awk是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息awk处理过程:依次对每一行进行处理，然后输出awk命令形式:awk [-F|-f|-v] ‘BEGIN{} //{command1; command2} END...

awk学习

weixin_34248118的博客

12-03

335

awk是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息 awk处理过程:依次对每一行进行处理，然后输出 awk命令形式: awk [-F|-f|-v] ‘BEGIN{} //{command1; command2} END{}’ file [-F|-f|-v] 大参数，-F指定分隔...

一文了解Shell中的awk命令

南国的技术栈

05-15

689

前言 AWK是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫AWK是因为其取了三位创始人 Alfred Aho，Peter Weinberger, 和 Brian Kernighan 的 Family Name 的首字符。语法 awk [选项参数] 'script' var=value file(s) 或 awk [选项参数] -f scriptfile var=value fil...

Linux 【awk 命令】文本切割工具

qq_43606536的博客

08-02

2224

awk ：“Aho Weiberger and Kernighan”三个作者的姓的第一个字母：是一种处理文本文件的语言，是一个强大的文本分析工具。awk是逐行处理，当awk处理一个文本时，会一行一行进行处理，处理完当前行，再处理下一行，awk默认以"换行符"为标记，识别每一行，，awk会按照用户指定的分割符去分割当前行，如果没有指定分割符，默认使用空格作为分隔符。

linux命令 awk_如何在Linux上使用awk命令

culintai3473的博客

09-19

732

linux命令 awkFatmawati Achmad Zaenuri/ShutterstockFatmawati Achmad Zaenuri / Shutterstock On Linux,awk is a command-line text manipulation dynamo, as well as a powerful scripting language. Here’s an in...