《The AWK Programming Language》序

精通awk编程:从基础到进阶的全面解读 本文是对《The AWK Programming Language》一书的核心内容进行的深度解读。文章首先介绍了awk的基本概念,包括输入文件的读取、输出的打印、表达式的使用以及模式、动作和变量的处理。随后,深入探讨了数组的使用、函数的定义以及gawk的高级特性。最后,文章还涉及了如何运行awk和gawk程序,以及awk语言的进化和安装说明。通过阅读本文,读者将获得对awk编程的全面认识。 阅读详情

很多人把大把的时间花在一些简单、机械的数据处理上——改改数据格式、看看是否规整、找找特定的条目、加总数字、打印报表,诸如此类的小事。这些重复枯燥的琐事本是程序语言的强项,但真要用C、Pascal这样的标准编程语言去解决却也有苦难言。

你需要一种能在寥寥数行之内解决这类问题的编程语言,awk就有此奇功。用awk编程就像在写规则说明:问,遇到这样的数据怎么办?答,如此这般。这“问”即为欲处理数据之匹配模式;这“答”即是找到所需数据后,awk采取的动作。awk每读入一行就会逐项查找那些模式,一旦匹配,执行其后的动作。模式既可以是正则表达式,也可以是用于字串、数字、域(field)、变量、序列元素(array element)间比较的关系运算符(comparison operation)。awk对动作没有太多的限制。描述动作的语言有点像C,但是不用声明,字串也数字也是内置的数据类型。

awk会自动扫描输入文件并将之拆分成域。很多事情,比如拆分输入、存储管理、初始数据,都由awk代劳。这也是awk写出的程序更短小的原因。awk很适合来做这些数据处理。写上一两行awk程序,执行,解决问题,然后丢弃。实际上,awk作为通用的编程工具,完全可以取代某些专用程序。

awk很适合来开发程序原型,因为它表达简洁、操作方便。从很少的几行代码开始,不断修改直至达到目标,同时还可以尝试不同的设计。因为程序短小,没有什么负担,即便设计方向错了也容易扭正。而且只要设计正确,用其他语言来改写awk程序也很简单。

本书的框架

本书的初衷是介绍awk以及如何高效的使用awk。第一章(An AWK Tutorial)告诉你如何起步。内容很简单,读过几页你就可以开始写一些能用得上的程序了。这章的例子很短,主要是与awk交互。

第二章(The AWK Language)开始系统地介绍整个awk语言。比起第一章,这一章的例子就多了,而且开始变得又长又臭^_^,就像读说明书一样。所以,第一次读的时候你可能会跳过去。

本书余下的部分还收录了很多示例,从中你不仅可以看到awk应用之广泛,还可以了解其精髓。之所以选择这些示例,有些是很正式的用法,有些只是帮助理解,还有些仅仅是因为好玩。

第三章(Data Processing)着重介绍了检索、变换、化简和数据验证,这也是设计awk的初衷。本章的最后,还讨论了如何处理大数据(比如地址簿)。

awk很适合管理个人的小型数据库。第四章(Reports and Databases)讨论了如何从数据库生成报表、如何搭建简易的关系型数据库(relational database system)、如何用查询语言(query language)在多个文件中查找。

awk处理文本就像其他语言操作数字一样得心应手。文本处理是awk的专长。第五章(Processing Words)描述了如何生成文本,这在文档预处理中用处不小。我们还把写本书时用到的索引程序也收录进来了。

第六章(Little Languages)是关于“袖珍语言”,也就是专门用于某个狭窄领域的特定语言。用awk来写一些小型的转换程序很方便,因为它有很多在词法或是表管理(table-management)层面上支持转换的运算符。在这一章会看到一个(awk写的)汇编程序、一门图像语言和几个计算器。

awk中变量不用声明,存储管理也很容易,所以很适合表述某些算法。awk写出的程序和伪代码很相似,更重要的是它还可以运行。第七章(Experiments with Algorithms)着重探讨了如何用awk来考察算法,从测试到执行效率(,我们都有涉及)。我们用awk实现了几个排序算法,以及一个Unix版的make程序。

第八章(Epilog)记叙了awk之所以为awk的历史原因,并就性能和扩展给出了建议。

附录一(A AWK Summary)小结了这门语言;附录二(Answers to Selected Exercises)给出了部分习题答案。

你可以从从头开始读起,试试运行你自己遇到的小程序。快速扫过第二章,重点看看小结和表(table),不要急于陷入细节之中。后面的章节几乎相互独立,不必在意顺序,完全可以凭兴趣决定。

书中的示例

对本书的示例,收录时我们有几个考虑。第一,当然是展示怎么用好awk。我们想尽可能地涵盖awk的十八般武器,尤其钟爱关联序列(associative array)和正则表达式类具有awk特色(译注:awk较早引入了关联序列的概念,待考证)的工具。

第二个考虑是展现awk的广泛使用。从数据查询到电路设计,从数值分析到图像处理,从程序编译到系统管理,从非程序员的启蒙语言到软件工程的课程实践,随处可见awk的身影。我们希望书中罗列的各式应用能使你们受到更多的启发。

第三个考虑是为了说明计算操作的无处不在。这本书选取的例子涉及很广,有关系型数据库、简易的汇编程序和解释程序、画图语言、一个描述awk子集的递归下降解析程序、基于make的文件更新程序等等。但所有的例子都试图用一小段awk程序,以便于理解的方式,去揭示事物运作的本质。

此外,我们还尽可能地介绍一些设计程序的方法。比如awk支持得很好的快速原型方法,以及不那么直观的分而治之策略:把一个大工程分割成一堆小问题,每一个都只着眼问题的某一方面。还有开发写程序的程序,即领域语言。定义好用户接口,并提出合理的实现。虽然这些思想都是用awk来体现的,但它们普遍适用,值得每个程序员重视。

书中所有的例子都可以运行。我们曾想保证程序不含错误,但与其把精力放在怎么处理所有的非法输入上,或者为了确保正确而放弃功能扩展,还不如集中精力好好琢磨怎么把事理说透。

AWK的演化

1977年,笔者想试试Unix下的grep和sed能不能像处理数字那样处理文本,所以设计实现了最初的awk。这也得益于我们对正则表达式和可编程编辑器(programmable editor)的兴趣。虽然我们把awk定位于解决日常任务,但它很快被用户用到大项目之中。有些大项目需要一些设计之外的特性,所以1985年我们在最初版本的基础上开发了一个更强大的版本。

最重要的新特性是用户可以自定义函数了。另外还增强了动态正则表达式(dynamic regular expression)、文本替换和模式匹配函数;增加了一些内置函数和内置变量;添加了一些新的操作符和语句;支持多文件输入和命令行参数。错误管理也有所改进。第一章我只会用到原始版本的特性;后面章节的例子会涉及到一些新特性。

我们用的这个awk版本是Unix System V Release 3.1。这个版本的awk源代码可以从AT&T下的Unix工具软件发布系统上获得。⋯⋯

因为awk是在Unix下开发的,它的一些特性只在Unix下才能施展,有些我们的例子中也会提到。另外,有些Unix工具,比如sort,只有Unix版本。抛开这些限制,awk在大部分环境中都应用得很不错,包括MS-DOS。

当然,awk并不完美。它不够规整(“it has its share of irregularities, omissions, and just plain bad ideas”这句真不会翻),甚至有时还慢得令人发指。但同时它也能出色地满足各种需求。awk给了我们很大帮助,希望你也能同样受惠于它。

致谢

我们深深地受惠于那些对本书的草稿给出过评论和建议的朋友们。这里,我们要特别感谢Jon Bentley(译注:《编程珠玑》那位神作者?),他的激情多年来一直在赋予我们灵感。Jon贡献了很多awk使用、教学方面的想法、经验,甚至是代码。他非常仔细地审阅了多部手稿。还有Doug McIlroy,他无与伦比的天才极大地影响了我们,使我们从框架到内容都进行了很多修改。还有很多朋友对手稿给出了极富建设意义的评论,Susan Aho、Jaap Akkerhuis、Lorinda Cherry、Chris Fraser、Eric Grosse、Riccardo Gusella、Bob Herbst、Mark Kernighan、John Linderman、Bob Martin(译注:难道是Martin大神?)、Howard Moscovitz、Gerard Schmitt、Don Swartwout、Howard Trickey、Peter van Eijk、Chris Van Wyk、Mihalis Yannakakis。谢谢你们!


Alfred V. Aho

Brian W. Kernighan

Peter J. Weinberger

The AWK Programming Language 中文版 The AWK Programming Language (AWK 程序设计语言) 中文翻译, LaTeX 排版。 译者:wuzhouhui 立即下载

相关推荐

The_AWK_Programming_Language中文

AWK是一个优良的文本处理工具,Linux及Unix环境中现有的功能最强大的数据处理引擎之一。这种编程及数据操作语言(其名称得自于它的创始人阿尔佛雷德·艾侯、彼得·温伯格和布莱恩·柯林汉姓氏的首个字母)的最大功能取决于一个人所拥有的知识。

The AWK Programming Language

其中pattern:用于过滤出匹配的行(lines matched by any of the patterns)action:对匹配的行执行的动作Awk 自动扫描输入文件,将内容分割成行。由于输入、字段分割、存储管理、初始化等过程 都是内部完成的,因此相比于其他编程语言,awk 写出的程序通常都非常简短。

hao_wujing的专栏 1429

The AWK programming language(中文版)

这本书的作者就是AWK程序语言的设计者,所以其权威性毋庸置疑。值得注意的是这本 书的第二作者Brain W是神一样耳朵科学家,他是《The C programming language》的作者,Brain的《程序设计与实现》也是一本好书。 AWK的学习资料网上一搜一大片,其实只要静下心来把这本书中的代码敲一遍就可以无视其它的所有材料了。这本书只有电子版,很奇怪,这么好的一本书,国内的出版商怎么没有引入。总之,这是学习AWK必读的一本书,5颗星推荐。

The AWK Programming Language 序

序 很多人把大把的时间花在一些简单、机械的数据处理上——改改数据格式、看看是否规整、找找特定的条目、加总数字、打印报表,诸如此类的小事。这些重复枯燥的琐事本是程序语言的强项,但真要用C、Pascal这样的标准编程语言去解决却也有苦难言。 你需要一种能在寥寥数行之内解决这类问题的编程语言,awk就有此奇功。用awk编程就像在写规则说明:问,遇到这样的数据怎么办?答,如此这般。这“问”即为欲处理数

Pope 的废纸篓 3348

ibm sed和awk(中文高清版).pdf

ibm sed和awk(中文高清版),IBM技术网站上讲解了awk和sed工具的语法以及样例,学习awk和sed的好资料。

从零到一:3D-ResNet50在医学影像中的实战陷阱与避坑指南

本文深入探讨了3D-ResNet50在医学影像分类中的实战应用,重点解析了NIFTI数据预处理、小样本迁移学习陷阱及GPU显存优化等关键问题。通过分块加载、混合精度训练等技巧,有效解决了医学影像处理中的内存管理和性能挑战,为开发者提供了实用的避坑指南和优化策略。

weixin_29038345的博客 393

The AWK Programming Language学习笔记(二)Awk语言

一 概述 核心: 1)'没有模式只有动作语句' -->'每行都匹配' 2)'只有模式没有动作语句' -->默认动作语句是'print' (1.1)文件源 文件 --> 'countries' USSR 8649 275 Asia Canada 3852 25 North America China 3705 1032 Asia USA 3615 237 North America Brazil ..

wzj_110的博客 372

从零手写神经网络:用NumPy实现全连接网络与反向传播

神经网络本质上是可微分的函数复合体,其核心在于仿射变换与非线性激活的交替堆叠,以及基于链式法则的自动微分实现。理解前向传播的矩阵运算逻辑和反向传播的梯度流动机制,是掌握深度学习底层原理的关键路径。权重初始化(如He/Xavier)、激活函数选择(ReLU/Sigmoid)与数值稳定性处理(如1e-8防下溢)共同决定了训练的收敛性与鲁棒性。这些基础要素不仅支撑学术推导,更直接影响工业场景中的模型调试、FPGA部署及梯度异常定位。本文以纯NumPy实现三层全连接网络为载体,聚焦‘From Scratch’过程中

weixin_32495691的博客 287

AWK学习笔记汇总(The_AWK_Programming_Language)

因为毕设需要对文本进行处理,所以学习了在linux下的强大工具AWK 主要参考书籍The_AWK_Programming_Language 怕自己记不住,做好笔记,方便日后回顾,也欢迎大家讨论微笑 水平有限,难免有错,如有错误,欢迎讨论指正主要链接放下:2.Chapter 2 The AWK Language2.1Pattern2.2Action2.3User-Defined Function

星琳之梦的博客 850

深度剖析XY2-100与SL2-100协议:解锁激光打标核心技术密码

XY2-100和SL2-100是激光打标领域的两种核心控制协议。XY2-100协议采用串行通信,指令集简单,适合常规打标任务,具有成本优势;SL2-100协议支持更高速率(1Mbps以上),具备曲线插补等高级指令,在精密加工领域表现突出。两者的主要差异体现在数据传输(帧结构、速率)、指令集(功能、数量)、参数调节(范围、精度)和错误处理机制等方面。实际应用中,XY2-100适合简单图形的大批量生产,SL2-100更胜任复杂曲面的高精度加工。选择时需综合考虑打标需求、设备兼容性和成本因素,未来两种协议将持续优

远程部署调试 运行安装 项目调试 二次开发 项目技术新 持续迭代 部分源码免费分享 960

ZYNQ BRAM实现PS与PL数据交互

有时CPU需要与PL进行小批量的数据交换,可以通过BRAM模块,也就是Block RAM实现此要求。本章通过Zynq的GP Master接口读写PL端的BRAM,实现与PL的交互。在本实验中加入了自定义的FPGA程序,并利用AXI4总线进行配置,通知其何时读写BRAM。以下为本实验原理图,CPU通过AXI BRAM Controller读取BRAM数据,CPU仅配置自定义的PL BRAM Controller 的寄存器,不通过它读写数据。

baidu_34971492的博客 2283

The AWK Programming Language学习笔记(一)快速入门

一 先上个封面

wzj_110的博客 405

YOLO26涨点改进| CVPR 2026 | 独家创新首发、特征融合改进篇 | 引入 LFSB 差分双维注意融合模块,通过交替特征融合与分离策略,能够精准区分目标特征,顶会助力YOLO26有效涨点

本文提出LSFB差分双维注意融合模块,用于改进YOLO26目标检测模型。该模块通过融合-分离交替策略和差分注意力机制,有效提升模型在复杂场景下的特征分离能力,特别是在处理重叠物体或反射干扰时表现优异。LSFB采用双向投影、双维注意力计算和跨流减法算子,实现特征共享与独立提取的平衡。实验表明,该模块能显著减少特征混淆,提高检测精度和鲁棒性。文章还详细介绍了模块实现的核心代码、YAML配置文件修改方法以及三种改进方案,为YOLO26模型性能提升提供了创新解决方案。

Ai缝合怪、助力小伙伴高效发论文 329

AWK Programing Language | 史上最全 awk 一本通

AWK 语言是一种数据驱动的脚本语言,由一系列针对文本数据流的操作组成,可以直接在文件上运行,也可以作为管道的一部分使用,目的是提取或转换文本,例如生成格式化的报告。

aifeier的博客 1607

Redhawk: dynamic ir drop分析(Clock Buffer Clustering)

在dynamic分析中,ir drop问题多出现在三种情况下,缺power mesh,缺power switch,clock cell过于密集。 前两种情况通过选中具体instance查看min res path都比较容易分析出来,而且大部分问题都出现在channel里,这里不多做赘述。 clock cell过于密集这是观察结果,缺少报告支持,这里分享一下分析方法。 首先,选中压降超过signoff标准的instance,(Results->List of Worst Instance DVD中

m0_61544122的博客 5279

里海NX二次开发3000例-专栏目录

UDO(User Defined Object)是“用户自定义对象”。应用非常广,可以用UDO创建自定义特征,也可以对NX原有的特征添加一些特殊信息,这些信息会保存在部件中,以后可以查询。还可以实时追踪NX对象,例如做3D包容盒线框自动追踪实体,做2D矩形框自动追踪图纸尺寸值,这些在下面的例子都有介绍。读者可以自己编译下面的例子,体会理解UDO的用法。------里海 20230512序号内容​链接01使用UDO在所有实体上设置更新回调​链接02使用UDO生成跟踪实体的线框​链接03删除UDO​链接。

王牌飞行员_里海的博客 7723

《The AWK Programming Language》前言

前言 计算机用户花费大量的时间进行简单的,机械的数据操作--改变数据格式,核对它的有效性,找寻有特性的项目,求和,打印报告等等。所有这些工作都应该机械化。但是,每当有这样的任务,就要用C或者Pascal语言写一个特殊任务的程序真是一件令人讨厌的事。 AWK是一种编程语言,它使得利用很短的,常常是一两行的程序来完成这些任务成为可能。一段AWK程序就是一系列的模式和操作,它说明在输入数据中寻找

Chinamming的专栏 984

基于STM32L4XX、HAL库的ICP-10111压力传感器驱动程序设计

define ICP10111_CMD_MEAS_ULN 0x7866 // 超低噪声模式。#define ICP10111_CMD_MEAS_LP 0x609C // 低功耗模式。#define ICP10111_CMD_MEAS_LN 0x70DF // 低噪声模式。#define ICP10111_CMD_MEAS_N 0x6825 // 正常模式。ICP10111_MODE_LN, // 低噪声。// 等待测量完成(根据模式不同等待时间不同)

zhusl6688的博客 417

shell学习之awk篇

网上关于awk的博客说的也是够多的了,之所以再写有两点原因:1 大部分博文说的不够全面  2 作为自己系统学习shell的一个记载。     学习过程中看的是《The awk programming language》讲的非常详细,有兴趣的同学可以在这里下载。    0. 以下示例说明均以此数据作为依据 USSR 8649 275 Asia Canada

di00di的专栏 269

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

awk 实例

前面有一篇awk 的文章,但是例子太抽象,真正用到的时候想去照抄,发现抄来的完全用不了。完全背离了我写博客的原意。所以重新整理一篇,把我看《The AWK Programming Language》这本书上面的例子都摘录下来,下次码字的时候,能够copy-paste 过来就能跑不报错,真是应了高中语文老师的一句话:天下文章一大抄,看你会抄不会抄。awk 'pattern {action}' awk

专栏 594

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

上一篇: "undefined reference to" 问题解决方法(真心写得不错)
下一篇: 关于“广州市劳动保障网上业务大厅"登陆不支持chrome浏览器
usbdrivers
博客等级 码龄15年 26粉丝 57原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值