用awk反转URL中的HOST部分

最新推荐文章于 2022-05-10 22:37:25 发布

victorunique

最新推荐文章于 2022-05-10 22:37:25 发布

阅读量746

点赞数

分类专栏： Linux 文章标签： url

本文链接：https://blog.youkuaiyun.com/victorunique/article/details/6367431

版权

Linux 专栏收录该内容

14 篇文章

订阅专栏

awk -F'/' '{if($3!=""){printf("http://");num=split($3,arr,".");for(i=num;i>1;i--)printf("%s.",arr[i]);printf("%s",arr[1]);for(j=4;j<=NF;j++)printf("/%s",$j);printf("/n")}}'

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

victorunique

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

50个最常用的Unix/Linux命令

blotemj.blog.youkuaiyun.com

07-18

237

50个最常用的Unix/Linux命令这篇文章中每个命令都有一些简单的示例说明它的用法，对于想学习Unix/Linux的人，这些命令基本上都是需要掌握的： tar grep find ssh sed awk vim diff ...

使用Linux部署java、tomcat和迁移数据库

../

02-26

922

Linux ## 什么是Linux 1. Linux 是一款类Unix的操作系统。 2. Linux 使用非常广泛，从Android 到云计算无所不在。 ## Linux 命令 1. 适合远程管理服务器 2. 资源占用低 ## Linux命令语法命令 -选项参数1 参数2 参数3 ### 列文件夹的内容 ls -al / -a 显示...

参与评论您还未登录，请先登录后发表或查看评论

awk实现url解码

12-14

boa-0.94.13：CGI中文问题配套代码

linux--awk url拼接

起点的专刊

05-16

1885

刚刚在工作过程中碰到一个小问题，后来朋友给了提示，解决出来了！在这里分享一下问题描述： 20180208/288235490/174_align_1.jpg 264 285 536 176 26 1 1 1 1 20180208/288235490/153_align_1.jpg 386 402 307 349 25 1 1 1 1 20180208/288235490/484_...

awk处理带参数的url

atzqtzq的博客

11-01

383

使用awk取日志:awk -F '&' '/partner=20003274/ {print $5}' 2017-10-31/sendLog.log |uniq >> sendLog/sendLog_9_10.log 使用sed替换不需要的字符:sed -i 's/sysnumber=//p' 2017-09-01.log ...

日志分析取出访问最多的IP，URL，以及五分钟内的访问流量

weixin_34007879的博客

05-06

591

日志分析！对最近五分钟的日志进行分析，取出访问最多的IP，URL，以及五分钟内的访问流量#!/bin/sh name=`cat/etc/salt/minion|grep"^id"|awk'{print$2}'` ipaddr=`/sbin/ifconfig|grep"inetaddr"|egrep-v"10\.|127\."|awk-...

linux怎么破解url过滤,如何通过awk去截取网上下载的url数据

weixin_39827304的博客

05-25

225

afaffsafafa 于 2015-01-23 21:04:33发表:RAKsmart分享站群服务器操作具体手法做站群要注意1、域名现在的站群的域名上的规律显而易见，注册时间都在两三天内，大多数域名都是廉价的info域名，因此，以后百度势必会对这种域名作出判断，如果以前想做站群，可以试着从现在就开始注册域名，让站群的域名注册时间分开一些，一段时期内注册一些，而且尽量少用info域名，现在的in...

运维面试题

热门推荐

weixin_42690304的博客

09-18

2万+

运维面试题 NETWORK 1 请描述TCP/IP协议中主机与主机之间通信的三要素参考答案 IP地址（IP address）子网掩码（subnet mask） IP路由（IP router） 2 请描述IP地址的分类及每一类的范围参考答案 A类1-26 B类128-191 C类192-223 D类224-239组播(多播) E类240-254科研 3 请描述A、B...

测试人生 | 从外包到测试开发，薪资一年翻三倍，连自己都不敢信

hogwarts_2022的博客

04-25

695

原文链接本文为霍格沃兹测试学院优秀学员学习心得与面试经验分享，进阶学习文末加群！本人本科就读于某普通院校（很普通的那种技术示范学院），毕业后懵懂的加入了软件测试这个行业，至今有三年工作经验。通过在霍格沃兹测试学院的这段学习经历，我的职业角色完成了从功能测试到外包测试，再到测试开发的转变，并顺利拿下某互联网企业测试开发岗位Offer，年薪35W+（跳槽两次，薪资一年内翻了近三倍）！这里特别感谢各位老师和同学的帮助，也分享下自己的一点学习心得和成长经验。吃过手工测试的苦，才懂测试开发的甜我之前主要在两

linux 解析url命令,linux下grep分析apache日志的命令

weixin_33929779的博客

04-29

260

linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心，与之前的DOS命令类似。那么你知道linux下grep分析apache日志的命令么?接下来是小编为大家收集的linux下grep分析apache日志的命令，欢迎大家阅读：linux下grep分析apache日志的命令...

封装一个提取url参数的小方法

loushengyue

12-17

1984

假如当你需要从这样一个http://www.loushengyue.com/test_好好.html?id=8&name=loushengyue&age=18&sex=男#box URL中提取相关参数（比如：id,name）时，是不是想到用正则法split(/\?|\&/g) 分割url的方式提取，然后版本更新需要增加参数时，也许你会很苦恼，因为bug来了，为了尽可能的减少bug，我们不妨来封装一

运用awk提取日志文件中的IP地址

kid00013的博客

05-10

2048

在我们的日常工作中，可能会遇到各种不同的问题，有来自内部，有的来自外部。以Nginx服务为例，服务上线之后可能会遭受非法的流量攻击，我们在配置Nginx服务时可以通过Nginx.conf配置文件中的http模块，来过滤那些高频访问服务的IP地址，将其输出到access.log文件中。但是日志中的IP地址众多，我们该如何根据需要来提取这些IP地址呢，下面我就介绍一下使用awk提取IP地址的方法需求：统计出日志文件中503次数最多的前三个 IP 首先，我们想要提取日志文件中的IP地址，就要知道

Linux 抓取网页实例（shell+awk）

yuanlanjun

06-05

1019

上一篇博客讲了Linux抓取网页的方式，有curl和wget两种方式，这篇将重点讲Linux抓取网页的实例——抓取google play全球12国的游戏TOP排名要抓取google play游戏排名网页，首先需要分析网页的特点和规律： 1、google play游戏排名网页，是一个就“总-分”形式，即一页网址显示若干排名（如24个），有若干个这样的网页组成全部游戏的总排名 2、每页网址中，点击每...

Awk使用及网站日志分析

Tao_cuichen的博客

04-21

1万+

Awk使用及网站日志分析 Awk简介概述 awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk。awk程序的报告生成能力

shell获取URL中协议、域名、端口和Path

The Big Data Way

03-02

2817

获取协议 echo "http://www.baidu.com:80/ABCD/a.txt" | awk -F':' '{print $1}'# 输出http 获取域名 echo "http://www.baidu.com:80/ABCD/a.txt" | awk -F'[/:]' '{print $4}'# 输出：www.baidu.com 获取端口 echo "http://...

linux中字段截取、替换等awk及sub/gsub使用

1024的博客

09-26

1万+

Linux中字段截取、替换，awk结合sub/gsub以及sed等

解析URL

点滴在心

08-18

2844

简介在github有轮子http-parser解析器,小的就不再造轮子了，哈哈（造这个轮子真不是一时半会的事）。目前该解析器用于nodejs的http解析，另还有大家熟知的tcpflow 以及 libtnet都以他作为引擎。 http-parser地址：http-parserhttp-parser是一个用C代码编写的HTTP消息解析器。可以解析HTTP请求或者回应消息。这个解析器常常在高性能的H