shell中使用SQL实现查询

本文介绍了一种使用Shell脚本处理文本文件的方法,包括格式化、排序、去重等步骤,并通过查询数据库获取地理位置信息,最后将处理结果合并到CSV文件中。此过程涉及文本处理技巧及SQL查询。

 先把文本进行格式处理,然后以空格为分隔符,取第二个空格后的字串,排序,去重,再降序排列,取前5个

 

arr=($(cat 0100055F_Detail.txt|sed -e '/:/d'|awk -F ' ' '{print$2}'|sort|uniq -c|sort -nr|head -5|awk '{print $2}'))

len=${#arr[@]}  获取数组长度

 

 

 

 

for((i=0;i<$len;i++))

do

echo ${arr[$i]}

mysql -uroot -p123456 -e "select location from IPLocation.IPLocation where IP_address='${arr[$i]}'"|sed 's//t/,/g' >> table.csv   执行查询:-u后是用户名,-p后事密码,-e表示执行;

 

 

done

 

cat table.csv|sed -e '/location/d'>table1.csv

paste -d ',' result.csv table1.csv >last.csv 两个文件按列合并,并且两文件的结合列中用逗号分隔。

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值