AWVS批量导入网站(刷漏洞入门)

今天整了一天这个AWVS批量扫描脚本，主要是下了好几个版本的AWVS，都不稳定，一次次删除又一次次安装。

做这件事儿目的就是为了批量刷漏洞，不过弄好之后又不打算刷漏洞了，不太喜欢无脑刷漏洞，没什么意义，并且现在水平也不是很高，先踏实学习吧。

这个文章目的就是记录一下整体的思路。

要想较为高效的刷漏洞(这里指的是和菜鸟相比)，需要两步，一 ： 获取大量的网页链接 ； 二 ： 误报率低，比较牛逼一点的漏洞扫描工具

一 ：获取大量的网页链接

这个有三种方法：

① fofa 这个有前提 ，必须得有 fofa 的VIP会员，直接下载工具 输入 账号 和 key 即可批量导，软件直接在 github 下载就行

软件下载链接 ： https://github.com/tangxiaofeng7/Fofa-collect/releases/tag/V1.0

②利用crawlergo工具，

这个工具 功能就是能爬取 你导入好的txt文件中 每个链接中 源码的 链接

这个工具的原理就是爬虫，开启多个chrom一起爬，（这个chrom不是咱们用的那个谷歌浏览器，只是名字差不多）

这个工具如果和 xray 联动 ，那就比较完美 ，这个工具可以设置代理 ，流量先通过 xray 最后在放出去，实现了被动扫描。具体详情可以看 我写的文章 在分类中的 xray和crawlergo联动

https://github.com/0Kee-Team/crawlergo

这个是crawlergo在github中的下载链接，里面也有 crawlergo 使用说明

③ 这种方法就比较普通了，就是使用 layer 子域名挖掘机去一个个挖掘，不太推荐这种方法，layer扫出来的网站质量一般

二 ： 选一款牛批的漏洞扫描工具

常见的漏洞扫描工具无非就是 AWVS ,appscan ,OWAsp ,xray 等等 ，因为以前用awvs感觉不错，所以这次也选的 awvs (没想到坑死我。。。)

网上许多的 awvs破解版都不太稳定，要不就是没 api，要不就是使会儿就不行了，现在是2020.7.24 实测下面这款比较不错，有需要的可以下载

https://www.sqlsec.com/2020/04/awvs.html

下载完了之后按照步骤破解安装就行

AWVS这里有个小缺点就是只支持批量导入 csv 文件，这就有点xx，几百上千个网站，我总不能一个个导入，于是就在网上找了半天批量导入的脚本，还好，试了几个之后就找到了个合适的，

直接把文章链接放出来 https://www.imzzj.com/2020/05/18/shi-yong-python-gei-awvs13-pi-liang-tian-jia-ren-wu.html 顺便感谢下博主，给了我很大帮助！！

这里需要提示一点的就是 使用 pycharm打开的时候，import 导入包儿那块儿会报一些错误，也没明白是啥情况，反正我给改对了，直接贴出来前部分的代码

import requests
import json
import  requests.packages
import  urllib3.packages
from urllib3.exceptions import InsecureRequestWarning
# from requests.packages.urllib3.exceptions import InsecureRequestWarning
# requests.packages.urllib3.disable_warnings(InsecureRequestWarning)
urllib3.disable_warnings(InsecureRequestWarning)

apikey = '1986ad8c0a5b3df4d7028dc51b15d120bf015197e'
# 去 AWVS 配置文件里面  有个 API KEY  复制填进去就行
apikey = str(apikey)
headers = {
   'Content-Type': 'application/json',"X-Auth": apikey}


def addTask(url,target):
    try:
        url = ''.join