GreasyFork的插件源码爬取

最新推荐文章于 2025-06-03 21:30:27 发布

Pragmatism0220

最新推荐文章于 2025-06-03 21:30:27 发布

阅读量2k

点赞数

分类专栏： python 文章标签： python

本文链接：https://blog.youkuaiyun.com/Pragmatism_3568/article/details/105117865

版权

python 专栏收录该内容

10 篇文章

订阅专栏

今天想看一个插件的源码，但是网页打开了好几次都崩溃了，估计是因为源码太长了，然后GreasyFork的前端没有做优化。所以只能把源码爬下来再看。所以顺手写了一个爬取GreasyFork的插件源码的脚本（Python3）。

话不多说，上代码：

#-*- coding: utf-8 -*
import requests
from lxml import etree
url = '代码页的网址'
r = requests.get(url, headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.117 Safari/537.36'})
html = etree.HTML(r.text)
result = html.xpath('//*[@id="script-content"]/pre/text()')
print(result[0])
with open('save.js', 'w', encoding='utf-8') as f:
    f.writelines(result[0])