这篇博客介绍了如何使用Python进行学术搜索爬虫，特别是针对加密的visit函数。通过分析参数生成逻辑，利用execjs库在Python中执行JS代码来解密请求链接，从而实现反爬策略的突破。文章详细讲解了strdecode函数的base64编码过程，并提供了使用execjs库的示例。最后，展示了运行结果并提供了完整代码的下载链接。
学术搜索
学习理论的知识少不了去检索文献，好多文献为你的实操提供了合理的支撑，我所在的大学内网默认是有知网账户的，非常NICE
今天要完成的网站是 http://ac.scmor.com/
Google学术搜索是一个文献检索服务，目前主要是提供维普资讯、万方数据等几个学术文献资源库的检索服务。通过Google学术搜索只能够查找到这些学术资料的“报告、摘要及引用内容… 来源百度百科
我们的目标
获取现在访问的链接地址，当你使用谷歌浏览器的开发者工具抓取的时候，得到的是一个js加密函数
注意看上图2的位置，接下来，我们采用上篇博客的方式，去尝试获取visit函数的具体内容
我们要在所有的请求链接中去检索一个visit方法，注意步骤
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
