爬虫随笔
关注
分享
扫一扫
文章平均质量分 82
爬虫相关以及一些技术思考
小郎碎碎念
分享日常工作积累和读到的优秀文章
联系邮箱 zhenninglang@163.com
展开
-
通过 chatgpt 协助完成网站数据破解
chatgpt 可以用在 javascript 破解的两个方面1. 代码理解：对于一些难以读懂的 javascript 代码，可以让 gpt 辅助进行理解。有些可能是已经成熟的算法，chatgpt 可以识别出来2. 代码改写：将 javascript 代码改写为其他语言，例如 python 或 java，便于集成进业务代码中原创 2023-09-13 09:53:37 · 970 阅读 · 0 评论 -
Python 处理 JSON 数据只会 json.loads? 快来看看这两款工具
python 官方 json 处理库真的够了吗？跟随作者一步步分析和处理开发实战中遇到的一系列问题，带您逐步了解 demjson 和 python-jsonpath-rw 这两个实用第三方库。原创 2020-09-10 00:55:27 · 1250 阅读 · 0 评论 -
谈谈爬虫的昨天、今天和明天
本人接触爬虫及其相关技术已经有大概一年半的时间，这篇文章主要是写给想要从事这个行业的人，当然也欢迎同行和大牛的指正。这篇文章首先会 “简要” 介绍一下爬虫技术的历史；然后介绍我接触过的一些当前常用的网络内容爬取技术；最后写一些关于这个行业未来个人的看法原创 2020-08-13 00:07:39 · 2040 阅读 · 15 评论 -
【开源项目-爬虫】两个基于爬虫的项目: Kiwix & ArchiveBox
本文分享了两个基于爬虫的项目: Kiwix & ArchiveBox。这两个项目个人感觉想法都很棒，虽然完善程度不同，但都值得和大家分享~原创 2020-08-31 23:52:45 · 2798 阅读 · 0 评论