- 博客(11)
- 收藏
- 关注
RSS订阅原创 结构化数据提取-json
json是一种轻量级的数据交换格式，它使得人们很容易的进行阅读和编写，同时也方便了机器进行解析和生成，适用于进行数据交互的场景，比如网站前端与后端之间的数据交互。json。
2025-02-05 14:09:31
311
原创 python爬虫之iter_content方法
如果下载一个较大的资源，例如一个视频，可能需要的下载时间较长，在这个较长的下载过程中程序是不能做别的事情的（当然可以使用多任务来解决），如果在不是多任务的情况下，想要知道下载的进度，此时就可以通过类似迭代的方式下载部分资源。在获取数据时，设置属性。
2025-01-15 16:39:43
358
原创 Python爬虫：轻松拿捏网络图片与视频下载
logo在现今数字化世界中，网络就如同一座深藏丰富信息的宝矿，Python爬虫则如同我们的金手指，引导我们挖掘出其中的宝藏。接下来，我们将揭开Python爬虫的神秘面纱，深入探讨如何使用它来实现这个操作。
2025-01-09 16:03:00
410
原创 使用requests发送网络请求，轻松实现网络探索
●response.request.headers.get('cookies') 响应对应请求的cookie。●response.cookies 响应的cookie（经过了set-cookie动作）●response.request.headers 响应对应的请求头。●response.status_code 响应状态码。●response.text 响应体str类型。●response.headers 响应头。●response.url请求的URL。向百度首页发送请求，获取百度首页数据。
2025-01-07 16:01:07
478
原创 requests库的安装与使用，让你轻松进行网络请求
●优雅的 key/value Cookie。作用：发送网络请求，返回响应数据。●Keep-Alive & 连接池。●带持久Cookie的会话。●基本/摘要式的身份认证。●HTTP(S)代理支持。●浏览器式的SSL认证。●Unicode响应体。●国际化域名和URL。●支持 .netrc。
2025-01-07 14:54:11
348
原创 字符串与编码：解锁数字通信的秘密
字符是各种文字和符号的总称，包括国家文字、标点符号、图形符号、数字等等。注意：编码方式必须和解码方式一样，否则就会出现乱码问题。编码，那么就必须使用。
2025-01-07 13:59:18
315
原创 一文读懂：HTTP如何进化为更安全的HTTPS协议
目前大部分网站是基于HTTP与HTTPS进行网络交互的，在爬虫程序中也是发送网络协议来获取对应的网站信息，所以还是有必要了解网络协议。HTTP。
2025-01-06 22:10:40
2568
原创 1.2.爬虫流程以及案例演示
像这种网站的资源都是动态加载过来的，所以需要善于利用浏览器开发者工具进行网络抓包。标签中的，例如百度图片。但是斗鱼网站进过分析之后我们发现，图片并不在。数据中包含视频的播放地址，位于当前。根据浏览器抓包工具获取对应的评论。在一般的网站中，图片地址都是在。数据中包含了主播封面图片地址。要求：获取抖音原视频地址。根据抓包分析出当前视频的。要求：获取商家评论信息。
2025-01-06 20:37:06
913
原创 “掌握爬虫，掌握互联网脉搏 —— 程序员的进阶之路”
网络爬虫（又被称为网页蜘蛛，网络机器人）就是模拟浏览器发送网络请求，接收请求响应，一种按照一定的规则，自动地抓取互联网信息的程序。原则上，只要是浏览器(客户端)能做的事情，爬虫都能够做。
2025-01-06 19:14:33
585
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人