爬虫
shoujut
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
scrapy 和 requests.post() 请求 Content-Type为时multipart/form-data 传参方法
近日爬取数据时遇到Content-Type:multipart/form-data,踩了很多坑,不管怎样传参数都无果,下班来分享下解决方案import requestsfrom requests_toolbelt import MultipartEncoderurl = 'https://www.chengezhao.com/sys/cms/contentList.htm'headers = { 'referer': 'https://www.chengezhao.com/sys/cms/原创 2021-01-14 18:02:02 · 1519 阅读 · 1 评论 -
XX建设工程信息网爬取、乱码问题处理、http://www.tjconstruct.cn/Zbgg/Index/1?type=sgzb
1.直接上代码吧import requests,refrom requests.packages.urllib3.exceptions import InsecureRequestWarning# 禁用安全请求警告requests.packages.urllib3.disable_warnings(InsecureRequestWarning)# TODO http://www.tjconstruct.cn/Zbgg/Index/1?type=sgzburl = 'http://www.tj原创 2020-12-08 16:30:16 · 696 阅读 · 0 评论
分享