python新发地菜价提取

Zionnnnnnnn

已于 2022-10-08 17:52:59 修改

阅读量735

点赞数 1

文章标签： python 开发语言

于 2022-09-28 17:28:34 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_43453421/article/details/127093388

版权

很早以前新发地的菜价网页还是静态的，最近一看发现有挺大变化，变成动态的了，而且URL在翻页的时候都不变化了

每翻一页 current 的数字就是对应的页数，还是POST请求，引入多线程加快速度

# -*- coding: utf-8 -*-
'''
# @Author: Zion
# @IDE:  PyCharm
# @Date: 2022/9/28 16:17
'''
import json
import requests
import csv
# 引入线程池
from concurrent.futures import ThreadPoolExecutor

f = open('新发地菜价.csv', mode='w', newline="", encoding='utf-8')
csvwriter = csv.writer(f)


# csvwriter.writerow(["一级分类", "二级分类&#