本文记录了一位程序员利用Python Scrapy框架，帮助朋友从食品安全信息查询平台抓取饲料添加剂数据的过程。通过POST请求接口获取HTML格式数据，并使用XPath进行提取，最终将数据保存到CSV文件。同时，文章提到了控制爬虫并发数和参与技术社群的邀请。
作为一个程序员，经常接到一些实体行业朋友提出的奇妙需求，例如本博客，一个饲料添加剂行业的朋友，需要一点点资料，让我给他弄一份。
部分数据未公开，博客中仅公开部分数据。
本文由于数据请求方法是 POST ，恰好可以和 scrapy 学习相匹配
目标站点分析
本次要采集的站点是 食品安全信息查询平台-食安通(食品安全网)，该页面数据如下所示。
经过测试得到的数据请求接口及参数如下：
# 请求地址
http://www.eshian.com/sat
订阅专栏 解锁全文
扫一扫
评论 3
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
