爬虫---国家食品药品监督管理总局

最新推荐文章于 2025-04-17 22:30:25 发布
转载 最新推荐文章于 2025-04-17 22:30:25 发布 · 3.1k 阅读 · 4 ·
CC 4.0 BY-SA版权
原文链接：http://www.cnblogs.com/MC-Curry/p/10643025.html
文章标签：

#爬虫 #python

本文介绍了一个使用Selenium实现网页自动化操作的实例，包括链接访问及文件下载等操作，并通过多线程提升效率。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

爬虫瑞数3案例：国家药品监督管理局药品审评中心，后缀MmEwMD
局外人LZ的博客
08-04 104
瑞数系列安全防护技术在版本迭代中不断升级优化，其中瑞数3与后续版本（瑞数4/5/6）在环境处理机制上存在显著差异。为帮助开发者更好地理解这些技术差异，本文将针对瑞数3与新版环境的处理逻辑进行专项解析。webEnv补环境和web端环境检测SpiderTools谷歌插件可以看到补环境时几乎没去浏览器控制台输出什么信息，就把瑞数6逆向环境补完。主要就是补的多了，当你从瑞数3到瑞数6环境补完，会发现瑞数校验的环境就那些，顺着该工具的日志提示直接就把环境补完了；
爬虫练习项目--化妆品生产许可信息管理系统服务平台
weixin_47249161的博客
02-20 6203
1.确定url 通过抓包工具可以发现，当我们刷新整个页面时，在抓包工具中并没有找到我们要爬取的数据包，由此确定，它们是ajax动态加载出来的。 注意：XHR里面抓到的包都是用ajax动态加载出来的，它们的链接不能从它们所在的整个页面的链接中直接得到，在请求头中可以得到他们的链接 分析出ajax意味着，我们需要在抓包工具中提取URL 通过分析我们可以得出：从首页的ajax中可以得到所有公司的唯一ID值。 在每个公司的AJax包中我们可以得出每个详情页面的相同部分。 1. http://scxk.nmpa.go
07.26爬虫request模块之药监局学习笔记
NTeasy_not的博客
07-26 692
### request模块之药监局 代码部分 #动态加载数据 #url基本一致只是id不一样 #详情页的也是动态加载出来的 #就意味着只要可以获取到id在将其带入到url中，但是首先怎么获得，其次怎么拼到一起 import json import requests if name ==“main”: #首先获取id date ={ ‘on’: ‘true’, ‘page’:‘1’, ‘pageSize’:‘15’, ‘productName’:’’, ‘conditionType’:‘1’, ‘ap.
python-js逆向国家医保服务平台超详细
最新发布
2401_87946050的博客
04-17 2258
我们找到源函数的位置找到复制下来即可。接着运行，会报以下错误o没有定义，所以我们到源代码中去找o的位置，发现就在上面不远，如图这种形式的数据格式基本上就能确定是webpace打包了，这里我简单说说解决步骤1.定位到 r = n("68b2")这一行2.刷新页面让断点停住3.进入n里面，里面是一个自执行方法4.不想麻烦就直接全扣下来(有7w多行代码)5.最后导出就行，方法如下。
爬虫小例--爬药监局（上）
john_ashley的博客
11-17 4293
”明月如霜，好风如水，清景无限 “ 文远最近也算是爬虫入门吧，相信后面会慢慢熟悉。 壹 直接上例子，爬取药监局的数据。目的是得到每家公司的详情数据，例： 具体网址：http://scxk.nmpa.gov.cn:81/xk/ 这是主页，下面详情信息： 贰 分析，通过网页检查发现，主网页上没有公司相关数据，观察XHR中的Ajax请求发现，公司信息都是动态数据（方便更新），点击发现每个公司 的详情信息通过ID号这个参数区别，那么可以确定思路是先得到每个公司的ID号，然后在通过ID对应每一个详细网站，同样右键
爬虫：requset药监局数据
weixin_55491232的博客
04-18 993
import json import requests url = 'http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.do' page = input('请输入查看药监局第几页的企业:') data = { 'method': 'getXkzsList', 'on': 'true', 'page': page, 'pageSize': '15', 'productName': '', 'conditi.
Python爬虫学习第二章-6-使用requests模块爬取国家药品监督管理总局中居于中国化妆品生产许可证相关数据
BreezeChasingDrizzle
10-21 1066
Python爬虫学习第二章-6-使用requests模块爬取国家药品监督管理总局中居于中国化妆品生产许可证相关数据   这一节是使用requests模块爬取国家药品监督管理总局中居于中国化妆品生产许可证相关数据   数据是动态加载出来的（network刷新界面后中看ALL->找特定的包->看response，可以复制公司的名字，ctrl+F检测response中是否有这个名字，没有的话则说明此页面肯定是动态加载出来的）,表示在首页中对应的企业信息数据是通过ajax动态请求到的。看下面几个url：
Python爬虫：第二章 requests模块基础 example6 爬取国家药品监督管理总局数据（8）
qq_47805483的博客
08-06 1621
example6: 爬取国家药品监督管理总局中基于中华人民共和国化妆品生产许可证相关数据 #----- 实战代码6：----- # 综合练习 # 需求：爬取国家药品监督管理总局中基于中华人民共和国化妆品生产许可证相关数据http://125.35.6.84:81/xk/ import requests import json from fake_useragent import UserAgent ua = UserAgent(use_cache_server=False,verify_ssl=False
【爬虫Practice3】爬取药监总局企业详情
lily_i的博客
12-11 1185
  思路：打开药监总局输入URL爬取的并不能获得全部信息，说明页面存在动态加载 由Ajax请求的 通过抓包查看。通过首页域名+id 可以获得企业详情页的信息 id可以通过首页获取到，验证刚才获得的URL看一下是否是动态加载 看抓包工具 查找数据发现URL得不到 也是动态加载的，多找几个类比一下 观察URL和参数。如何批量获取企业ID？在首页的数据中。 import requests import json from fake_useragent import UserAgent if __name__ =
【Python爬虫】国家药品监督管理总局中基于中华人民共和国化妆品生产许可证相关数据爬取
ZD_012的博客
10-13 3444
需求 爬取国家药品监督管理总局中基于中华人民共和国化妆品生产许可证相关数据。 代码 import requests import json if __name__ == '__main__': # 批量获取不同企业的id值 url = 'http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.do?method=getXkzsList' headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 1
药监局系统
02-23
这是医院和企业间的 系统架构，通过此系统，此系统可以使那些刚入门的初级程序员得到很大的提升
爬虫 爬取药监局公司信息.zip
01-22
爬虫 爬取药监局公司信息
基于网络爬虫爬取药源网药物数据python源码+项目说明（搭建药品数据库，含中成药和化学药品信息共计10万余条）.zip
04-10
【资源说明】 1、该资源包括项目的全部源码，下载可以直接使用！ 2、本项目适合作为计算机、数学、电子信息等专业的课程设计、期末大作业和毕设项目，作为参考资料学习借鉴。 3、本资源作为“参考资料”如果需要实现其他功能，需要能看懂代码，并且热爱钻研，自行调试。 基于网络爬虫爬取药源网药物数据python源码+项目说明（搭建药品数据库，含中成药和化学药品信息共计10万余条）.zip # Web-crawler 基于网络爬虫Scrapy框架及BeautifulSoup模块等爬取数据，基于正则表达式及Xpath进行解析。 调研药品数据网站，基于网络爬虫搭建药品数据库，含中成药和化学药品信息共计10万余条。 爬取国家食品药品监督管理局药品数据对药源网数据进行修正。 基于Selenium等工具应对反爬，爬取ICD-9等数据供研究使用。 ......
phonegap 环境搭建
03-12
配置成功的环境搭建过程，对于入门者是一个很好的指导，本作者是同事实际配好后，整理的文档，希望对你有用
python爬虫（国家药品监督总局化妆品生产许可证相关信息）+Ajax请求分析（动态加载数据）
qq_44026036的博客
02-10 7866
1：网址 http://125.35.6.84:81/xk/ 2：想要获取如下详情信息： 3：分析Ajax请求 首先确认是否请求当前URL会获取首页信息，如获取首页信息，会获得相应企业名称的超链接，获取超链接则可以获取相应详情信息。 可通过对当前URL发送请求进行验证。（笨办法） 还可以通过抓包工具进行验证。判断是和是Ajax请求 查看对当前URL请求的response响应 通过抓包工具【...
网络爬虫——药品总局相关数据获取（requests）
weixin_52089750的博客
01-23 968
import requests import json if __name__ == '__main__': url = 'http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.do?method=getXkzsList' headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gec.
爬虫案例之爬取国家药监局化妆品生产许可明细（爬取动态加载数据）
qq_43671197的博客
09-28 7821
一、实验目的 爬取国家药监局（化妆品生产许可信息管理系统服务平台 (nmpa.gov.cn)）化妆品生产明细（具体到每家企业的具体信息），当我们进入该网站首页时，发现其结构为每页15条的json类型数据。如图以下简称首页： 点开企业名称对应的超链接跳转到我们需要爬取的页面，以下简称详情页： 我们需要爬取详情页 上所有信息存为json格式到本地。 二、获取动态加载数据的URL 我们首先通过爬取首页信息验证是否可以通过爬取每条企业数据的超链...
python爬虫之动态加载获取药品监督管理局
qq_39649212的博客
08-20 5029
本次爬取使用request模块爬取国家药品监督管理局的数据并存入到Excel表格中 爬取目标网站 http://scxk.nmpa.gov.cn:81/xk/# 分析页面： 打开网页F12上下翻页可知页面数据都是通过ajax动态加载出来的数据，并且首页中的数据只包含了企业名称、许可证编号等信息，但不包含企业的详细信息，下图为首页页面。 若要得到企业的详细信息只能通过点击超链接查看，通过F12可以看出此处请求是通过企业id获取企业详细信息 爬取思路： 首先准备一个list集合用于存储所有企业的id，第一次
scxk 药监网爬虫实验
琼华
05-13 1919
在学习爬虫期间，有讲到去爬取http://scxk.nmpa.gov.cn:81/xk内容，但是由于最新的改版，已经很难了，添加了加密的过程，导致一直爬取不到数据 http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.do?hKHnQfLv=5RzcDnoZGWKeUOstQcpwLAZnI_YXd8U22RSxBylWTxaaJuoHxQ0mZT6eNeV4UWLZZ84VMQtGsFW0JXDkNYFzgx.1MTLPtQBTJTdOZmeia2N
Python爬虫xpath-helper谷歌插件使用教程
为了高效完成这些任务，编写爬虫程序变得非常普遍。Python作为一种简单易学、功能强大的编程语言，自然成为了爬虫开发者的首选。而xpath，作为XML路径语言的一种，因其能够精确地定位XML文档中的信息节点，也被广泛...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值