
python
文章平均质量分 82
陈天在睡觉
这个作者很懒,什么都没留下…
展开
-
python爬虫DrissionPage的使用
DrissionPage是一个用于自动化Web浏览器操作的工具,它结合了浏览器自动化与数据抓取的功能。这个工具旨在提供一种简单易用且功能强大的方式来实现网页自动化任务,比如表单提交、页面导航、元素点击等操作,同时也支持从网页中提取数据。原创 2025-03-23 15:36:40 · 548 阅读 · 0 评论 -
python爬虫selenium和ddddocr使用
selenium实际上是web自动化测试工具,能够通过代码完全模拟人使用浏览器自动访问目标站点并操作来进行web测试。通过python+selenium结合来实现爬虫十分巧妙。由于是模拟人的点击来操作,所以实际上被反爬的概率将大大降低。selenium能够执行页面上的js,对于js渲染的数据和模拟登陆处理起来非常容易。原创 2023-10-29 22:13:19 · 2326 阅读 · 0 评论 -
python爬虫request和BeautifulSoup使用
通过观察第二页的路径,我们发现在点击第二页时系统会传一个start的属性,这个属性除以25在加1就是我们需要的页数,反过来就是 (页数-1)*25 = start。首先我们发现,all_titls其实是一个数组,所以我们可以遍历他,这样就可以得到每一个span元素,通过string的属性就可以得到span标签中间的内容。我们虽然找到了span标签中,class为title的元素,但我们不需要span标签中的内容,所以我们需要对他进行处理。简单的说,我们可以拿他来解析html页面,来获取html的元素。原创 2023-10-28 23:00:00 · 4583 阅读 · 0 评论 -
Anaconda下载和安装
1)包含conda:conda是一个环境管理器,其功能依靠conda包来实现,该环境管理器与pip类似。2)安装大量工具包:Anaconda会自动安装一个基本的python,该python的版本Anaconda的版本有关。该python下已经装好了一大堆工具包,这对于科学分析计算是一大便利,你愿意费时耗力使用pip一个个包去装吗?原创 2023-10-28 22:59:06 · 2004 阅读 · 0 评论