- 博客(4)
- 收藏
- 关注
RSS订阅原创 python 爬虫 使用xpath模块爬取猪八戒网站信息
python 爬虫 使用xpath模块爬取猪八戒网站信息# coding:utf-8#1.拿到页面源代码#2.提取和解析数据import requestsfrom lxml import etreeimport csvurl = "https://qingdao.zbj.com/search/f/?type=new&kw=saas"resp=requests.get(url)# print(resp.text)html=etree.HTML(resp.text)f = (ope
2021-04-09 21:27:37
1941
2
原创 Python bs4的基本使用，爬北京市场菜价
Python bs4的基本使用，爬北京市场菜价# coding:utf-8from bs4 import BeautifulSoupimport requestsimport csv#1.拿到页面源代码#2.使用bs4进行解析，拿到数据url = 'http://www.xinfadi.com.cn/'resp=requests.get(url)resp.encoding='utf-8'f = (open("xfd_data.csv", mode="w"))csvwriter = cs
2021-04-08 16:55:48
207
原创 Python爬取优美图库的图片并下载到img文件夹中
Python爬取优美图库的图片并下载到img文件夹中# coding:utf-8# 1.拿到主页面的源代码,然后提取到子页面的链接地址 href# 2.通过href拿到子页面内容，从子页面中找到图片的下载地址 img->src# 3.下载图片import requestsfrom bs4 import BeautifulSoupimport timeurl = "https://www.umei.cc/bizhitupian/weimeibizhi/"resp = requests
2021-04-08 16:54:18
741
原创 ＜新手＞python爬取豆瓣top250的名字,年代,评分,评价
运行后 导出到data.csv文件内看着教程写的，有很多地方还需要优化，运用了re模块和requests模块# coding:utf-8# 1.首先拿到页面源代码# 2.通过 re模块 来进一步提取信息import requestsimport reimport csv # 数据分析for i in range(0, 10): url = "https://movie.douban.com/top250?start="+str(i*25) ua = { "
2021-04-07 22:53:10
214
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人