小猪短租网多个价格的查找,requests库,o( ̄ヘ ̄o#)bs4库的简单使用

import requests
#导入requests库,起到访问作用
# import random
#这个库是随机选择作用,这个爬虫先不用
from fake_useragent import UserAgent
#导入请求头库,构造随机请求头
from bs4 import BeautifulSoup
#导入bs4库搜索内容,解析requesets请求的网页
headers={
    'User-Agent':UserAgent().chrome
}
#构造随机请求头
url = 'http://bj.xiaozhu.com/'
#访问的网站网址
res = requests.get(url,headers=headers)
#请求网站网页
soup = BeautifulSoup(res.text,'html.parser')
#定义soup,然后解析网站网页
prices_list =soup.findAll('span',attrs={'class':'result_price'})
for prices in prices_list:
 print((prices.text))
print('--------------------------------------')
prices1 =soup.select('#page_list > ul > li > div.result_btm_con.lodgeunitname > span.result_price > i')
for prices2 in prices1:
 print(prices2.text)

一个是通过findall方法,一个是通过select方法查找,两种方法查找单一页面的价格,select方法是从谷歌浏览器鼠标选中要查找的内容直接右键copy 里面有个copy selector点击完了,直接复制上的,在编译器里直接ctrl +v 爬虫是什么就是懒人做的事,不是贬义而是,寻找快捷的查找方法的事情,爬虫就是干这事的。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值