爬虫学习系列(六)--bs4 数据解析

bs4数据解析原理:
– 实例化一个BeautifulSoup对象,并且将页面数据源码数据加载到该对象中
– 通过调用BeautifulSoup对象中的相关的属性或者方法进行标签定位和数据提取
环境安装:
– pip install bs4
– pip install lxml
如何实例化BeautifulSoup对象:
– from bs4 import BeautifulSoup
– 对象实例化:
– 1 将本地的html文档中的数据加载到该对象中

fp = open("./jay.html",'r',encoding="utf-8")
Soup = BeautifulSoup(fp,'lxml')
 	   		-- 2 将互联网上获取的页面源码加载到该对象中
page_text = requests.text
Soup = BeautifulSoup(page_text,'lxml')
 	--   	提供的用于数据解析的方法和属性	    
 			-- Soup.tagName  返回的是文档中第一次出现的tagName
 			-- Soup.find           find(“tagName”)等同于soup.div
 						--  属性定位:
print(soup.find("div",class_/id/其他属性= "XXXXX")) 

			--  soup.find_all(“tagName”)      返回的是所有的符合要求的标签(列表)
			--  soup.select ("某种选择器(id class 标签)”):返回的是一个列表
					  其中>表示的是一个层级。 空格表示的是多个层级。
	-- 获取标签之间的文本数据:
			-- soup.a.text/string/get_text()
			-- text/get_text(): 可以获取某一标签下的所有的文本内容
			-- string: 只获取标签下的直系文本内容
	 -- 获取标签中属性值:
	 		--  soup.a["href"] 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

gm0012

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值