<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[Dadaw1的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/Dadaw1</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; Dadaw1]]></copyright><item><title><![CDATA[Python高阶爬虫实战分析]]></title><link>https://blog.youkuaiyun.com/Dadaw1/article/details/135850785</link><guid>https://blog.youkuaiyun.com/Dadaw1/article/details/135850785</guid><author>Dadaw1</author><pubDate>Thu, 25 Jan 2024 18:16:26 +0800</pubDate><description><![CDATA[常见的反爬技术，楼主知道的有上面所述的分析请求，还有验证码技术。说爬虫一定要先说爬取内容的方法，python有这么几个支持爬虫的库，一个是urllib和它的后续版本库，这个库做爬取的时候生成的中继对象是比较多的，楼主也记不大住都有什么，而且这个库的使用在楼主看来有些过时了。如果网页地址有规律，那么构造url用个循环函数就好，对于网页地址中包含随机码的时候，通常就是先爬取根页面，获取到所有想爬取的子页面url，把这些url放进一个url池（项目小是一维的列表，项目大的时候可能会是高维的列表）里，循环爬取。]]></description><category></category></item><item><title><![CDATA[python爬取天气数据的实例详解]]></title><link>https://blog.youkuaiyun.com/Dadaw1/article/details/135598639</link><guid>https://blog.youkuaiyun.com/Dadaw1/article/details/135598639</guid><author>Dadaw1</author><pubDate>Mon, 15 Jan 2024 12:59:47 +0800</pubDate><description><![CDATA[div_tatall = soup.find("div",class_="conMidtab") #find() 找符合要求的第一个元素。tables = div_tatall.find_all("table") #find_all() 找到符合要求的所有元素的列表。inf = day.find_all('p') # 遍历li下面的p标签 有多个p需要使用find_all 而不是find。temhigh = inf[1].find('span').string # 最高气温。]]></description><category></category></item><item><title><![CDATA[Python爬虫案例之爬取二手房源数据]]></title><link>https://blog.youkuaiyun.com/Dadaw1/article/details/135586254</link><guid>https://blog.youkuaiyun.com/Dadaw1/article/details/135586254</guid><author>Dadaw1</author><pubDate>Sun, 14 Jan 2024 18:12:52 +0800</pubDate><description><![CDATA[house_area = selector.css('.content li:nth-child(3)::text').get().replace('㎡', '')  # 面积。sub_info = selector.css('.type .subInfo::text').get().split('/')[-1]  # 装修。date = selector.css('.area .subInfo::text').get().replace('年建', '')  # 年份。]]></description><category></category></item><item><title><![CDATA[用python语言爬取虎牙美女主播封面]]></title><link>https://blog.youkuaiyun.com/Dadaw1/article/details/135574564</link><guid>https://blog.youkuaiyun.com/Dadaw1/article/details/135574564</guid><author>Dadaw1</author><pubDate>Sat, 13 Jan 2024 19:41:25 +0800</pubDate><description><![CDATA[创建一个变量来存放requests.get 获取的文本 ，并解析html网页。print("成功"%name)我们需要先建立网页链接，导入模块库。获取图片练级，大图链接，图片名字。保存图片地址，使用绝对路径。]]></description><category></category></item></channel></rss>