python爬虫 AttributeError: 'NoneType' object has no attribute 'children' 错误-优快云博客

本文链接：https://blog.youkuaiyun.com/sdmrxwang2011/article/details/104367048

在学习Python爬虫时遇到'NoneType'对象没有'children'属性的错误。错误源于'soup'变量未成功解析HTML页面。通过检查和调试getHTMLText(url)函数，发现并修正了单词拼写错误。修正后的代码能正确运行，实现了从指定URL抓取并打印大学排名信息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

今天看python爬虫的视频，然后按照视频上的内容编写代码，运行时出现了
运行程序后的错误提示：

     for tr in soup.find('tbody').children:

AttributeError: 'NoneType' object has no attribute 'children'

感谢博主：爱搬砖的小迷糊，的分享，让我很快找出了错误。

属性错误：‘NoneType’ 对象没有属性 ‘children’ ，这个错误提示告诉我们 ‘children’ 属性的对象 soup 是一个空类型，那就意味着soup = BeautifulSoup(html,‘html.parser’)中soup并没有得到解析出来的html页面，那就是说在调用getHTMLText(url)函数时这个函数并没有得到url链接对应的网页信息。所以错误可能出现在getHTMLText(url)函数中，然后仔细审查getHTMLText(url)函数中代码发现单词打错。

总之：这四个函数之间各有分工，但是又紧密相连，任何一个出现问题都可能导致其它函数报错，所以我们找错时不能只局限于报错的那一行代码

注意：找错时一定要用区域注释的方法来调试，找起来效率高很多。

调试过后能正确运行的代码：
import requests
import bs4
from bs4 import BeautifulSoup

def getHTMLText(url):
try:
r=requests.get(url,timeout=30)
r.raise_for_status()
r.encoding=r.apparent_encoding
return (r.text)
except:
return “”

def fillUnivList(ulist,html):
soup=BeautifulSoup(html,“html.parser”)
for tr in soup.find(“tbody”).children:
if isinstance(tr,bs4.element.Tag):
tds=tr(‘td’)
ulist.append([tds[0].string,tds[1].string,tds[2].string])
def printUnivList(ulist,num):
print("{:^10}\t{:10}\t{:^10}".format(“排名”,“学校名称”,“总分”))
for i in range(num):
u=ulist[i]
print("{:^10}\t{:10}\t{:^10}".format(u[0],u[1],u[2]))

def main():
uinfo=[]
url=“http://www.zuihaodaxue.cn/Greater_China_Ranking2019_0.html”
html=getHTMLText(url)
fillUnivList(uinfo,html)
printUnivList(uinfo,10)
main()