网络爬虫学习日志（二）

最新推荐文章于 2025-06-23 20:27:57 发布

原创最新推荐文章于 2025-06-23 20:27:57 发布 · 309 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#爬虫

爬虫专栏收录该内容

6 篇文章

订阅专栏

本文通过使用beautifulsoup和xpath技术，详细展示了如何从丁香园论坛抓取特定主题的回复内容。通过实际代码演示，读者可以学习到如何解析网页结构，定位并提取所需信息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Task2（2天）

2.1 学习beautifulsoup

学习beautifulsoup，并使用beautifulsoup提取内容。
使用beautifulsoup提取丁香园论坛的回复内容。
丁香园直通点：http://www.dxy.cn/bbs/thread/626626#626626 。
参考资料：https://blog.youkuaiyun.com/wwq114/article/details/88085875

2.2学习xpath

学习xpath，使用lxml+xpath提取内容。
使用xpath提取丁香园论坛的回复内容。
丁香园直通点：http://www.dxy.cn/bbs/thread/626626#626626 。
参考资料：https://blog.youkuaiyun.com/naonao77/article/details/88129994

2.1：

import requests
from bs4 import BeautifulSoup as bs
headers={'User-Agent':'Mozilla/5.0 (Windows NT 6.1;Win64;x64) AppleWebKit/537.36 (KHTML,like Gecko) Chrome/55.0.2883.87 Safari/537.36'}
resp=requests.get('http://www.dxy.cn/bbs/thread/626626#626626',headers=headers)
print(resp.status_code)
def getitem(html):
    soup=bs(html,'lxml')
    return soup.find_all('td',class_='postbody')
html=resp.text
item=getitem(html)
for i in range(len(item)):
    print("--**--"*5)
    print(item[i].text.strip())

2.2

import requests
from lxml import etree
headers={'User-Agent':'Mozilla/5.0 (Windows NT 6.1;Win64;x64) AppleWebKit/537.36 (KHTML,like Gecko) Chrome/55.0.2883.87 Safari/537.36'}
resp=requests.get('http://www.dxy.cn/bbs/thread/626626#626626',headers=headers)
print(resp.status_code)
def getitem(html):
    html=etree.HTML(html)
    return html.xpath('//td[@class="postbody"]//text()')
html=resp.text
item=getitem(html)
for i in range(len(item)):
    print("--**--"*5)
    print(item[i].strip())

结果：

html=resp.text

item=getitem(html)

for i in range(len(item)):

    print("--**--"*5)

    print(item[i].strip())

--**----**----**----**----**--
我遇到一个“怪”病人，向大家请教。她，42岁。反复惊吓后晕厥30余年。每次受响声惊吓后发生跌倒，短暂意识丧失。无逆行性遗忘，无抽搐，无口吐白沫，无大小便失禁。多次跌倒致外伤。婴儿时有惊厥史。入院查体无殊。ECG、24小时动态心电图无殊；头颅MRI示小软化灶；脑电图无殊。入院后有数次类似发作。请问该患者该做何诊断，还需做什么检查，治疗方案怎样？
--**----**----**----**----**--
从发作的症状上比较符合血管迷走神经性晕厥，直立倾斜试验能协助诊断。在行直立倾斜实验前应该做常规的体格检查、ECG、UCG、holter和X-ray胸片除外器质性心脏病。
--**----**----**----**----**--
贴一篇“口服氨酰心安和依那普利治疗血管迷走性晕厥的疗效观察”
--**----**----**----**----**--
作者：林文华 任自文 丁燕生
--**----**----**----**----**--
http://www.ccheart.com.cn/ccheart_site/Templates/jieru/200011/1-1.htm
--**----**----**----**----**--

--**----**----**----**----**--
同意lion000版主的观点：如果此患者随着年龄的增长，其发作频率逐渐减少且更加支持，不知此患者有无这一特点。
--**----**----**----**----**--
入院后的HOLTER及血压监测对此患者只能是一种安慰性的检查，因在这些检查过程中患者发病的机会不是太大，当然不排除正好发作的情况。对此患者应常规作直立倾斜试验，如果没有诱发出，再考虑有无可能是其他原因所致的意识障碍，如室性心动过速等，但这需要电生理尤其是心腔内电生理的检查，毕竟是有一种创伤性方法。
--**----**----**----**----**--
因在外地，下面一篇文章可能对您有助，请您自己查找一下。
--**----**----**----**----**--
心理应激事件诱发血管迷走性晕厥1例 ，杨峻青、吴沃栋、张瑞云，中国神经精神疾病杂志， 2002 Vol.28 No.2
--**----**----**----**----**--
该例不排除精神因素导致的，因为每次均在受惊吓后出现。当然，在作出此诊断前，应完善相关检查，如头颅MIR(MRA),直立倾斜试验等。

今天感冒了没心情学，明天在做解释