284day（解析库复习,txt文件储存）

最新推荐文章于 2021-06-09 22:32:45 发布

原创最新推荐文章于 2021-06-09 22:32:45 发布 · 194 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍了一个使用PyQuery进行网页解析的具体案例，针对知乎探索页的数据抓取，涉及请求发送、HTML文档解析及TXT文件存储等内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

《2018年7月13日》【连续284天】

标题：解析库复习,txt文件储存；

内容：

看了一下解析库内容，包括Xpath,BeautifulSoup，Pyquery;

通过pyquery练习txt文件储存：

import requests
from pyquery import PyQuery as pq

url ='http://www.zhihu.com/explore'
headers ={'User-Agent':'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_0)\
                AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11'}
html =requests.get(url,headers=headers).text
doc =pq(html)
items =doc('.explore-tab .feed-item').items()
for item in items:
    question =item.find('h2').text()
    author = item.find('.author-linkk-line').text()
    answer = pq(item.find('.content').html()).text()
    file = open('explore.txt','a', encoding='utf-8')
    file.write('\n'.join([question,author,answer]))
    file.write('\n' + '=' *50 +'\n')
    file.close()