python2 spider 今日头条

最新推荐文章于 2025-02-18 17:49:42 发布

原创最新推荐文章于 2025-02-18 17:49:42 发布 · 438 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #spider #json

python 同时被 2 个专栏收录

12 篇文章

订阅专栏

爬虫

6 篇文章

订阅专栏

本文通过使用Python的requests和json库来爬取今日头条网站上的新闻信息。代码展示了如何获取网页数据，并解析出每条新闻的标题及链接。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

requests + json

直接上代码：

#!/usr/bin/python
# coding=utf-8  
import requests
import json

url = 'http://www.toutiao.com/api/pc/focus/'
wbdata = requests.get(url).text
 
data = json.loads(wbdata)
news = data['data']['pc_feed_focus']

for n in news:
    title = n['title']
    print title,
    img_url = n['image_url']
    #print img_url
    url = n['media_url']
    print url
    #print(url,title,img_url)

运行结果：

$ python toutiao.py
我国首个无人驾驶巴士在东南大学运营 可自动避人 http://toutiao.com/m5739097906
中国最美乡村！江西花3亿元打造500个“美丽家园” http://toutiao.com/m1571261498314753
张继科爸爸也关注了景甜，这门亲事真的要成了？！ http://toutiao.com/m5819696892
美国队下月造访白宫 已有四人公开声明不去！ http://toutiao.com/m3783621201
武警云南总队“魔鬼周”野外极限训练锤炼特战尖兵 http://toutiao.com/m50043246607
尴尬！关晓彤晒照减肥，但她的减肥餐也太打脸了！ http://toutiao.com/m3750948227
贾静雯小女儿激萌可爱 霍思燕光脚抱嗯哼跳皮筋累惨 http://toutiao.com/m5738017030