爬取美国各州实时疫情数据

爬取美国各州实时疫情数据

1. 首先选择爬虫网站数据来源，这里选取的是腾讯疫情数据实时更新网站https://news.qq.com/zt2020/page/feiyan.htm
2. 选取相关数据接口：https://view.inews.qq.com/g2/getOnsInfo?name=disease_foreign

#获取数据
import requests
import json
import pandas as pd
#爬取数据的网址（腾讯新闻网实时更新）
America_url = 'https://view.inews.qq.com/g2/getOnsInfo?name=disease_foreign'
headers = {
   
   
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36'
,'referer': 'https://news.qq.com/'
}
#获取到json格式数据
response = requests.get(url=America_url,headers = headers).json()

3. 保存数据

#将json格式转换成字典
data = json.loads(response['data'