最近在学习python爬虫方面的知识,下面是做的一个简单爬虫示例。
从沪深A股中爬取股票列表中的数据到本地
用到的库:requests库,BeautifulSoup
爬取的链接为:http://quote.stockstar.com/stock/ranklist_a_3_1_1.html
代码如下:
import re
import requests
from bs4 import BeautifulSoup
def getHTML(url,code='utf-8'):
print("in fun 1")
try:
r=requests.get(url)
r.raise_for_status()
r.encoding=code
return