用requests爬虫拒绝301/302页面的重定向而拿到Location(重定向页面URL)的方法

原创

于 2017-01-04 12:08:22 发布 · 2.7w 阅读

13 ·

CC 4.0 BY-SA版权

文章标签：

#爬虫 #url

通过设置requests库的allow_redirects参数为False，可以防止301或302重定向，并能从响应头中获取到重定向页面的Location URL。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

def yunsite():
    'url'
    headers = {
  
  'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
               'Accept-Encoding': 'gzip, deflate, sdch, br',
               'Accept-Language': 'zh-CN,zh;q=0.8',
               'Connection': 'keep-alive',
               'Host': 'pan.baidu.com',
               'Upgrade-Insecure-Requests': '1',