用requests爬虫拒绝301/302页面的重定向而拿到Location(重定向页面URL)的方法

Mao_code

于 2017-01-04 12:08:22 发布

阅读量2.7w

点赞数 2

CC 4.0 BY-SA版权

分类专栏： python爬虫笔记文章标签：爬虫 url

本文链接：https://blog.youkuaiyun.com/Mao_code/article/details/54017708

通过设置requests库的allow_redirects参数为False，可以防止301或302重定向，并能从响应头中获取到重定向页面的Location URL。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

def yunsite():
    'url'
    headers = {
  
  'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
               'Accept-Encoding': 'gzip, deflate, sdch, br',
               'Accept-Language': 'zh-CN,zh;q=0.8',
               'Connection': 'keep-alive',
               'Host': 'pan.baidu.com',
               'Upgrade-Insecure-Requests': '1',