weixin_38891662的博客

原创 Scrapy中response介绍、属性以及内容提取

parse()方法的参数 response 是start_urls里面的链接爬取后的结果。meta：即response.request.meta, 在构造Request对象时, 可将要传递给响应处理函数的信息通过meta参数传入, 响应处理函数处理响应时, 通过response.meta将信息提取出来。urljoin(url) ：用于构造绝对url, 当传入的url参数是一个相对地址时, 根据response.url计算出相应的绝对url.url ：HTTP响应的url地址,str类型。