博主在使用某爬虫框架进行网页爬取时遇到问题：能够成功爬取列表页并获取详情页，但无法将下一页的URL加入队列以继续爬取后续列表。求助解决方法。
小弟现在用这个框架写个爬虫。
爬取列表页，在列表页中找到详情地址，调用page.addTargetRequest(url)爬取详情页也没问题。
但是添加下一页的url到这个队列中缺没用了，也就是不能爬取下一页的列表。
小弟卡在这两天了也没解决了，还请哪位大哥指点一下，
扫一扫
评论 1
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
