go爬虫框架-colly实战(四)--知乎回答爬取(一)

原文连接:Hzy 博客

1.前言

好几天没有写啦,这两天发现,每次写爬虫都要自己粘贴复制cookie,感觉好麻烦,colly有个setCookies,之前没明白怎么使用,现在明白啦。

siteCokkie :=c.Cookies(URL string)
c.SetCookies(URL string,siteCokkie)

这样子,就能设置某个url访问时的cookie啦,cookies一般是上个请求的cookies,然后我们根据情况来选择是否需要修改cookies。

2. 之前知乎上面看到的话题,有什么好看的番剧推荐,我就想到用爬虫爬下来,然后统计出有哪些好看的番剧啦。(好看的番剧都看的差不多啦。有点剧荒…)

问题:有什么好看的番剧(日本电视动画、网络动画、OVA/OAD连续剧作品)吗?

今天我们先把问题下面的全部爬取下来,明天在来清洗数据,进行统计!!!
因为现在已经十二点了…我不想秃头。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值