网络爬虫
关注
分享
扫一扫
kendybear
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
网络爬虫playwright实现网站自动登录并签到
使用playwright实现网站自动登录并签到，设计思想如下：1、打开登录页面，输入登录账号进行登录；2、保存已登录cookies信息用于下次登录；3、打开签到页面，点击签到按钮，实现签到。原创 2022-06-30 12:48:56 · 4375 阅读 · 0 评论 -
使用playwright获取网站cookies
对于一些登录比较复杂的网站，具有反爬虫机制，比如手机验证码、滑块验证等，这时可以通过人工手动登录后，保存cookies到指定文件，以后登录就可以通过加载已保存的cookies实现免登陆啦。1、打开网站登录页面；2、设置等待时间，进行手工登录；3、登录后获取并保存cookies。......原创 2022-06-17 09:37:57 · 8248 阅读 · 3 评论 -
网络爬虫playwright获取网页链接
网络爬虫playwright，用它来爬取某个网站的的链接，获取单个节点用page.get_attribute(selector, name, **kwargs)，但是获取所有节点要用page.query_selector_all（selector）。原创 2022-06-15 12:05:58 · 4417 阅读 · 0 评论