YYIverson的博客

转载出处：https://blog.youkuaiyun.com/u013440574/article/details/81911954 Selenium官方文档 https://seleniumhq.github.io/selenium/docs/api/py/api.html 谷歌浏览器 一、chromeOptions相关配置 chromeOptions 是一个配置 chrome 启动是属性的类。通过...

BeautifulSoup的常用用法介绍 参考博客：https://blog.youkuaiyun.com/c406495762/article/details/71158264 官方文档链接（中文版） 注：本博客对参考播客中的BeautifulSoup内容做了重要点提取，点击下面的链接进入有道云笔记看博客详细内容 https://note.youdao.com/ynoteshare1/index.ht...

selenium: 作用：可以模拟真实浏览器，是web自动化测试工具，支持多种浏览器 官方文档：http://selenium-python.readthedocs.io/index.html 使用前： 1、安装驱动 2、放入环境变量或Anaconda的Script文件夹或者手动输入驱动的path from selenium import webdriver options=webdr...

1、爬虫相关： TED-Talks的视频（www.ted.com/talks） 云集了曾踏上过TED讲坛、举世闻名的思想家、艺术家和科技专家。在TED.com网站上，我们可以免费下载这些视频。视频包含了可以互动的英文讲稿以及多达80多个语种的字幕。 这次的爬取场景是将某个演讲视频下英语和匈牙利语的字幕稿给抽取出来并一一对应后写入文件，并利用Selenium随机点击下一个视频，不断执行上述操作。 英...

Scrapy框架的介绍 一、框架介绍 1、各组件介绍 Scrapy Engine(Scrapy核心)： 负责数据流在各个组件之间的流 Spiders(爬虫)： 用于分析和提取数据及获取新的request请求，将得到的item交给Item Pipeline，将新的request请求再交给Scrapy Engine Scheduler(调度器) ： 接受Scrapy Engine传输的request...

目录 一、需求 二、简单网站分析 三、代码 四、代码输出 在 牛客网--求职--校招日程可以看到秋招的互联网公司。不过里面有一些是亮的就是已开始，灰的就是还没开始或者已经结束。如下图。 一、需求 博主在看完一家公司后，都会把它记在excel中的“已看”列，代表这家公司我已经看过。如下图，只截取部分。注意添加在excel的时候要是公司全名不然后面会很难受哈哈。 然后我...

在 牛客网--求职--笔试日历 可以笔试时间每天都有哪些公司有笔试，如下图 一、需求 1、看看这个有笔试的公司哪家你还没看过。 2、看看自己投过的公司哪家这个月有笔试及笔试的时间。 当然，你还是得把你投的记在excel中，把已笔试的也记下来！ 2、代码 from selenium import webdriver from collections impor...