基于selenium生成Csdn 博客文章简索的excel文件

最新推荐文章于 2024-08-03 20:38:11 发布
转载 最新推荐文章于 2024-08-03 20:38:11 发布 · 846 阅读 · 0

本工具使用Selenium制作，旨在便捷地抓取优快云博主的文章，并将其整理为Excel或HTML格式，便于离线查阅及数据分析。

Csdn 上各大博主的博客文章很有参考价值和独特见解，查看起来总觉得不是特别的方便。于是抽空用selenium 做了个简索生成工具。生成的是excel 2007的文章格式。

附上部分代码截图:
图一：



图二：


图三: 


运行结果截图：        

截图一



        截图二


    

 

        截图三


     


      

工具截图: 



A. 生成的excel格式结果如下图。详细页面:   点我查看Excel结果



     
B. 生成的html结果如下图。详细页面:   点我查看html结果




工具下载地址:      Csdn_Blog.rar  （鉴于空间限制流量问题，如有需要，请私信 获取下载地址，2013.02.21）.


本文地址：http://blog.youkuaiyun.com/aerchi/article/details/8434629

用selenium爬取csdn博客文章，并用4种方法提取数据
数据知道的博客
06-15 3万+
为了方便学习selenium，下面代码用selenium爬取博客文章的标题和时间，并用selenium自带的解析，etree，bs4，scrapy框架自带的selector等4种方式来解析网页数据； 当然，请求库还可以使用urllib，requests；也可以用aiohttp来实现异步爬取，用Splash实现动态渲染页面的抓取。 # -*- encoding: utf-8 -*- from selenium import webdriver from selenium.webdriver.chro
100天精通Python（爬虫篇）——第121天：基于selenium实现代码输入账号信息登录网站（反反爬策略）
热门推荐
努力让自己发光，对的人才能迎着光而来
02-26 16万+
基于selenium实现代码输入账号信息登录网站
[乐意黎原创] 基于selenium生成Csdn 博客文章简索的excel文件
打杂人
12-25 7143
selenium网页内容分析，selenium和xpath内容解析。selenium+xpath+url网页+excel格式输出; 文摘提取
selenium使用POI导入导出excel
gongchangwa的博客
07-11 835
如果代码只创建了XSSFWorkbook,没有创建XSSFSheet的话，创建的excel是打不开的 一、调用excel文件里面的内容 import java.io.File; import java.io.FileInputStream; import java.util.Iterator; import org.apache.poi.ss.usermodel.Cell; impor
python+selenium 使用excel实现关键字封装
zhujuntangxiaojuan的博客
07-05 533
from util.excel_util import ExcelUtil from keywordselenium.actiomMethod import ActionMethod excel_path = r'D:\PycharmProjects\2020study\config\keyword.xls' class KeyWordCase(object): def run_main(self): self.action_method = ActionMethod() .
Selenium自动写公众号文章
ak01_10的博客
12-17 561
今天要在公众号发几百篇文章，感觉相当繁琐，点了很长一段时间才发布30多个。这时我就想起了selenium。在网络找了很久，没发现相关源码，实在没办法，只好自己动手。 try{ SeleniumUtil.waitAppearAndClick(driver, 10, By.xpath("//div[@class='new-creation__menu-title']")); Thread.sleep(100); SeleniumUtil.switchToNextTag(driver
JAVA生成PDF文件
碌人乘凉, 黎硕 --> Aerchi.com
04-09 145
package test; import java.io.FileOutputStream; import com.lowagie.text.Document; import com.lowagie.text.Font; import com.lowagie.text.Image; import com.lowagie.text.PageSize; import com.lowag...
精选资源
C# 使用Selenium模拟浏览器获取优快云博客内容
06-04
本篇将深入探讨如何利用C#和Selenium WebDriver模拟浏览器行为，特别是在获取优快云博客内容方面的应用。 首先，Selenium是一个开源的自动化测试框架，它允许程序员用多种编程语言（包括C#）编写脚本来控制Web浏览器...
使用 Selenium 和 Python 抓取 优快云 博客所有文章 附源码
最新发布
m0_74972192的博客
08-03 1986
这段代码提供了一个基础的网页数据抓取示例，通过进一步的扩展和优化，可以实现更复杂和多样化的数据抓取需求。
使用Python 和 Selenium 爬取优快云 博客排行榜数据 附源码
m0_74972192的博客
08-03 2506
通过这篇博客，我们学习了如何使用Python、Selenium和BeautifulSoup爬取优快云博客页面上的特定数据。我们详细介绍了每个步骤的实现方法，并提供了完整的代码示例。希望这篇博客对你有所帮助！
python3.4.5+django2.0.4+centOS6.9+mod_wsgi4.5.7+apache2.2
宠辱不惊，看庭前花开花落；去留无意，望天上云卷云舒
05-23 1091
     django是python比较流行的一个web框架，通过近一周的学习，打算把项目搬到centOS服务器上，却遇到了各种问题，网上的教程多是只言片语，因此在此记录一下详细的搭建步骤，由于本人也是第一次接触linux系统，所以有什么不对的地方还烦请指出，不胜感激。 查看centOS版本：cat  /etc/redhat-release     2、安装python3提示：可以根据自己的系...
删除"-"开头的文件
用法之妙，存乎一心。
10-29 1885
--xxx 文件删除方法: 1.
Selenium-python完成csdn博客文章自动导入指定社区
03-18 1192
前提： 最近加入了一个，桃花岛，岛内有流量扶持！所以我在想能不能用selenium实现自动推送文章到社区，最近也才开始学习，我不太喜欢系统的学完才开始着手弄自己想做的事，才导致整天踩坑，经过一下午的摸索，我掌握了，如何用css、xpath 等定位分析元素，该文章包含我的一点个人见解，记录我的个人学习经历，以便后面需要使用到可以轻松入门回顾！ 演示： 文章目录前提：演示：1.推荐2.限制IP问题3.定位分析4.对列表进行循环操作完整代码：学习产出： 1.推荐 对于还没入门的同学 我推荐： 解决selen
Java使用Selenium批量导出优快云文章markdown格式到本地
冰之杍的博客
05-26 1630
Java使用selenium批量导出优快云文章markdown格式到本地一、需求背景二、基础Springboot工程准备（依赖、驱动等）1、新建springboot工程2、引入Selenium依赖3.下载selenium的java驱动4.编写代码进行测试环境是否具备 一、需求背景 现在我csdn上写的文章越来越多，但只存在csdn上，还是感觉不保险，万一哪天csdn网站出错，很多文章想找回来就难了，当前csdn上已支持单篇文章的导出，但文章太多，一篇一篇导出不太现实，因此基于这个需求，希望能把csdn上
[乐意黎原创] 完美解决 javax.mail.SendFailedException: Invalid Address 与 SMTPAddressFailedException 抛错
打杂人
12-03 8万+
         由于某个模块用到程序运行完后，自动收集结果发送邮件给相关人等。假如邮件收件人里某个地址貌似出问题，会导致所有的收件人地址都发送不出去。 抛出的错误如下： javax.mail.SendFailedException: Invalid Addresses;   nested exception is:         com.sun.mail.smtp.SMTPAddres...
用批处理(batch) 删除带有前缀的文件和文件名
碌人乘凉, 黎硕 --> Aerchi.com
06-06 1331
@echo off :: autho: aerchi aerchi@gmail.com dir 为文件目录 jetty 为前缀 Set dir=D:\test\ del %dir%jetty*.* /f/s/q/a for /f "delims=" %%i in ('dir /s/b/ad jetty*') do ( rd /s/q "%%~i" )pause dir...
用批处理来提取文件夹名名称将其前六位作为前缀重命名文件夹内文件
打杂人
09-22 4700
用批处理来提取文件夹名名称将其前六位作为前缀重命名文件夹内文件 文件结构如下:  批处理代码如下 @echo off&setlocal enabledelayedexpansion for /f "delims=" %%c in ('dir /b /ad') do (    pushd "%%c"    set ".=%%
文件名前缀批量删除
Kingber
06-15 2万+
::此批处理用来批量重命令文件 ::当无匹配的文件时会显示“找不到文件” @echo off setlocal enabledelayedexpansion for /f "delims=" %%i in ('dir /b *需要替换的字符串*') do ( echo %%i set var=%%i set var=!var:需要替换的字符串=! echo %%i !var! ren "%%i"
webdriver.close 报错问题 解决方案
知否
01-23 3420
解决方案转载自：  http://blog.csdn.net/aerchi/article/details/43985099 使用appium wd.close()时遇见报错： Method is not implemented .. 在使用webdriver操作时，点击主窗口的链接，会弹出子窗口。此时就会有两个窗口，如主窗口
基于Selenium与Webscraper的优快云博主信息爬取实践
资源摘要信息:"本文围绕使用Python爬虫技术从优快云网站的多个技术栏目（如Python、Java、前端、架构、数据库）中高效抓取博主信息展开，详细探讨了两种主流的数据采集方案：基于Selenium的自动化浏览器操作和基于Web...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值