自己动手写优快云博客提取器源码分析之二:处理网页保存为doc文件

本文介绍了一个简单的Java程序,该程序使用itext包将抓取的网页内容转换并保存为DOC文件。文章详细展示了如何设置文档格式、添加内容及页眉等步骤。

转载自: http://blog.youkuaiyun.com/w397090770/article/details/7768089

 

下面是把抓取到的网页用itext包保存为doc文件,过程很简单的。下面是这个类的实现:

/**
 * 
 */
package com.wyp.html2doc;

import java.io.File;
import java.io.FileOutputStream;
import java.io.StringReader;
import java.util.List;

import com.lowagie.text.Document;
import com.lowagie.text.Element;
import com.lowagie.text.HeaderFooter;
import com.lowagie.text.PageSize;
import com.lowagie.text.Paragraph;
import com.lowagie.text.Phrase;
import com.lowagie.text.Rectangle;
import com.lowagie.text.html.simpleparser.HTMLWorker;
import com.lowagie.text.html.simpleparser.StyleSheet;
import com.lowagie.text.rtf.RtfWriter2;

/**
 * @author w397090770
 * Create Data: 2012-7-18
 * Email: wyphao.2007@163.com
 * 
 * 版权所有,翻版不究,但是在修改本程序的时候务必加上这些注释。谢谢
 * 仅用于学习交流之用
 */
public class saveAsDOC {
	@SuppressWarnings("unchecked")
	public  void getDoc(File file, String contents, String title) throws Exception {
		//file是保存文件的文件夹路径,contests是前面处理好的网页源码,title是帖子的标题,用于标记生成的文件名		
		File saveFileName = new File(file.getAbsoluteFile() + File.separator + title + ".doc");
		if(!saveFileName.exists()){
			saveFileName.createNewFile();
		}else{		//和以前处理txt文件一样,如果先前这个文件已经存在,我们就不打算再去生成doc文件了,直接返回
			return;
		}
		// 设置纸张大小
		Document document = new Document(PageSize.A4);
		// 建立一个书写器(Writer)与document对象关联,通过书写器(Writer)可以将文档写入到磁盘中
		RtfWriter2.getInstance(document,new FileOutputStream(saveFileName));
		document.open();
		// 设置中文字体
		//BaseFont bfChinese = BaseFont.createFont("STSongStd-Light","UniGB-UCS2-H", BaseFont.NOT_EMBEDDED);
		// 正文字体风格
		//Font contextFont = new Font(bfChinese, 12, Font.NORMAL);
		
		// 添加页眉
		HeaderFooter header = new HeaderFooter(new Phrase(title), false);
		header.setAlignment(Rectangle.ALIGN_CENTER);
		document.setHeader(header);
		// 添加页脚
		/*HeaderFooter footer = new HeaderFooter(new Phrase(), false);
		footer.setAlignment(Rectangle.ALIGN_CENTER);
		document.setFooter(footer);*/
		
		
		Paragraph paragraph = new Paragraph();
		paragraph.setAlignment(Element.ALIGN_LEFT);
		paragraph.setFirstLineIndent(20);

		StyleSheet ss = new StyleSheet();
		// 添加网页里面的东西
		List<Element>htmlList = HTMLWorker.parseToList(new StringReader(contents),ss);
		for (int i = 0; i < htmlList.size(); i++) {
			Element e = htmlList.get(i);
			paragraph.add(e);
		}

		document.add(paragraph);
		document.close();
	}
}


 

代码很简单吧。

<think>嗯,用户想分析优快云博客文章77717548中的代码。首先,我需要找到这篇博客的具体内容,但用户没有提供具体内容,所以可能需要先确认一下。不过,根据用户提供的引用资料,特别是引用3提到了使用Python的requests和pyquery库爬取优快云博客数据,可能用户是想解析博客中的代码部分。 用户的问题是关于如何解析特定博客的代码,可能需要用到爬虫技术。根据引用3,可以建议使用requests获取网页内容,然后用pyquery或BeautifulSoup解析HTML,提取代码块。不过,优快云可能有反爬机制,需要注意请求头设置,比如User-Agent,或者使用Selenium模拟浏览器操作。另外,引用1提到免登录复制代码的方法,可能涉及到绕过登录限制,比如通过开发者工具开启设计模式,但在爬虫中可能需要处理cookies或session。 接下来,用户可能需要具体的步骤,比如如何发送HTTP请求,如何定位代码块的HTML元素。通常,代码块在<pre>或<code>标签内,或者有特定的class,比如“code-content”。需要检查目标博客的HTML结构,确定正确的选择器。同时,要注意处理可能的动态加载内容,这时候可能需要用Selenium。 另外,引用5提到优快云博客备份工具,解析HTML转Markdown可能存在难度,特别是处理复杂结构如表格。因此,如果用户需要将代码提取并转换格式,可能需要更复杂的解析逻辑,或者寻找现有的库或工具辅助。 总结下来,回答应该分步骤:1. 获取网页内容;2. 解析HTML提取代码;3. 处理可能的登录或反爬问题;4. 提供示例代码。同时,引用相关的引用资料,比如引用3的方法和引用1的免登录技巧。</think>### 优快云博客代码解析方法 #### 一、定位目标博客 优快云博客ID为$77717548$的文章未提供具体内容。需先通过以下方式获取代码: 1. 直接访问博客地址:`https://blog.csdn.net/xxx/article/details/77717548`(替换xxx为实际用户名) 2. 使用开发者工具查看网页结构(按F12进入) #### 二、代码解析步骤 1. **获取HTML源码** - 通过Python的`requests`库发送HTTP请求: ```python import requests url = 'https://blog.csdn.net/xxx/article/details/77717548' headers = {'User-Agent': 'Mozilla/5.0'} # 绕过反爬检测 response = requests.get(url, headers=headers) ``` 2. **解析代码块** - 使用`pyquery`定位代码容器(通常包含在`<code>`或`<pre>`标签中): ```python from pyquery import PyQuery as pq doc = pq(response.text) code_blocks = doc('code').text() # 或根据实际class选择器调整 ``` 3. **绕过登录限制** - 若遇到登录提示,可参考[免登录复制技术](引用[1]),在请求头中添加已登录用户的Cookie: ```python cookies = {'Cookie': '您的优快云登录Cookie'} response = requests.get(url, headers=headers, cookies=cookies) ``` #### 三、典型代码结构示例 假设目标代码为快速排序实现: ```python def quick_sort(arr): if len(arr) <= 1: return arr pivot = arr[0] left = [x for x in arr[1:] if x < pivot] right = [x for x in arr[1:] if x >= pivot] return quick_sort(left) + [pivot] + quick_sort(right) ``` 该算法通过递归实现分治策略,时间复杂度为$O(n \log n)$,最坏情况$O(n^2)$[^1] #### 四、注意事项 1. 动态加载内容可能需要使用`selenium`模拟浏览器 2. 代码块可能被拆分为多个`<div class="code-content">`标签 3. 复杂内容解析可参考[HTML转Markdown技术](引用[5])
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值