fengyee_zju的专栏

转载请注明出处！原文链接：http://blog.youkuaiyun.com/zgyulongfei/article/details/7909006有时候由于种种原因，我们需要采集某个网站的数据，但由于不同网站对数据的显示方式略有不同！本文就用Java给大家演示如何抓取网站的数据：（1）抓取原网页数据；（2）抓取网页Javascript返回的数据。一、抓取原网页。这个例子我们准备

java中文乱码问题1、中文问题的来源    计算机最初的操作系统支持的编码是单字节的字符编码，于是，在计算机中一切处理程序最初都是以单字节编码的英文为准进行处理。随着计算机的发展，为了适应世界其它民族的语言（当然包括我们的汉字），人们提出了UNICODE编码，它采用双字节编码，兼容英文字符和其它民族的双字节字符编码，所以，目前，大多数国际性的软件内部均采用UNICODE编码，在软件运行时

import java.io.File;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;import java.net.M

[转载]httpclient的cookie,编码与上传最近一直试图用httpClient做点自动化的工作，不过现在看来并没有想象中的那么轻松。实际上登录一个网站，访问某个特点的页面，发表一篇文章，上传一些文件，并不是一个简单的事情。HttpClient的基本使用因为发布的代码中带有几个例子，应该算是不难掌握的事情。下面我说下我遇到的几个问题。1，登陆验证图片问题首先

HttpClient 是 Apache Jakarta Common 下的子项目，可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议。本文首先介绍 HTTPClient，然后根据作者实际工作经验给出了一些常见问题的解决方法。 HttpClient 基本功能的使用 （一）、GET 方法 使用 HttpClient 需要

URL setUrl=new URL("http://www.baidu.com");HttpURLConnection huc = (HttpURLConnection)setUrl.openConnection(); huc.setDoOutput(true);huc.setRequestMethod("POST"); huc.setUseCaches(false); hu

[html] view plaincopypackage fileTest;    import java.io.*;  import java.net.HttpURLConnection;  import java.net.URL;    public class ConnTest {      public static void main(String args[]) thr

关于java.net.UnknownHostException大家也许都比较熟悉，今天我来整理一下关于java.net.UnknownHostException的各种处理办法：1、你的电脑或模拟器没有网络，请检查，也有可能是是网络地址错误，网站倒闭或者后台地址失效。2、java.net.UnknownHostException: Host is unresolved ***.***

大家好！这个暑假参加了 花旗银行 举办的一个软件设计比赛，惭愧，小菜鸟一个。不过也学到了不少东西，辛苦所得，特此来和大家分享。各位大牛勿喷，给点鼓励一般网页信息抓取   --Java篇举例：  http://forex.hexun.com/rmbhl/  这是和讯外汇网，比如现在我想要抓取 网页中段人名币牌价部分的数据，来显示到我们的javawidget上，如图 htmlp

网络上一篇介绍这个的文章，如下文章1其实是有问题的。实际上它的模拟http请求的格式有点问题，如果传输.txt文件就会发现.txt文件里面多出了一些字符，而这些字符是我们的传输文件头内容。为什么会这样的？参考文章2我们对比发现文章1的传输文件头和文件内容的组合格式有问题的，正确的应该是文章2的样子，但是文章2又缺少了文件尾。最后综合之后，正确的格式应该是：------------HV2