luckyriver的博客

实现每天定时爬取上面的代码我们每天都要手动执行，考虑每天定时自动执行爬取：一开始想到了Java提供的Timer类，但是不能因为每天爬一张图就让JVM一直跑着啊！回想刚开始学java，记事本里写完的代码要在命令行窗口编译运行，又因为我操作系统为Windows,自然想到写个简单的bat文件，然后设置系统定时任务。

  近来因为特殊需要，需要获得一定量的数据。这让我下意识的就想到了用网络爬虫来达成目的。之前常听网络爬虫，也知道Python在这方面非常火热，但自我感觉还是对Java稍微熟悉一点，并且得知Java用来做爬虫也很方便，所以就去查了相关资料，在此分享我的心得。  没有枯燥的专业术语，文章的目的只是为了更好的理解其中的核心原理，帮助初学者快速入门！一.网络三分游  网络爬虫网络爬虫，我们有必要...

紧接我们上次的问题，如何获取服务器发送的资源，保存到本地？上一篇文章见java网络爬虫核心原理。一、Java IO流（input,output）  我们知道计算机是用来处理数据的。所有的程序，多媒体资源，在计算机内部都是以二进制形式存放的（本质是电荷的有无，磁场的有无，高低电压。高低、有无、这些形式被抽象成0或1，二进制数据，这是由硬件的物理特性决定的）。  拿我们经常看的电影为例：电影从硬... 二、通过Java IO流实现数据从网络到本地的转移

Error 400. The request has an invalid header name。爬虫400错误。