
java爬虫
假装得大佬
这个作者很懒,什么都没留下…
展开
-
京东简单爬虫
先找到视频的请求url,发现url中vid(猜测是视频参数)是要进行传参的, 在代码检查中查找vid,找到参数vid。 提取参数vid,拼接url,然后模拟请求。 即可进行视频下载 package com.example.shares.utils; import com.gargoylesoftware.htmlunit.WebClient; import com.gargoylesoftware.htmlunit.html.HtmlPage; import org.apache.commons.io.F原创 2021-06-17 08:58:10 · 5247 阅读 · 0 评论 -
HttpClient
模拟网页请求,进行数据爬取: /** * GET---无参测试 * * @date 2018年7月13日 下午4:18:50 */ @Test public void doGetTestOne() { // 获得Http客户端 CloseableHttpClient httpClient = HttpClientBuilder.create().build(); // 创建Get请求 HttpGet httpGet = new HttpGet("http://loca原创 2021-06-10 11:22:11 · 95 阅读 · 0 评论