
java爬虫
monkey-jie
这个作者很懒,什么都没留下…
展开
-
java爬取酷狗榜单歌曲信息并存入数据库
这里只解析一下代码,所需工具jsoup、HttpClienthttpCLient获取html后,用jsoup解析html,再用java来获取所需要的信息。HTTPManage:package com.after.demo.spider;import org.apache.commons.logging.Log;import org.apache.commons.logging.LogF...原创 2019-04-23 12:09:13 · 1487 阅读 · 0 评论 -
爬取酷狗音乐时的坑
今天在用java爬取酷狗音乐时碰到了两个坑,浪费了我不少时间,呜呜呜。通过拼接hash值获取歌曲真实接口地址后,遇到了以下两个错误,开始还以为是https的问题,搞了半天并不是1、{“status”:0,“err_code”:20010,“data”:[]}在浏览器直接访问可以获取到所有数据,但是通过java的httpclient获取到的只是这个玩意儿。。最后在请求头中携带cookie值为...原创 2019-09-23 22:46:32 · 4806 阅读 · 6 评论