【JAVA】从0开始写DHT/磁力爬虫 01 序章

最新推荐文章于 2021-02-23 23:09:43 发布

原创最新推荐文章于 2021-02-23 23:09:43 发布 · 2.4k 阅读

5 ·

CC 4.0 BY-SA版权

文章标签：

#DHT #磁力 #爬虫

从0开始写DHT/磁力爬虫专栏收录该内容

4 篇文章

订阅专栏

本文介绍了一种利用DHT协议自行开发爬虫的方法，通过不断认识新节点并响应请求，最终获取到所需的磁力链接及种子资源。

前段时间空闲时间比较多，又迫于想看的美剧找不到合适的资源，于是萌生了为何不自己实现一个DHT爬虫来获取磁力/种子资源搭建一个属于自己的文件索引库呢？

说做就做，要想做磁力爬虫就要先了解一下什么是DHT协议。这里我找了几篇文档方便大家对DHT有一定的了解；

总的来说，实现DHT爬虫就是要将自己伪装成一个DHT网络中的某一节点，然后不断地去认识新的节点（find_node），并响应来自其他节点的请求做出相应的处理，其他节点的请求为（get_peers 不可信infohash，announce_peer 可信infohash）时就可以获取到infohash值，然后用infohash获取种子并解析种子内数据就可以完善我们的索引库啦