文件名称:
DHT开源爬虫p2pspider.zip
开发工具:
文件大小: 258kb
下载次数: 0
上传时间: 2019-07-16
详细说明:介绍 p2pspider 是一个 DHT 爬虫 BT 客户端的结合体, 从全球 DHT 网络里"嗅探"人们正在下载的资源, 并把资源的metadata(种子的主要信息)从远程 BT 客户端下载, 并生成资源磁力链接. 通过磁力链接, 你就可以下载到资源文件.用途你可以使用 p2pspider 打造私人种子库(比如: 海盗湾), 也可拿它做资源数据挖掘与分析。安装git clone https://github.com/Fuck-You-GFW/p2pspider使用使用前, 请确保你的 node 版本 >=0.12.0.'use strict';var P2PSpider = require('../lib');var p2p = P2PSpider({
nodesMaxSize: 200, // be careful
maxConnections: 400, // be careful
timeout: 5000});p2p.ignore(function (infohash, rinfo, callback) { // false => always to download the metadata even though the metadata is exists.
var theInfohashIsExistsInDatabase = false; callback(theInfohashIsExistsInDatabase);
});p2p.on('metadata', function (metadata) { // At here, you can extract data and save into database.
console.log(metadata);
});p2p.listen(6881, '0.0.0.0');目前只能放在有公网 IP 的主机上执行, 或者路由器设置端口转发(默认6881, UDP协议).贡献代码 fork 并拉取代码后,执行 npm install 安装依赖, 然后执行 node test/index.js 就可以看到测试效果。作者博客介绍:http://www.cnblogs.com/52web/p/5253697.html
标签:爬虫
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台,提供交流渠道,下载内容来自于网络,除下载问题外,其它问题请自行百度。
- 本站已设置防盗链,请勿用迅雷、QQ旋风等多线程下载软件下载资源,下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载,请稍后再次尝试;或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎,请到消费记录里找到下载记录反馈给我们,经确认后退回积分.
- 如下载前有疑问,可以通过点击"提供者"的名字,查看对方的联系方式,联系对方咨询.