开发工具:
文件大小: 191kb
下载次数: 0
上传时间: 2021-03-03
详细说明：NSpider
介绍
NyderSpider（NSpider）是面向个人电脑的超轻量级资源爬取框架。nspider基于请求库，采用多进程+多线程的设计。主要针对普通论坛，资源网站的图片，视频资源进行爬取。
nspider基于SQLite进行数据和进度存储工作，在nspider设计框架和SQLite自有的鲁棒性上来看，你可以随时随地暂停，杀死nspider，nspider将在下一次启动时自动恢复上一次的工作进度。
由于没有对本框架所有模块所有方法进行细致的测试，所以并不保证框架没有bug，还需要一些实践来验证本框架的鲁棒性。
抽象结构
如果你只是想使用该架构，只需了解如下结构即可。
真实结构
如果你想了解架构的真实结构，请看如下图。
要求
Python 3.6+
适用于Linux（不确定），Windows，macOS（不确定）
安装
复制nspider文件夹到你的项目目录，然后impor
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
