文件名称:
feapder:feapder是一种支持分布式,扩展采集,任务防丢,报警丰富的python爬虫框架的-源码
开发工具:
文件大小: 321kb
下载次数: 0
上传时间: 2021-03-16
详细说明:加料器
简介
feapder是一种简单,快速,轻量级的爬虫框架。起名源于fast,easy,air,pro,spider的缩写,以开发快速,抓取快速,使用简单,功能强大为一体,历时4年倾心打造。支持轻量爬虫,分布爬虫,并列爬虫,爬虫集成,以及完善的爬虫报警机制。
之前一直在公司内部使用,已使用本框架采集100+数据源,日采千万数据。现在开源,供大家学习交流!
读音: [ˈfiːpdə]
官方文档: :
环境要求:
Python 3.6.0以上
适用于Linux,Windows,macOS
安装
从PyPi:
pip3 install feapder
从Git:
pip3 install git+https://github.com/Boris-code/feapder.git
若安装出错,请参考
小试一下
创建爬虫
feapder create -s first_spider
创
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台,提供交流渠道,下载内容来自于网络,除下载问题外,其它问题请自行百度。
- 本站已设置防盗链,请勿用迅雷、QQ旋风等多线程下载软件下载资源,下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载,请稍后再次尝试;或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎,请到消费记录里找到下载记录反馈给我们,经确认后退回积分.
- 如下载前有疑问,可以通过点击"提供者"的名字,查看对方的联系方式,联系对方咨询.