带有Web UI的分布式多用户Scrapy系统 这是一个Django项目，允许用户通过Web界面创建，配置，部署和运行Scrapy Spiders。 该项目的目标是构建一个应用程序，该应用程序将允许多个用户编写自己的抓取脚本，并将其部署到一组工人中，以分布式方式进行抓取。 该应用程序允许用户通过Web界面执行以下操作： 创建一个Scrapy项目 添加/编辑/删除草率项目 添加/编辑/删除Scrapy项目管道 编辑链接生成器功能（有关更多信息，请参见下文） 编辑刮板功能（有关此内容，请参见下文