NScrapy
NScrapy是基于.net core和Redis的分布式Spider框架。 NScrapy的想法来自Scrapy,因此您可以以与Scrapy非常相似的方式编写蜘蛛
NScrapy是基于.net core的初始编程框架,Redis内存存储的一个单一的嵌入式分布式虫框架,NScrapy的整体思想源于知名度的python爬虫框架Scrapy,整体上的写法也接近于Scrapy
NScrapy示例代码
以下是NScrapy的样本,该样本将访问Liepin,这是一个Recruit网站基于[