NScrapy:NScrapy是.net核心corss平台分布式Spider框架它提供了编写自己的Spider的简便方法 源码

NScrapy NScrapy是基于.net core和Redis的分布式Spider框架。 NScrapy的想法来自Scrapy,因此您可以以与Scrapy非常相似的方式编写蜘蛛 NScrapy是基于.net core的初始编程框架,Redis内存存储的一个单一的嵌入式分布式虫框架,NScrapy的整体思想源于知名度的python爬虫框架Scrapy,整体上的写法也接近于Scrapy NScrapy示例代码 以下是NScrapy的样本,该样本将访问Liepin,这是一个Recruit网站基于[URL]属性中定义的种子URL,NScrapy将访问详细信息页面中的每个位置信息(ParseItem