LSpider:LSpider一个为被动扫描器定制的前端爬虫 源码

L蜘蛛 LSpider-一个为被动扫描器定制的前端爬虫 什么是LSpider? 一款为被动扫描器而生的前端爬虫〜 由Chrome Headless,LSpider主控,Mysql数据库,RabbitMQ,被动扫描器5部分组合制成。 (1)建立在Chrome Headless基础上,将模拟点击和触发事件作为核心原理,通过设置代理将流量转换成被动扫描器。 (2)通过内置任务+子域名api来进行发散式的爬取,目的经可能的触发对应目标域的流量。 (3)通过RabbitMQ来进行任务管理,支持大量线程同时任务。 (4)智能填充表单,提交表单等。 (5)通过一些方式智能判断登录框,并给给用户反馈,用户可以通过添加cookie的方式来完成登录。 (6)定制了相应的Webhook接口,以供Webhook统计发送到微信。 (7)内置了Hackerone,bugcrowd爬虫,提供账号的情况下可