变体:消除网页抓取的麻烦 源码

目录 morph.io:一个抓取平台 的 通过所有代码和协作 用Ruby,Python,PHP,Perl或JavaScript(NodeJS,PhantomJS)编写刮板 简单的API来获取数据 计划刮板或手动运行 通过进程隔离 从移动刮板代码和数据 刮板损坏的电子邮件警报 依存关系 Ruby 2.3.1,Docker,MySQL,SQLite 3,Redis,mitmproxy。 (有关安装Docker的更多详细信息,请参见下文) 在Linux上支持开发(Ubuntu 16.04最有效;在某些设置下可以使用Ubuntu 18.04)和Mac OSX。 储存库 面向用户: 主要应用 c