scraper project用于获取HTML内容的Web刮刀

WPIC WebScraper 是一个从 Web Presence In China 中抓取目标内容并以有组织的形式保存的程序。本程序在优麒麟14.01.1操作系统下开发。

安装：从[nodejs.org/download/]下载最新版本的源代码。编译需要 Node.js，因此请确保它们已安装。以下指南适用于Ubuntu操作系统安装：

$ sudo apt-get update

$ sudo apt-get install build-essential openssl libssl-dev pkg-config

从源代码获取最新tarball的链接。下载并解压。然后使用源节点-v0.10.31中的示例：

$ tar -xzf node-v0.10.31.tar.gz

$ cd node-v0.10.31/

$ sudo