爬虫开源vidageek

Crawler是一个简单的Web爬虫。它让你不用编写枯燥,容易出错的代码,而只专注于所需要抓取网站的结构。此外它还非常易于使用。 CrawlerConfiguration cfg = new CrawlerConfiguration("http://www.open-open.com"); PageCrawler crawler = new PageCrawler(cfg); crawler.crawl(new YourPageVisitor());