web scrape project 源码

网络抓取项目 一个完整的堆栈项目,将使用Node.js和cheerio从多个站点(如Ebay)抓取列表数据。 我计划使用该项目在前端上进一步实践Reactjs,并学习如何通过可能使用Express和mongoDB创建后端。 计划功能 Web刮除(Nodejs,Cheerio) Scrape eBay列表 刮擦craigslist (推迟到我先弄清楚如何连接eBay抓取数据。) 从多页获取数据(分页) 后端(Mongodb,Express) 建立一个数据库。 连接数据库。 弄清楚如何将报废的数据发送到该数据库。 将最便宜的清单保存到另一个集合。 设置cron作业。 前端(React.js) 创建一个搜索组件。 创建一个列表组件。 实施挂钩。 更新 2/21/21添加了eBay报废。 2/23/21由于课程繁琐,从废弃FB市场切换到另一个网站。 实施了3/1/21