ppspider_example:ppspider爬虫范例B站视频信息及评论爬取qq音乐信息及评论爬取推特主题评论和用户信息爬取 源码

ppspider示例 安装依赖 set PUPPETEER_DOWNLOAD_HOST=https://npm.taobao.org/mirrors/ npm install # 或则用yarn安装依赖(需要通过npm提前全局安装yarn:npm install yarn -g) # yarn install src /快速启动 演示了@OnStart装饰器的作用在爬虫系统启动后,立即执行一个任务 src / ontime 演示了@OnTime装饰器的作用在爬虫启动后根据cron表达式重新执行任务这示例中总共每个5秒打印一次时间 源/队列 演示了@AddToQueue @FromQueue装