1. 首页
  2. 编程语言
  3. Python
  4. python知乎热榜的爬虫

python知乎热榜的爬虫

上传者: 2023-01-06 14:06:13上传 ZIP文件 1.41MB 热度 12次
知乎热榜的爬虫默认间隔一分钟爬一次会接着爬热榜上问题的回答进度用redis储存结果存到mysql启动分布式的先启动服务器端tw spider server然后启动客户端zhihu hot spider即可因为我只有一台电脑所以我也不知道同时启动多个客户端效果咋样设置server端redis和mysql设置UrlPool的三个参数分别是在redis中key的前缀用redis的几号库host.端口是默认的6379要改的话在tw url pool改
下载地址
用户评论