1. 首页
  2. 编程语言
  3. Python
  4. 详解用python写网络爬虫-爬取新浪微博评论

详解用python写网络爬虫-爬取新浪微博评论

上传者: 2022-03-01 08:53:25上传 PDF文件 48.57 KB 热度 16次

新浪微博需要登录才能爬取,这里使用m.weibo.cn这个移动端网站即可实现简化操作,用这个访问可以直接得到的微博id。分析新浪微博的评论获取方式得知,其采用动态加载。所以使用json模块解析json代码单独编写了字符优化函数,解决微博评论中的嘈杂干扰字符本函数是用python写网络爬虫的终极目的,所以采用函数化方式编写,方便后期优化和添加各种功能

下载地址
用户评论