Python爬虫知识点梳理.docx

Python爬虫知识点梳理.docx爬虫涉及的技术包括但不限于熟练一门编程语言这里以Python为例HTML知识HTTP协议的基本知识正则表达式数据库知识常用抓包工具的使用爬虫框架的使用涉及到大规模爬虫还需要了解分布式的概念消息队列常用的数据结构和算法缓存甚至还包括机器学习的应用大规模的系统背后都是靠很多技术来支撑的.数据分析挖掘甚至是机器学习都离不开数据