江湖小白之一起学Python (四)生成IP池
经过前面反反复复的练习,我觉得基本爬取一些网站是没有什么问题的,今天为什么讲IP池呢,因为很多网站是有反爬虫机制的,如果老是用你的固定Ip去频繁访问的话,会加入它的黑名单,让你一段时间都无法访问,那解决这个问题就是动态改变IP地址去访问,这样基本都不会被封Ip了,比如投票软件,点赞啊,抓下淘宝数据啊什么什么的都会用到动态Ip,问题又来了,从哪里获取到Ip呢,生活比较富裕的童鞋可以弄个http代理,比如站大爷,快代理啊什么的(绝对没有给他们打广告,因为没给我钱~~!),像我这样掉颗饭都要捡起来吃掉的人,这无疑是在我心口插了一把刀,实力不允许啊......容我先喝点西北风压压惊! 那怎么办,当然是自己写
下载地址
用户评论