python3爬虫--反爬虫应对机制
内容来源于：
前言：
反爬虫更多是一种攻防战，针对网站的反爬虫处理来采取对应的应对机制，一般需要考虑以下方面：
①访问终端限制：这种可通过伪造动态的UA实现；
②访问次数限制：网站一般通过cookie/IP定位，可通过禁用cookie，或使用cookie池/IP池来反制；
③访问时间限制：延迟请求应对；
④盗链问题：通俗讲就是，某个网页的请求是有迹可循的，比如知乎的问题回答详情页，正常用户行为必然是先进入问题页，在进入回答详情页，有严格的请求顺序，如果之间跳过前面请求页面就有可能被判定为到了，通过伪造请求头可以解决这个问题；
内容：
cookie池的实现及使用
IP池的实现及使用