常见的反爬策略
首先，既然要破解这些常见的反爬策略，就首先需要知道常见的反爬策略有哪些，所谓知己知彼，百战百胜。
如果你对编程感兴趣，想学习Python，这里推荐一下我的Python学习交流群【 784758214 】内有安装包和
学习视频资料免费分享，好友都会在里面交流，分享一些学习的方法和需要注意的小细节，每天也会准时的讲
一些项目实战案例。希望可以帮助你快速了解Python，学习python
解决策略
1. 伪装user agent
User-Agent是检查用户所用客户端的种类和版本。通过设置UA可以伪装成浏览器进行访问目标网站
3.图片识别验证码
对于一些简单的验证手段，可以通过pytesseract和PIL库进行图像识别，获取验证码，从而突破验证码限制。
当然也可以自己训练机器识别，这部分涉及到AI的知识，就不深入了。
例如豆瓣的验证码
5.其他突破方法
降低访问的频率。例如：每抓取一个页面就休息随机秒（个人感觉比固定时间的要好）；限制每天抓取的页面数量。
添加cookie。对于需要登录的网页来说，这是必要的一步