UserAgent的伪装
UserAgent代表使用浏览器内核,在爬取数据时不断切换浏览器内核可起到一定的伪装作用
from fake_useragent import UserAgent
ua = UserAgent()
# print(ua.ie) #ie的 内核
# print(ua.chrome) #谷歌浏览器 内核
useragent = ua.random ##随机选取一个浏览器内核
headers = {'User-Agent':useragent}
print(headers)