推荐几款爬虫分析神器

Toggle JavaScript

这款工具之前推荐过,这里就再推荐一次,凑个数吧。这是一款禁止异步加载的 Chrome 工具。就拿 QQ 音乐为例子,打开 Toggle JavaScript 之后,其数据一直无法加载,进度条一直打转。如下图,关闭之后,页面显示正常。

 

使用后

未使用

JSONView

这是一款 JSON 数据可视化工具,有些网页数据是异步加载的,还是拿 QQ 音乐举例,其歌词是异步加载的 JSON 数据,若你复制 JSON 链接打开如下图,安装 JSONView 之后,如下下图。数据格式化,井然有序,看起来舒服,可以多些几百行代码。

 

 

User-Agent Switcher for Chrome

这款工具可以随意修改 Chrome 浏览器的 user-agent ,用法很简单,这里就不再具体介绍了。只要点击不同的按钮,就会切换到相应的请求头。

 

 

XPath Helper

分析 HTML 源码的时候,很管用。单击图标开启,开启之后,在黑色框中输入 xpath 即可即时验证。快捷键为:command + shift + x(maxOS)ctrl + shift + x(Windows)

 

猜你喜欢

转载自blog.csdn.net/weixin_44786530/article/details/90070912