Mac尖叫青蛙网络爬虫软件是什么？Screaming Frog Log File Analyser for Mac是一款专门用于抓取网址进行分析的网络爬虫开发工具。通过mac尖叫青蛙网络爬虫软件可以快速抓取网站中可能出现的损坏链接和服务器错误，或是识别网站中临时、永久重定向的链接循坏。此外，还可以检查出网址、网页标题、说明以及内容等信息中心可能出现的重复问题。需要SEO优化分析工具的朋友千万不要错过Screaming Frog SEO Spider for Mac！

功能特色

1、找到断开的链接

立即抓取网站并找到损坏的链接（404s）和服务器错误。批量导出错误和源URL以进行修复，或发送给开发人员。

2、审核重定向

查找临时和永久重定向，识别重定向链和循环，或上传URL列表以在站点迁移中进行审核。

3、分析页面标题和元数据

在抓取过程中分析页面标题和元描述，并识别网站中过长，短缺，缺失或重复的内容。

4、发现重复内容

使用md5算法检查发现完全重复的URL，部分重复的元素（如页面标题，描述或标题）以及查找低内容页面。

5、使用XPath提取数据

使用CSS Path，XPath或regex从网页的HTML中收集任何数据。这可能包括社交元标记，其他标题，价格，SKU或更多！

6、审查机器人和指令

查看被robots.txt，元机器人或X-Robots-Tag指令阻止的网址，例如’noindex’或’nofollow’，以及规范和rel =“next”和rel =“prev”。

7、生成XML站点地图

快速创建XML站点地图和图像XML站点地图，通过URL进行高级配置，包括上次修改，优先级和更改频率。

8、与Google Analytics集成

连接到Google AnalyticsAPI并针对抓取功能获取用户数据，例如会话或跳出率和转化次数，目标，交易和针对目标网页的收入。

9、抓取JavaScript网站

使用集成的Chromium WRS渲染网页，以抓取动态的，富含JavaScript的网站和框架，例如Angular，React和Vue.js.

10、可视化站点架构

使用交互式爬网和目录强制导向图和树形图站点可视化评估内部链接和URL结构。

下载地址