日志文件分析软件Screaming Frog Log File Analyser

Screaming Frog Log File Analyser是一款帮助站长分析网站日志文件的工具，该款工具允许用户将原始访问日志文件拖放到软件界面中进行分析，能够智能识别大型和慢速网址，找出未抓取和孤立的网址。

主要功能：

识别已抓取的网址

查看和分析Googlebot和其他搜索漫游器能够抓取哪些网址，时间和频率。

发现抓取频率

深入了解哪些搜索机器人最常抓取，每天抓取多少网址以及机器人事件总数。

找到断开的链接和错误

发现搜索引擎漫游器在抓取您的网站时遇到的所有响应代码，损坏的链接和错误。

审核重定向

查找搜索机器人遇到的临时和永久重定向，这可能与浏览器或模拟爬网中的重定向不同。

改善抓取预算

分析您网站的最常被抓取的网址和目录，以识别浪费并提高抓取效率。

识别大页面和慢速页面

查看下载的平均字节数以及识别大页面或性能问题所花费的时间。

查找未抓取和孤立页面

导入网址列表并与日志文件数据进行匹配，以识别Googlebot尚未抓取的孤立或未知网页或网址。

结合并比较任何数据

使用“URL”列对日志文件数据导入和匹配任何数据。因此，导入爬网，指令或外部链接数据以进行高级分析。

软件介绍：

日志文件分析器虽然轻巧，但功能非常强大 - 能够在智能数据库中处理，存储和分析数百万行日志文件事件数据。它收集关键日志文件数据，以允许SEO做出明智的决策。