Screaming Frog SEO Spider

Screaming Frog SEO Spider 是装在电脑上的站点爬虫，模拟搜索引擎抓取整站，把每个 URL 的标题、描述、状态码、内链关系和图片信息导出成表格。它能执行 JavaScript 后再抓取，可以接 Search Console 与 Analytics 的数据做交叉对比，支持自定义抽取（XPath、CSS、正则），还能生成 XML 站点地图和断链报告。

它适合排查技术问题：死链、重定向链、重复标题与描述、缺失的 canonical、图片缺 alt 文本。上线新栏目或改版后跑一遍是最常见的使用场景。如果站点很小，或者只想看收录情况，用站长工具就够，不必装它。

有免费版本与付费许可，免费版有 URL 抓取上限，站点越大越需要付费；付费按许可数量和年限区分，1–4、5–9 等档位价格不同。上手不难，但配置项多，第一次用只开需要检查的项目会轻松很多。

抓取在本地进行，速度和并发取决于自己的电脑与带宽，大规模抓取比较占资源。它是技术检查工具，不做关键词和流量估算，这部分要靠 Semrush 这类平台补上。