产品 SEO 与 GEO 智能体 付费广告智能体 网站智能体 转化智能体
运作方式 方案 常见问题 博客 预约通话

用 Screaming Frog 可视化网站结构:看懂这些图

更新于 · 阅读约 7 分钟

简短回答 用 Screaming Frog 抓取您的网站(500 个 URL 以内免费),打开 Visualisations(可视化),看三件事:重要页面离中心有几圈、红色的不可索引页面聚在哪里、哪些页面得到的链接很少。Screaming Frog 默认会标出深度 4 及以上的页面。只靠链接抓取画不出孤立页面;要找到它们,需要对照站点地图或 Search Console。

想把这些用到您的生意上?预约一次 30 分钟的免费通话,一起聊聊。

预约通话

Screaming Frog 抓取图里要看什么

看三种情况:离首页太远的页面、成片的红点、被链接很少的页面。每种情况对应不同的修法。

图中的情况在哪里确认常见修法
重要服务页在第四圈或更外面Links 标签页,“Pages With High Crawl Depth”筛选从菜单、首页或主要服务页链接过去
一团红点目录树图;Site Structure 标签页去掉误留的 noindex 标签,修好重定向或坏掉的页面
明明存在的页面不见了图里根本没有:要在图外检查给它加一个普通的文字链接
按入链数调整大小时,重要页面显得很小Internal 标签页,“Unique Inlinks”和“Link Score”列从相关页面加链接

Screaming Frog 自己的指南提醒,这些图“don't provide any more data than is already available in a crawl”(提供的数据不比抓取结果本身更多)。用图发现问题,再用各个标签页拿到要修的页面清单。如果您还没画过图,或者正在挑工具,先看网站结构可视化。

抓取图还是目录树:该打开哪个?

想知道“这个页面有多难找到?”就打开抓取图;想知道“是不是整个栏目都出了问题?”就打开目录树。两者回答的问题不同(Screaming Frog:可视化指南):

  • 抓取图(Force-Directed Crawl Diagram、3D 版本、Crawl Tree Graph)按抓取深度摆放每个页面,也就是从首页点几次才能到。每条线是到达该页面的最短链接路径,不是所有链接。
  • 目录树图按网址中的文件夹(/services/、/blog/)给页面分组。线条不代表链接。同一个文件夹里的页面通常用同一个页面模板,所以模板层面的错误在这里会显示成一整块红色,而在抓取图里这些页面是分散的。

两种图都在免费版的 Visualisations 菜单里,免费版最多抓取 500 个 URL。付费许可证每年 £199;2026 年 11 月显示的美元价格是 $279,没有列出加元价格(Screaming Frog:价格)。

如何找出太深的页面

数圈数。首页是中间那个又大又深的绿点;每往外一圈就多点一次,点也越往外越小、颜色越浅(Screaming Frog:可视化指南)。

然后用数字确认,因为一张 400 个点的图很难数清:

  1. 打开右侧的 Site Structure 标签页。下方的图表显示每个深度(从 1 到 10+)各有多少个 URL。
  2. 运行 Crawl Analysis > Start,然后打开 Links 标签页,选择 Pages With High Crawl Depth 筛选。默认列出深度 4 及以上的页面,起始页算作 0。这个数字可以在 Config > Spider > Preferences 里修改(Screaming Frog:Pages With High Crawl Depth)。
  3. 导出清单,标出能为您带来收入的页面。

不要把所有页面都拉平。Screaming Frog 自己说,不重要的页面或大型网站上的页面“will often naturally sit deeper without issue”(往往自然会位置更深,这没有问题)。Google 也没有设定点击次数上限。它的规则是页面要能被找到:

"Every page you care about should have a link from at least one other page on your site." (Google Search Central: Link best practices for Google) 译文:“您在意的每个页面,都应该至少有一个来自您网站上其他页面的链接。”

所以要检查的只有一件事:给您带来客户的页面是不是被埋得太深?水管工的紧急维修页在深度 4 是个问题;2019 年的一篇博客文章在深度 6 通常不是。

有一个特殊之处:Screaming Frog 把一次重定向算作一层深度(用户指南:Tabs)。一个看起来要点五次的页面,可能是点三次加两次重定向。把旧链接直接指向最终地址,两个问题一起解决。

如何找出混乱或坏掉的栏目

看颜色。绿点是 Google 可能索引的页面;淡红色的是不可索引的页面,例如带 noindex 标签(一行请搜索引擎不要收录该页面的代码)、重定向或出错的页面。图上的“i”图标会显示完整的颜色说明(Screaming Frog:可视化指南)。

  • 目录树里的一块红色说明整个文件夹有同样的问题,通常出在同一个模板或同一个设置上。常见的例子是建站后图库或地点文件夹一直留着 noindex。
  • 抓取图里零散的红点通常是个别坏掉或被重定向的链接。检查链接到它们的页面。
  • Site Structure 标签页用表格给出同样的信息:每个文件夹的可索引和不可索引 URL 数量。

有些红色是正常的:感谢页、登录页和作者归档页常常是故意不让搜索引擎收录的。修之前先问一句“这是我们有意的吗?”

改变决定每个点大小的依据。点击力导向图上的齿轮,按 unique inlinks(有多少个不同页面链接到它)或 Link Score(Screaming Frog 对页面内部链接强度的 0–100 估算,类似 Google 的 PageRank)来调整节点大小。Link Score 要在运行 Crawl Analysis 之后才会有数据(Screaming Frog:可视化指南;用户指南:Tabs)。

理想的样子:您的主要服务页属于最大的那些点。如果联系页和一篇旧博客文章特别大,而“屋顶更换”只是一个小点,说明您的链接指错了页面。请看指向赚钱页面的内部链接。

要看到指向某个页面的所有链接,而不只是最短路径,右键点击它的点,选择 Show Inlinks。链接到它的页面会变绿,其余的变灰。

为什么孤立页面不会出现在图里

孤立页面是网站上没有任何页面链接到的页面。抓取工具靠跟随链接发现页面,所以它画不出一个从未到达的页面。空着的位置是看不见的。

Screaming Frog 只能通过把抓取结果和另一份清单对比来找到孤立页面(用户指南:Tabs):

另一份清单筛选需要许可证吗?
您的 XML 站点地图Sitemaps 标签页,“Orphan URLs”付费(抓取配置)
Google Search ConsoleSearch Console 标签页,“Orphan URLs”付费(集成)
Google AnalyticsAnalytics 标签页,“Orphan URLs”付费(集成)

每一种都还需要在抓取后运行 Crawl Analysis。免费的做法:导出抓取结果的 Internal 标签页,和您的建站工具(WordPress、Wix、Squarespace)里的页面列表对比。建站工具里有、抓取结果里没有的页面,就是孤立页面或被屏蔽的页面。完整步骤见孤立页面。

还要检查您的链接是不是真正的链接。Google 表示,一般只有标准 HTML 链接(带“href”地址的“a”元素)它才能抓取(Google Search Central:Link best practices)。一个只用脚本按钮做的菜单,可能让整个栏目在 Screaming Frog 和 Google 看来都像是孤立的。

大型网站:图太大怎么办

2D 图一次最多显示 10,000 个 URL;灰点表示下级页面被截掉了。右键选择 Focus 或 Explore 就能打开那个分支。3D 图在您的浏览器里打开,最多能处理 100,000 个 URL(Screaming Frog:可视化指南)。大多数小企业网站碰不到这两个上限。不过超过 500 个 URL,免费版就会停止抓取。

要分享结果,点击保存图标,选择 HTML(可交互,任何浏览器都能打开)或 SVG(静态图片)。您的网页设计师不装 Screaming Frog 也能打开 HTML 文件。

示例

以下为说明用的案例,数字是虚构的。

赚钱页面被埋得太深的屋顶承包商(美元)

一个 90 个页面的网站。抓取图显示“屋顶更换”在第五圈。High Crawl Depth 筛选确认深度为 5:其中两次点击是旧 /services/ 地址的重定向。这位屋顶承包商把菜单链接直接指向新页面,并把它加到首页。深度降到 1。成本:$0,用免费版。

有一个红色文件夹的卡尔加里物理治疗诊所

目录树显示 /conditions/ 下的 25 个页面全是红色。一个模板带着建站时留下的 noindex 标签。删掉之后,下一次抓取时这个文件夹就变绿了。

链接分布失衡的多伦多会计师

按 unique inlinks 调整大小后,除首页外最大的点是一篇 2021 年的报税截止日期文章,每个侧边栏都链接到它。“小企业记账”的点很小。这位会计师把侧边栏链接换成了记账页面。不需要许可证。

常见问题

点几次才算太深?

Google 没有公布数字。Screaming Frog 默认标出深度 4 及以上的页面。目标是让带来客户的页面离首页在一到两次点击之内。

Screaming Frog 免费版够用吗?

对于 500 个 URL 以内的网站,够用:图、深度、颜色和按入链调整大小都能用。要通过站点地图、Search Console 或 Analytics 找出孤立页面,需要付费许可证。

为什么图里的页面比我网站上的少?

抓取工具只到达了有链接的页面,或者抓取停在了 500 个 URL 的上限,或者 robots.txt 屏蔽了某个栏目。缺少的页面值得逐个检查。

多久该重新检查一次图?

每次改版、改菜单或新增一批页面之后。变化不大的网站可以隔几个月再查。

您的情况不同?

继续阅读

下一篇Yoast SEO 与语音搜索:它能做什么,不能做什么Yoast SEO 没有语音搜索功能。它的可读性检查、FAQ 区块和结构化数据对语音提问有什么用、没什么用,以及您该修好什么。

问我们一个问题

一句话就够。我们会通过电子邮件回复。

出处

  1. Screaming Frog: Site Architecture & Crawl Visualisations Guide (archived 2026-10-25)
  2. Screaming Frog: SEO Spider user guide, Tabs (archived 2026-11)
  3. Screaming Frog: Pages With High Crawl Depth (archived 2026-10-16)
  4. Screaming Frog: SEO Spider pricing (archived 2026-11-11)
  5. Screaming Frog: SEO Spider pricing in US dollars (archived 2026-11-02)
  6. Google Search Central: Link best practices for Google