用 Screaming Frog 做页面 SEO:抓取并修好每个页面
简短回答 安装 Screaming Frog 免费的 SEO Spider,输入您的首页网址,点击 Start。网站少于 500 个网址的话,免费版会列出每个页面的标题、元描述、标题标签和字数。先在每个标签页里筛选 Missing(缺失)和 Duplicate(重复):这些才是真问题。它的长度和字数限制只是提示,不是 Google 的规则。
想把这些用到您的生意上?预约一次 30 分钟的免费通话,一起聊聊。
预约通话Screaming Frog 抓取完后,先修什么
先修缺失和重复的。只是“太长”或“太短”的,以后再说,甚至可以不管。
Screaming Frog 的 SEO Spider 是一款爬虫工具:一个桌面程序,像 Google 的爬虫一样顺着网站上的链接一页一页地走,把每个页面的页面信息放进一张表里。页面 SEO(on-page SEO)指的是每个页面上您能控制的部分:标题、描述、标题标签和正文。
| 提示(标签页 > 筛选) | 是真问题吗? | 怎么修 |
|---|---|---|
| Page Titles > Missing | 是。Google 要求“make sure every page on your site has a title”(确保网站的每个页面都有标题) | 每个页面写一个 |
| Page Titles > Duplicate | 是,针对您希望被搜到的页面 | 每个页面用自己的标题:先写服务,再写城镇或细节 |
| Meta Description > Missing 或 Duplicate | 重要页面值得修 | 每个页面一段简短、具体的摘要 |
| H1 > Missing | 通常是:页面没有可见的主标题 | 加一个,说明这个页面是什么 |
| Content > Exact Duplicates | 是,如果两个页面都需要存在 | 合并,或把一个重定向到另一个 |
| Content > Low Content Pages | 可能。看看页面有没有回答它的问题 | 补上客户常问的内容,或并入更完整的页面 |
| Images > Missing Alt Text | 有意义的照片值得修 | 用几个词描述图片 |
| Over 60 characters、Over 155 characters、Multiple H1 | 只是提示 | 只有搜索结果显示得不好时才改 |
这个工具自己的指南说,Issues 标签页里的优先级“not hard rules”(不是硬性规则),并且“no tool can provide that as they lack context”(没有工具能做到这一点,因为它们缺乏背景信息)(Screaming Frog SEO Spider user guide: Tabs)。
您需要它吗?要花多少钱?
对小企业网站来说,免费版通常就够了。每次抓取最多 500 个网址(Screaming Frog: SEO Spider pricing)。
"For £199 a year you can buy a licence, which removes the 500 URL crawl limit." (Screaming Frog SEO Spider user guide: General) 译文:“每年 £199 即可购买许可证,取消 500 个网址的抓取上限。”
| 免费版 | 许可证 | |
|---|---|---|
| 价格 | $0 | 每位用户每年 £199(5 位用户起有批量折扣);价格页面也提供美元和欧元选项 |
| 每次抓取的网址数 | 500 | 只受您电脑的内存和硬盘限制 |
| 标题、描述、标题标签、失效链接、完全重复 | 有 | 有 |
| 近似重复(大部分内容相同的页面) | 无 | 有 |
| 拼写和语法检查 | 无 | 有 |
| 修改设置、保存并重新打开抓取 | 无 | 有 |
| 在每个页面旁显示 Search Console 和 Analytics 数据 | 无 | 有 |
如果您的网站超过 500 个网址,或者网站有很多相似页面(例如各城镇页面)需要做近似重复检查,就买许可证。否则,免费抓取加上 Google Search Console(看 Google 实际展示了哪些页面)就够了。
一步步抓取您自己的网站
截至 2026 年 11 月,25.1 版,免费版:
- 安装。 从 Screaming Frog 网站下载 SEO Spider。它支持 Windows、macOS 和 Ubuntu,使用指南说它需要“a 64-bit OS with at least 4gb of RAM available”(64 位操作系统,至少有 4GB 可用内存)。
- 开始。 在顶部的“Enter URL to spider”框中输入您的首页,例如 https://www.yoursite.com,然后点击 Start。
- 等到 100%。 右侧的 Overview 标签页会边抓取边填入每个筛选的数量。
- 关闭前先导出。 保存抓取需要许可证。选一个标签页和筛选,然后点击左上角的 Export;它只保存该筛选显示的行(user guide: General)。对每个您要处理的清单都这样做一次。
- 看右侧的 Issues 标签页。 它列出发现的每个问题,每个都标为 Issue、Opportunity 或 Warning,以及 High、Medium 或 Low 优先级。
找出缺失和重复的标题
打开 Page Titles,使用筛选下拉菜单。要清掉的是“Missing”和“Duplicate”这两项。工具解释了重复为什么有害:如果每个页面标题都一样,“it can make it more challenging for users and the search engines to understand one page from another”(用户和搜索引擎会更难区分不同页面)(user guide: Tabs)。
常见原因:主题或插件给每个页面都用同一个标题,例如公司名。同时装了两个 SEO 插件,会出现在“Multiple”下面。
“Over 60 characters”筛选是这个工具的限制,不是 Google 的。Google 没有设上限。它说过长的标题“is truncated in Google Search results as needed, typically to fit the device width”(会在 Google 搜索结果中按需截断,通常是为了适应设备宽度)(Google Search Central: Influencing your title links)。
所以一个 68 个字符、把服务和城镇放在前面的标题完全没问题。怎么写:SEO 标题。
元描述:补上缺口,不用追字数
Meta Description 标签页也有 Missing 和 Duplicate 筛选,另外还有 Over 155 characters 和 Below 70 characters。
描述是搜索结果中您页面下方的那段摘要。Google 很多时候会自己写摘要:
"Google primarily uses the content on the page to automatically determine the appropriate snippet." (Google Search Central: Control your snippets in search results) 译文:“Google 主要根据页面上的内容自动确定合适的摘要。”
它仍然要求每个页面各有一段:“Identical or similar descriptions on every page of a site aren't helpful when individual pages appear in search results.”(当单个页面出现在搜索结果中时,网站每个页面都用相同或相似的描述是没有帮助的。)先从服务页面和首页开始。详见元描述。
薄弱的标题标签:H1 和 H2 标签页显示什么
标题标签是页面内部的标题。H1 是主标题,H2 把页面分成几个部分。H1 标签页的筛选有 Missing、Duplicate、Over 70 characters、Multiple、Alt Text in h1 和 Non-sequential。
重要的是:
- 缺少 H1。 页面的主标题往往只是加了样式的文字,或者是一张图片,所以没有东西告诉读者或机器这个页面讲什么。
- 重复的 H1。 十个服务页面都以“Our Services”为标题,这就是要修的薄弱标题。写出服务名称。
- 您的 H2 清单。 点击 H2 标签页,从上往下读一个服务页面的各个标题。有没有涵盖价格、流程、服务区域和常见问题?这里的缺口就是您接下来要写的内容。
不重要的,根据 Google 的 SEO 入门指南:
"Having your headings in semantic order is fantastic for screen readers, but from Google Search perspective, it doesn't matter if you're using them out of order." 译文:“标题按语义顺序排列对屏幕阅读器非常好,但从 Google 搜索的角度看,顺序乱了也没关系。”
Screaming Frog 自己也说多个 H1“not strictly an issue”(严格来说不算问题),因为网页标准允许这样做。只有在让读者困惑时才修。详见 H1 标签。
内容单薄的页面:用好字数
打开 Content > Low Content Pages。默认列出少于 200 个单词的 HTML 页面(user guide: Tabs)。工具提醒说“there isn't a minimum word count for pages in reality”(实际上页面并没有最低字数要求)。Google 也这么认为:
"The length of the content alone doesn't matter for ranking purposes (there's no magical word count target, minimum or maximum, though you probably want to have at least one word)." (Google Search Central: SEO Starter Guide) 译文:“仅凭内容长度对排名没有影响(没有神奇的字数目标,无论最少还是最多,不过您大概至少要有一个字)。”
把这份清单当作阅读清单,而不是待办清单。打开每个页面问自己:客户能在这里找到答案吗?150 个单词的联系页面没问题。一个 120 个单词、没有价格范围、服务区域或流程的“Water heater repair”页面就是单薄的。把来电客户常问的内容补上。如果两个单薄页面讲的是同一项服务,就合并。参见内容长度与 SEO。
重复页面:完全重复和近似重复
Content > Exact Duplicates 列出逐字完全相同的页面;只要差一个字符就不会显示(user guide: Tabs)。小网站常见的原因是同一个页面有两个地址,例如带和不带结尾斜杠,或者测试副本没有下线。
近似重复,例如 30 个只换了城镇名称的城镇页面,需要许可证:在 Config > Content > Duplicates 中开启,默认阈值是 90% 相似。
Google 对第一种的看法:
"Having duplicate content on your site is not a violation of our spam policies, but it can be a bad user experience and search engines might waste crawling resources on URLs that you don't even care about." (Google Search Central: SEO Starter Guide) 译文:“网站上有重复内容并不违反我们的垃圾内容政策,但可能带来糟糕的用户体验,搜索引擎也可能把抓取资源浪费在您根本不在意的网址上。”
所以这是日常整理,不是处罚。如何决定保留哪个副本:重复内容。
示例
以下为示意案例,数字为虚构。
一位有 40 个页面的水管工(美元)
免费抓取找到 112 个网址。Page Titles > Duplicate 显示 14 个服务页面的标题都是“Smith Plumbing”。他把它们改写成“Water Heater Repair in Tulsa | Smith Plumbing”等。Low Content Pages 列出 9 个页面,其中 6 个是联系页和感谢页,他不去动。工具费用:$0。
渥太华的一家牙科诊所(许可证以英镑计价)
网站有 1,300 个网址,大部分是博客文章,所以免费抓取在 500 个时停止。诊所老板买了许可证(每年 £199)来抓取全站,并对 25 个治疗项目页面做近似重复检查,发现其中 8 个有超过 90% 的文字相同。
一位 H1 是标志图片的园林绿化师
H1 > Missing 列出了每个页面。他的主题把标志放在了标题位置。在主题设置里改一处,每个页面就有了文字标题。
常见问题
Screaming Frog 免费版够做页面 SEO 吗?
网站少于 500 个网址的话,基本够。它能显示标题、描述、标题标签、字数和完全重复;近似重复、拼写检查和保存抓取需要许可证。
Issues 标签页里的“High”优先级是什么意思?
这是工具对潜在影响的估计。Screaming Frog 说优先级“not hard rules”(不是硬性规则),并且这个标签页“does not substitute expertise”(不能替代专业判断)。
每个超过 60 个字符的标题都要改吗?
不用。Google 没有标题长度限制;它会缩短标题以适应屏幕。先修缺失和重复的标题。
多久重新抓取一次?
改版、更换主题或插件,或新增大量页面之后。一次主题更新就可能同时重置所有页面的标题或标题标签。
您的情况不同?
- 您还想检查失效链接、重定向和被屏蔽的页面:自己做 SEO 审核。
- 您想抓取的是竞争对手的网站:用 Screaming Frog 分析竞争对手。
- 您要从头重写一个服务页面:服务页面的页面 SEO。
- 页面在 Google 上根本不显示:小企业如何使用 Google Search Console。
- 您希望有人替您抓取并修好:SEO 与 GEO 智能体。