“Crawled - currently not indexed”(已抓取 - 尚未编入索引)是什么意思
Google 访问了这个页面,暂时决定不把它加进索引。Google 自己的说明:
"The page was crawled by Google but not indexed. Google doesn't index all pages across the web, so this is a common message for many sites and doesn't necessarily indicate an issue that needs attention." (Search Console Help: Page indexing report) 译文:“Google 已抓取该网页,但未将其编入索引。Google 不会将网络上的所有网页都编入索引,因此对很多网站来说这是一条常见消息,并不一定表示存在需要处理的问题。”
Discovered - currently not indexed(已发现 - 尚未编入索引)还在更早一步:“The page was found by Google, but not crawled yet”(Google 已发现该网页,但尚未抓取)。Google 通常推迟抓取,是因为抓取“was expected to overload the site”(预计会让网站负载过重)(同一页面)。对于新页面或新网站,Google 表示开始抓取和编入索引“it can take a week or so”(可能需要一周左右)(同一页面)。
所以先问自己:这是我需要出现在搜索结果里的页面吗?列表里是标签页、旧文章或感谢页,都没问题。主要服务页面才值得修。
页面没被编入索引,我需要担心吗?
如果您的网站不大,多半不需要。Google 说:
"If your site has fewer than 500 pages, you probably don't need to use this report." (Search Console Help) 译文:“如果您的网站少于 500 个网页,您可能不需要使用这份报告。”
不如直接检查关键页面:搜索 `site:yourdomain.com/your-page`,或对首页和主要服务页面运行网址检查(URL Inspection)。Google 还说:“Don't expect every URL on your site to be indexed”(不要指望您网站上的每个网址都被编入索引)(同一页面)。
用大白话解释每种网页编入索引状态
| 状态 | 是什么意思 | 正常吗? | 怎么做 |
|---|---|---|---|
| Crawled - currently not indexed(已抓取 - 尚未编入索引) | Google 看过了,暂时不收 | 常见 | 只有关键页面才修(见下一节) |
| Discovered - currently not indexed(已发现 - 尚未编入索引) | Google 知道这个网址,还没访问 | 先等等 | 从菜单或首页链接到它;等待 |
| Duplicate without user-selected canonical(重复网页,用户未选定规范网页) | Google 把它当作另一个页面的副本,展示的是那一个 | 是:“This is not an error”(这不是错误) | 如果它确实是一项独立服务,让内容明显不同 |
| Duplicate, Google chose different canonical than user(重复网页,Google 选择的规范网页与用户指定的不同) | 您指定了一个主版本,Google 收录了另一个 | 要看看 | 在网址检查中查看 Google 选了哪个网址 |
| Alternate page with proper canonical tag(备用网页,有适当的规范标记) | 指向主页面的一个版本 | 是:“nothing you need to do”(您无需执行任何操作) | 无需处理 |
| Page with redirect(网页会自动重定向) | 旧地址跳转到新地址;只有新地址被编入索引 | 是 | 如果重定向是有意的,无需处理 |
| Excluded by 'noindex' tag(被“noindex”标记排除) | 页面告诉 Google 不要编入索引 | 如果是您有意设置的 | 如果不是,删除 noindex,然后请求编入索引 |
| URL blocked by robots.txt(网址被 robots.txt 屏蔽) | 您的 robots.txt 文件阻止 Google 抓取它 | 如果是您有意设置的 | 如果不是,删除这条规则 |
| Not found (404)(未找到 404) | 页面已不存在 | 是,如果是有意删除的 | 如果是搬了地址,加 301 重定向 |
| Soft 404(软 404) | 显示“找不到”信息,但没有返回 404 代码 | 否 | 返回真正的 404;如果页面应该存在,就补上真实内容 |
| Server error (5xx)(服务器错误 5xx) | Google 请求时您的服务器出错了 | 否 | 问您的主机商;检查页面能否打开 |
以上说明均来自 Search Console 帮助:网页编入索引报告。Google 还说,404“not necessarily a problem, if the page has been removed without any replacement”(如果网页已被移除且没有替代页面,不一定是问题),以及“Redirect URLs are not indexed, only the redirect target”(重定向网址不会被编入索引,只有重定向目标会)(同一页面)。
关键页面“Crawled - currently not indexed”怎么修
没有哪个按钮能强行把页面塞进索引。Google 说它的“systems prioritize the fast inclusion of high quality, useful content”(系统会优先快速收录高质量、有用的内容)(Google Search Central)。所以:
- 检查网址:在 Search Console 中运行实时测试。排除 noindex、robots.txt 屏蔽或需要登录的情况(Search Console 帮助)。
- 确认它不是近似副本。 五个城市页面文字相同,只换了城镇名,看起来就差不多。对于您希望被当作独立页面的,Google 说要“ensure that the content differs substantially”(确保内容有实质差异)(Search Console 帮助)。
- 从首页或主菜单链接到它。 Google 要找到一个页面,需要它“linked from a known page, or from a sitemap”(从已知网页或站点地图链接过来)(同一页面)。
- 请求编入索引一次,在网址检查中操作。“Requesting a crawl does not guarantee that inclusion in search results will happen instantly or even at all”(请求抓取并不保证会立即、甚至一定被收录到搜索结果中),而且有配额限制(Google Search Central)。
- 等待。 “Crawling can take anywhere from a few days to a few weeks”(抓取可能需要几天到几周不等)(同一页面)。
不要反复点“请求编入索引”,也不要花钱买“索引服务”。Google 的 Indexing API“can only be used to crawl pages with either JobPosting or BroadcastEvent embedded in a VideoObject”(只能用于抓取包含 JobPosting,或 VideoObject 中嵌入 BroadcastEvent 的页面)(Google Search Central),不能用于服务页面。
“Crawled - currently not indexed”:“验证失败”
点击“验证修复”(Validate Fix)就是请 Google 重新检查所有有该问题的网址。验证“typically takes up to about two weeks”(通常最多需要大约两周),并且“will stop when Google finds a single remaining instance of that issue”(只要 Google 发现该问题还剩一个实例,就会停止)(Search Console 帮助)。对于“Crawled - currently not indexed”,验证失败表示 Google 重新检查时,至少还有一个页面没被编入索引。您完全可以不做验证:Google 每次重新抓取时都会更新数量(同一页面)。
站点地图能帮页面被编入索引吗?
它帮 Google 找到页面,但不能让 Google 接受页面。“A sitemap helps search engines discover URLs on your site, but it doesn't guarantee that all the items in your sitemap will be crawled and indexed”(站点地图能帮助搜索引擎发现您网站上的网址,但不保证站点地图中的所有内容都会被抓取并编入索引)(Google Search Central)。网站如果“about 500 pages or fewer”(大约 500 个网页或更少),并且页面之间链接良好,可能根本不需要站点地图(同一页面)。
有两件事不值得花时间:
- 优先级和更新频率值。 Google 的站点地图指南说这两个值都会被忽略(Google Search Central)。
- 抓取预算。 Google 的抓取预算指南针对的是大约“1 million+ unique pages”(100 万以上独立网页)的网站,或 10,000 个以上且每天变化的网站(Google Search Central)。如果您的页面不会快速变化,Google 说“you don't need to read this guide”(您不需要阅读本指南)(同一页面)。
示例
一家水管工公司,14 个页面未编入索引
Search Console 显示 14 个网址未编入索引:标签页、一个作者页和两个旧促销页。所有服务页面都已编入索引。什么都不用做。
一家诊所的新疗程页面,“已发现”状态三周
这个页面没有出现在菜单里,只在站点地图中。修法:把它加到菜单和首页,请求编入索引一次,两周后再看。
一家保洁公司有 20 个城市页面,“Crawled - currently not indexed”
每个页面文字相同,只换了城镇名。修法:合并成几个区域页面,每个页面写上当地细节、做过的活和照片,其余页面做重定向。
您的情况不同?
- 整个网站都不在 Google 上,而不只是几个页面:网站在 Google 上搜不到。
- 您想要一套简单的每月 Search Console 例行检查:小企业应该看的报告。
- 旧页面在拖后腿:更新、合并或删除它们。
- 改版后页面掉出了索引:网站改版后流量下降。
- 您在写区域页面:城市页面和门页。
- 您更希望有人帮您处理:SEO 与 GEO 智能体。