产品 SEO 与 GEO 智能体 付费广告智能体 网站智能体 转化智能体
运作方式 方案 常见问题 博客 预约通话

AI 技术 SEO 入门:哪些工作可以交给 AI 自动完成

更新于 · 阅读约 7 分钟

简短回答 AI 可以不间断地监控网站的技术状况:找出失效链接和重定向链,标出加载慢的页面,保持站点地图最新,并起草结构化数据、图片替代文字和重定向清单。在它改动任何东西之前,先保存基准数据、备份网站,并只给只读权限。robots.txt、重定向、canonical 和 noindex 标签的改动,必须经过您批准。

想把这些用到您的生意上?预约一次 30 分钟的免费通话,一起聊聊。

预约通话

AI 技术 SEO:哪些工作可以交给 AI 自动完成?

技术 SEO 是让搜索引擎能访问、读取并收录您页面的那套基础设置。AI 擅长发现技术问题并起草修复方案。但一处改动影响所有页面时,风险就大了。按“工具出错会怎样”来给每项工作分类。

技术工作AI 擅长什么能否不经您直接上线?限制它的规则
网站抓取:失效链接、404 页面、重定向链每周找出问题并列出修复方法找问题可以。修复只限简单的链接替换每个失效页面该指向哪里,由人来决定
站点地图(给 Google 的页面清单)页面变动时保持更新可以,前提是您的建站平台还没自动做只有“consistently and verifiably”(始终且可验证地)准确时,Google 才会使用最后修改日期(Google Search Central: Build and submit a sitemap)
页面速度(核心网页指标,Core Web Vitals)找出慢的页面和原因图片压缩可以。主题、插件或主机的改动不行好分数有帮助,但不保证排名靠前(Google Search Central: Understanding page experience)
结构化数据标记(标注商家信息的代码)根据页面内容写出代码不行,先检查必须与页面上显示的内容一致(见下文)
图片替代文字(每张图片的简短描述)批量起草抽查一部分后可以Google 提醒不要“filling alt attributes with keywords”(在 alt 属性里堆砌关键词)(Google Search Central: Image SEO best practices)
robots.txt(告诉爬虫可以去哪里的文件)起草规则并测试不行写错一行就可能屏蔽整个网站
canonical 和 noindex 标签(哪个页面算数、哪个页面不进 Google)找出冲突不行用脚本修改它们的工具可能出错(见下文)
改版后的重定向清单把旧页面对应到新页面不行Google 建议重定向保留“generally at least 1 year”(一般至少 1 年)(Google Search Central: Site moves with URL changes)
服务器日志(主机记录的每一次访问,包括机器人)显示哪些搜索和 AI 机器人来访、遇到哪些错误可以,它只读取无

规律是:让 AI 随意读取和报告;只在出错代价小、容易撤销的地方让它写入。

AI 比普通 SEO 爬虫多了什么?

发现错误并不新鲜。Screaming Frog 和 Ahrefs 免费的 Site Audit 等爬虫工具多年来一直在列出失效链接和缺失的标题。AI 多了三样:

  • 用大白话分轻重。 它会说明在一个 30 页的服务类网站上,200 条警告里哪些要紧,哪些可以忽略。
  • 直接起草修复。 它会写出结构化数据代码、重定向清单或 robots.txt 规则,而不只是指出问题。
  • 按时检查。 它每周自动检查,不需要有人记着。

它仍然做不到的:知道哪个页面给您带来电话,或者判断一个旧页面该重定向还是保留。这是商业判断。

不需要。Google 表示,它的 AI 回答和普通搜索用的是同一套基础:

"There are no additional requirements to appear in AI Overviews or AI Mode, nor other special optimizations necessary." (Google Search Central: AI features and your website) 译文:“出现在 AI 概览或 AI 模式中没有额外要求,也不需要其他特殊优化。”
"You don't need to create new machine readable files, AI text files, or markup to appear in these features. There's also no special schema.org structured data that you need to add." (same page) 译文:“您无需创建新的机器可读文件、AI 文本文件或标记,就能出现在这些功能中。也没有需要额外添加的特殊 schema.org 结构化数据。”

所以,任何为 Google 推销特殊“AI 文件”或“AI 结构化数据”的工具都可以跳过。重要的是基础:页面已被收录,爬虫能进来,关键信息以文字写出,结构化数据要“matches the visible text on the page”(与页面上可见的文字一致)(同一页面)。

ChatGPT 有自己的爬虫规则。OpenAI 表示:

"Sites that are opted out of OAI-SearchBot will not be shown in ChatGPT search answers, though can still appear as navigational links." (OpenAI: Overview of OpenAI crawlers) 译文:“选择屏蔽 OAI-SearchBot 的网站不会出现在 ChatGPT 的搜索回答中,但仍可能以导航链接的形式出现。”

这个机器人和收集训练数据的 GPTBot 是分开的。您可以允许一个、屏蔽另一个;参见该不该屏蔽 AI 爬虫? 完整的准备清单见 AI 搜索网站检查清单。

在 AI 工具接触网站之前,如何做好准备

在开启任何功能之前,把下面五步做一遍。

步骤做什么为什么
1. 保存基准数据在 Search Console 里记下已收录的页面数,导出搜索效果数据,截图核心网页指标报告。记下上个月的来电和表单潜在客户数没有“之前”的数据,就无法判断工具有没有帮上忙
2. 备份网站确认您的主机或建站平台能恢复到昨天的版本,以及怎么恢复一次批量改错,只需 5 分钟回滚,而不用重建
3. 先只给只读权限Search Console 和分析工具给只读;网站只允许草稿让工具在能改动任何东西之前先证明自己
4. 定一条改动规则列出哪些可以自动上线、哪些要等您批准(见上表)避免 robots.txt、重定向和标签出现意外
5. 开启改动记录每次改动都记下日期、页面和撤销方法上线的内容由您负责,心里有数

第 3 步正是 Google 对任何外部帮手做审核时的建议:

"only grant read access to Search Console (at this stage, don't grant them write access)" (Google Search Central: Do you need an SEO?) 译文:“只授予 Search Console 的读取权限(在这个阶段,不要授予他们写入权限)”

各平台该选哪种角色,见 AI SEO 智能体的替代方案。

第 5 步之所以重要,是因为不管谁来改,网站都是您的。Google 表示:“Ultimately, you are responsible for the actions of any companies you hire”(归根结底,您要为所雇用的任何公司的行为负责),任何有服务器权限的人都“should be willing to explain all the changes they are making to your site”(应该愿意解释他们对您网站所做的所有改动)(Google Search Central: Do you need an SEO?)。

哪些技术改动必须始终等您批准?

任何可能一次性隐藏或删除大量页面的改动。

  • robots.txt。 很多工具把它当作隐藏页面的方法。Google 表示,它“is not a mechanism for keeping a web page out of Google. To keep a web page out of Google, block indexing with noindex or password-protect the page.”(不是让网页不出现在 Google 中的机制。要让网页不出现在 Google 中,请用 noindex 阻止收录,或为页面设置密码保护。)(Google Search Central: Introduction to robots.txt)。如何安全地修改:robots.txt 设置。
  • 由脚本设置的 canonical 和 noindex 标签。 一些“一键修复”工具会在页面加载后注入代码。Google 表示,您“shouldn't use JavaScript to change the canonical URL to something else”(不应使用 JavaScript 把 canonical 网址改成别的),而且“using JavaScript to change or remove the robots meta tag from noindex may not work as expected.”(用 JavaScript 修改或移除 robots meta 标签中的 noindex,可能无法达到预期效果。)(Google Search Central: JavaScript SEO basics)
  • 结构化数据标记。 Google 的规则是:“Don't mark up content that is not visible to readers of the page.”(不要标记页面读者看不到的内容。)违反这条可能招致人工处置,即“means that a page loses eligibility for appearance as a rich result”(页面失去以富媒体搜索结果展示的资格)(Google Search Central: General structured data guidelines)。
  • 重定向。 错误的重定向会把访客和 Google 带到错误的页面。上线前先批准新旧页面对照清单。
  • 全站模板改动。 改一次页头或主题,就会影响每一个页面。先在一个页面上检查。

AI 工具仍在重复的过时技术建议

AI 工具从旧文章里学习,所以会重复过时的步骤。要留意这四条:

  • “查看移动设备易用性报告。” 已经没有了。Google 在 2023 年 12 月 1 日停用了该报告、移动设备适合性测试及其 API,并建议改用“Lighthouse from Chrome”(Chrome 的 Lighthouse)(Google Search Central Blog, April 2023)。
  • “添加 FAQ 结构化数据以获得富媒体结果。” 从 2023 年 8 月起,FAQ 富媒体结果只对“well-known, authoritative government and health websites”(知名、权威的政府和健康网站)显示。HowTo 富媒体结果已于 2023 年 9 月弃用(Google Search Central Blog, August 2023)。
  • “设置站点地图优先级。” Google 表示它会忽略站点地图里的优先级和更新频率值(Google Search Central: Build and submit a sitemap)。
  • “添加特殊的 AI 结构化数据或文件。” 如上文引述,Google 的 AI 功能不需要这些。

示例

一个 25 页、用 WordPress 搭建的水管工网站

AI 工具第一次抓取发现 14 个失效链接、3 条重定向链和 40 张没有替代文字的图片。老板让它修复链接和重定向链,抽查了 10 条替代文字草稿,然后批准了其余的。它还建议在 robots.txt 里屏蔽 /services/ 来“节省抓取预算”。老板拒绝了:带来电话的正是这些页面。

一家用“一键结构化数据”插件的牙科诊所

插件给每个页面都加上了评价星级,但网站上根本没有显示任何评价。这违反了 Google 的可见内容规则。诊所关掉了这个功能,保留了插件的失效链接报告。

一家想被 ChatGPT 找到的园林绿化公司

服务器日志显示,OAI-SearchBot 被主机防火墙返回“blocked”(已屏蔽)。老板请主机放行 OpenAI 公布的地址。不需要任何新文件或结构化数据。

常见问题

AI 能自动修复技术 SEO 问题吗?

能修一部分。失效链接、图片压缩和站点地图可以放心自动化。重定向、robots.txt、canonical 和 noindex 的改动需要人来把关:一个错误就会影响所有页面。

我需要 llms.txt 文件吗?

对 Google 来说不需要。Google 表示,出现在 AI 概览或 AI 模式中不需要“AI text files”(AI 文本文件)。一个已被收录、关键信息以文字写出的网站才有帮助。

小网站值得做 AI 技术 SEO 吗?

您的建站平台通常已经包办了基础工作,包括站点地图。每周一次的 AI 检查,主要是抓出您新增页面或插件时出的问题。

网站速度会影响 Google 排名吗?

会。Google 表示:“Core Web Vitals are used by our ranking systems.”(我们的排名系统会使用核心网页指标。)目标是:主要内容在 2.5 秒内加载,点击在 200 毫秒内得到响应,版面几乎不跳动。

您的情况不同?

继续阅读

下一篇AI SEO 自动化:提示词、E-E-A-T 和要避开的坑怎样给 AI 下达任务,让它的 SEO 工作真正可用;怎样让 AI 页面符合 Google 的 E-E-A-T 而值得信赖;以及哪些自动化错误会让排名下滑。

自己动手

AI SEO 智能体评测:选择之前的 8 项检查用您自己的 Search Console 和网站账户做 8 项测试,看出 AI SEO 智能体是在您的网站上真正干活,还是只会发报告。

问我们一个问题

一句话就够。我们会通过电子邮件回复。

出处

  1. Google Search Central: AI features and your website
  2. Google Search Central: Do you need an SEO?
  3. Google Search Central: General structured data guidelines
  4. Google Search Central: JavaScript SEO basics
  5. Google Search Central: Introduction to robots.txt
  6. Google Search Central: Site moves with URL changes
  7. Google Search Central: Build and submit a sitemap
  8. Google Search Central: Image SEO best practices
  9. Google Search Central: Understanding page experience
  10. Google Search Central: Core Web Vitals
  11. Google Search Central Blog: More on page experience (April 2023)
  12. Google Search Central Blog: Changes to HowTo and FAQ rich results (August 2023)
  13. OpenAI: Overview of OpenAI crawlers