重複內容:SEO 上如何找出並修正
簡短回答 重複內容不會受到懲罰。Google 會把同一網頁的多個副本歸為一組,只顯示其中一個,而且可能選到您不想要的版本。用 Search Console 的網址檢查工具找出重複網頁。副本不該存在時用 301 重新導向修正,副本必須保留時用標準標記。不要為此使用 robots.txt 或 noindex。
想把這些用在您的生意上?預約一次 30 分鐘的免費通話,一起聊聊。
預約通話重複內容對 SEO 有害嗎?
沒有多數人擔心的那麼嚴重。一般的重複內容不會受到懲罰。Google 在自己的文件中明確說過:
"Some duplicate content on a site is normal and it's not a violation of Google's spam policies." (Google Search Central: What is canonicalization) 譯文:「網站上有一些重複內容是正常的,並不違反 Google 的垃圾內容政策。」
實際情況是:Google 發現看起來一樣的網頁,把它們歸為一組,然後挑一個顯示在搜尋結果中。被選中的網頁就是標準網址(canonical)。其他網頁被檢索的頻率會降低,也很少出現在結果中(同一網頁)。
因此會帶來三個真正的代價:
| 問題 | 為什麼重要 |
|---|---|
| Google 可能顯示錯誤的版本 | 舊的 `http://` 網頁,或結尾帶追蹤代碼的連結,可能取代您乾淨的服務網頁出現在結果中 |
| 權重被分散 | 其他網站的連結指向不同版本。指定一個標準網址後,Google 可以把這些權重合併到同一個網頁(Google Search Central) |
| 數據變得混亂 | 造訪量分散在多個網址上,很難看清單一網頁的成效(同一網頁) |
唯一真正有害的情況:複製其他網站的內容來爭取排名。Google 的垃圾內容政策把轉載他人內容而「without adding any original content or value」(未添加任何原創內容或價值)列為濫用性擷取(Google Search Central: Spam policies)。那是內容問題,不是技術問題。
小型企業網站上的重複內容是怎麼產生的?
大多來自網站設定,而不是文字本身:同一個網頁能透過多個地址(網址)開啟。
| 原因 | 例子 | 常見修正 |
|---|---|---|
| 安全版和舊版都能開啟 | `http://` 和 `https://`,有和沒有 `www` | 全部 301 重新導向到同一個 |
| 追蹤或排序代碼 | 廣告點擊帶來的 `/drain-cleaning/?gclid=123` | 在乾淨網址上加標準標記 |
| 大寫字母或結尾斜線 | `/Roof-Repair` 和 `/roof-repair/` | 重新導向,並且只用一種寫法連結 |
| 測試或展示用副本沒有關閉 | `staging.yoursite.com` 被 Google 收錄 | 設定密碼保護 |
| 改版後新舊網頁並存 | `/services.html` 和 `/plumbing/` 內容相同 | 從舊網頁 301 重新導向到新網頁 |
| 同語言的不同國家網站 | 美國網頁和加拿大網頁內容一樣 | 標準標記加 hreflang |
Google 列出的也是這幾類:通訊協定、地區、裝置、排序和篩選,以及「accidental variants」(意外產生的變體),例如對檢索器開放的展示網站(Google Search Central)。Google 也說網址區分大小寫,所以對 Google 來說 `/Roof-Repair` 和 `/roof-repair` 是兩個網頁(Google Search Central: URL structure)。
如果您同時服務美國和加拿大,而且兩邊網頁幾乎一樣,Google 稱之為地區性重複內容。它建議同時使用標準標記和 hreflang(標明網頁針對哪個國家或語言的標記),讓每個國家顯示正確的網頁(Google Search Central)。請參閱多語言和多地區網站。
如何找出網站上的重複內容?
先看 Google 自己怎麼看,使用免費的 Google Search Console。
- 對重要網頁使用網址檢查(URL Inspection)。 貼上首頁和每個主要服務網頁,它會顯示 Google 選了哪個網址作為標準網址。Google 的疑難排解指南就是從這裡開始(Google Search Central: Fix canonicalization issues)。
- 網頁索引報告(Page indexing)。 找出與重複相關的狀態。「Duplicate without user-selected canonical」(重複網頁,使用者未選取標準網頁)表示 Google 自己選了一個版本;「Duplicate, Google chose different canonical than user」(重複網頁,Google 選擇的標準網頁與使用者指定的不同)表示它沒有採用您指定的(Search Console Help: Page indexing report)。各狀態的意思請見我們的網頁索引狀態指南。
- 在瀏覽器輸入網址的四種寫法:`http://`、`https://`、有和沒有 `www`。四種都應該導向同一個地址。如果有兩個停在原地,就表示有重複。
- 在 Google 搜尋 `site:yourdomain.com`。 留意同一個標題出現兩次,或帶有 `?` 代碼的網址。
- 把網頁中的一句話加上引號搜尋。 如果其他網站出現同一句話,不是他們抄了您,就是您用了供應商的文字。
如何修正重複內容?
依照副本是否需要繼續能開啟來選擇。
| 方法 | 適用情況 | 效力 |
|---|---|---|
| 301 重新導向 | 副本不該存在(舊網頁、`http`、沒有 `www`) | 強 |
| 標準標記 | 副本必須繼續能開啟(追蹤代碼、排序方式、列印版) | 強 |
| 網站地圖中只列主要網址 | 任何網站的輔助信號 | 弱 |
| 讓網頁真正不同 | 它們確實是不同的服務或地區 | 徹底區分開來 |
Google 把重新導向和標準標記列為強信號,網站地圖列為弱信號,並說搭配使用效果更好(Google Search Central: How to specify a canonical URL)。不過,您的選擇只是一個提示:
"indicating a canonical preference is a hint, not a rule." (Google Search Central: What is canonicalization) 譯文:「指定偏好的標準網址只是一個提示,而不是規則。」
另外,在整個網站上都連結到主要版本。Google 說一致的內部連結有助於它理解您的偏好(與上述各方法同一網頁)。
如何加上標準標記?
在每個副本程式碼的 head 區段加一行,指向主要網頁。它是一個 link 元素,`rel="canonical"`,`href` 設為主要網頁的地址,例如 `https://www.yoursite.com/drain-cleaning/`。
- 使用完整地址,包含 `https://`。Google 支援簡短路徑,但不建議使用。
- 在主要網頁上也加同樣的標記,指向它自己。
- Google 只讀取 head 區段中的這個標記。
這三條規則都來自 Google 的標準網址指南(Google Search Central)。在 Wix、WordPress 或 Blogger 上您可能無法編輯程式碼:Google 說您的平台可能會透過 SEO 設定頁面來設定標準網址(同一網頁)。如果您正在挑選平台,請參閱 Wix、Squarespace 和 WordPress 的比較。
修正之後,Google 說網頁可能會繼續被歸為重複內容「for up to two weeks」(最長兩週)。之後您可以在網址檢查中對最重要的網頁使用「要求建立索引」(Request Indexing)(Google Search Central: Fix canonicalization issues)。
讓重複內容問題更糟的錯誤
| 錯誤 | Google 怎麼說 |
|---|---|
| 用 robots.txt 封鎖副本 | 不要這樣做。被封鎖的網址仍可能被收錄,只是沒有內容 |
| 在副本加上 noindex | 不建議:這會讓該網頁完全無法出現在搜尋中。請用標準標記 |
| 使用網址移除工具 | 它會隱藏該網址的所有版本 |
| 在不同地方指定不同的標準網址 | 網站地圖和標記必須一致 |
| 把清單的第 2、3、4 頁都指向第 1 頁 | 系列中的每一頁都應使用自己的標準網址 |
| 尋找網址參數(URL Parameters)設定 | Google 已於 2022 年停用;現在它會自行處理 `?sort=` 這類代碼 |
前四條來自 Google 的標準網址指南(Google Search Central)。分頁一條來自其分頁指南(Google Search Central)。網址參數工具的停用於 2022 年 3 月宣布(Google Search Central Blog)。
如果別的網站抄了我的內容,或轉載我的文章怎麼辦?
如果您允許合作夥伴轉載您的文章,請他們不要讓轉載的副本被 Google 收錄:
"The canonical link element is not recommended for those who want to avoid duplication by syndication partners, because the pages are often very different. The most effective solution is for partners to block indexing of your content." (Google Search Central: Fix canonicalization issues) 譯文:「如果想避免與內容轉載合作夥伴之間的重複,不建議使用標準連結元素,因為這些網頁往往差異很大。最有效的做法是請合作夥伴封鎖您的內容,不讓它被編入索引。」
如果有網站未經許可抄襲了您,Google 說您可以要求對方的主機商移除,並透過《數位千禧年著作權法》(DMCA)要求請 Google 移除該網頁(同一網頁)。Google 的移除步驟請見從 Google 移除資訊。
範例
廣告連結出現在搜尋結果中的水電工
網址檢查顯示 Google 選了 `/drain-cleaning/?gclid=...` 作為標準網址。老闆加上指向 `/drain-cleaning/` 的標準標記,並在選單中連結到這個乾淨的地址。幾週後,網址檢查顯示 Google 選中的是乾淨網址。
網站改版後的牙醫
舊的 `/services.html` 和新的 `/teeth-whitening/` 都能開啟,內容相同。從舊網頁 301 重新導向到新網頁,既消除了副本,也把舊網頁的連結權重轉移過去。
同時服務西雅圖和溫哥華的清潔公司
美國和加拿大的網頁一字不差。每個網頁都加上指向自己的標準標記,並用 hreflang 標記分別標明 `en-us` 和 `en-ca`,讓每個國家看到的都是自己的網頁。
常見問題
Google 會懲罰重複內容嗎?
自己網站上的一般重複內容不會。Google 說這很正常,不違反垃圾內容政策。複製其他網站的內容來爭取排名則不同:那屬於其擷取濫用政策的範圍。
應該用 301 重新導向還是標準標記?
沒有人需要副本時用重新導向。副本必須繼續能開啟時用標準標記,例如帶追蹤代碼的網頁。
為什麼 Google 忽略了我的標準標記?
因為它只是提示。如果信號互相衝突,例如連結、重新導向或網站地圖指向別處,Google 可能會選另一個網頁。在網址檢查中看看 Google 選了哪個,然後讓所有信號保持一致。
不同城鎮的相似服務網頁算重複內容嗎?
如果只有城鎮名稱不同,Google 可能會把它們歸為一組,只顯示一個。主要為了搶城鎮搜尋而做的網頁也可能被視為門戶網頁(doorway pages);請參閱城市網頁。
多久檢查一次?
在網站改版、更換平台或搬移網域之後,以及網頁索引報告顯示新的重複網頁時檢查。小網站很少需要更頻繁。
您的情況不同?
- 好幾個舊網頁講同一個主題? 合併後做重新導向:更新、合併或刪除舊網頁。
- 新網站上線後流量下降? 重複內容和缺少重新導向是常見原因:改版後流量下降。
- 網路商店有顏色和尺寸變化? 請參閱電商 SEO。
- 剛接觸 Search Console? 先從該看的報告開始。
- 想找人幫您做這些檢查? 請參閱 SEO。