用 Screaming Frog 做失效連結建置:找出可替換的失效連結
簡短回答 收集連到很多網站的頁面,例如在地資源清單。把它們貼到 Screaming Frog 的清單模式中,取消爬取深度限制,並只檢查外部連結。每個 4xx 或 No Response 連結,都是您的網頁可能填補的空缺。這樣設定需要每年 $279 的授權;免費版一次可以檢查一個頁面。
想把這些用在您的生意上?預約一次 30 分鐘的免費通話,一起聊聊。
預約通話一張表看懂方法
您不是爬取自己的網站,而是爬取別人那些對外連結很多的頁面,找出其中的失效連結。資源頁就是列出實用連結的頁面:商會的會員名錄、市政府的「社區資源」頁、公會的「尋找專業人士」頁。商家會歇業、會搬遷,所以這類清單累積了很多失效連結。
| 步驟 | 您要做什麼 | 在 Screaming Frog 中的位置(2026 年 11 月) |
|---|---|---|
| 1. 收集 | 找 20–200 個您所在城鎮或行業的資源頁 | 工具之外:Google 搜尋 |
| 2. 設定 | 只檢查這些頁面上的外部連結 | Mode > List;Configuration > Spider > Limits 和 > Crawl |
| 3. 爬取 | 貼上清單並執行 | Upload > Paste |
| 4. 查看 | 找出 4xx 和 No Response 連結,以及各自在哪個頁面上 | Response Codes 分頁;Inlinks;Bulk Export |
| 5. 挑選並聯絡 | 只留下您的網頁確實能替換的失效連結 | 一份試算表和您的電子郵件 |
第 2 到第 4 步依照 Screaming Frog 自己的失效連結建置教學。這個方法背後的道理、如何重建失效頁面以及聯絡信怎麼寫,請看失效連結建置逐步指南。本頁只講爬蟲的設定。
需要付費授權嗎?
用清單模式的方法,需要。Screaming Frog 的價格表把「Crawl Configuration」標為僅付費版可用,它的常見問題也說,沒有授權時「crawls can't be saved, and advanced features and the configuration are restricted」(爬取結果無法儲存,進階功能和設定也受到限制)。這個方法要改兩項設定。
| 免費版 | 付費授權 | |
|---|---|---|
| 價格 | $0 | 每位使用者每年 $279(美元價格),或 £199 |
| 每次爬取的網址數 | 500 | 沒有固定上限;取決於您電腦的記憶體和儲存空間 |
| 清單模式並取消深度限制 | 不行(需要改設定) | 可以 |
| 檢查一個資源頁的外部連結 | 可以,用預設設定即可 | 可以 |
價格來自 Screaming Frog 2026 年 11 月的價格頁。頁面顯示美元、英鎊和歐元價格,沒有加幣價格。一份授權效期一年,供一人使用。
如果您只檢查十幾個頁面一次,免費版就夠了。如果要檢查一百個頁面,或每季重複做一次,授權能省下好幾天。
第 1 步:整理一份資源頁清單
在 Google 上搜尋您所在地區或行業中對外連結的頁面。`site:` 運算子把結果限定在一個網域或字尾內;Google 說它會要求「results from the particular domain, URL, or URL prefix specified」(來自指定網域、網址或網址前綴的結果)。
容易找到資源頁的搜尋:
- `"[your city]" "community resources"`
- `"[your trade]" "recommended contractors"` 或 `"preferred vendors"`
- `"[your city]" chamber "member directory"`
- `site:.gov "[your county]" "helpful links"`
- `site:.edu "[your trade]" resources`
把 [your city]、[your trade]、[your county] 換成您的城市、行業和郡(用英文搜尋)。只留下讀者可能成為您客戶的頁面。社區住戶協會的廠商清單對屋頂承包商有用;全國性的「100 個最佳工具」清單通常沒用。把每個頁面的完整網址貼到試算表裡,每列一個。
第 2 步:設定清單模式,只檢查外部連結
Screaming Frog 的教學用到四項設定。以下選單名稱以 2026 年 11 月為準。
- 切換到清單模式。 Mode > List。清單模式只爬取您給它的網址。
- 取消深度限制。 清單模式教學說,在清單模式下「The 'Limit Crawl Depth' configuration is automatically enabled and set to '0'」(「Limit Crawl Depth」設定會自動開啟並設為「0」),因此您頁面上的連結根本不會被檢查。在 Configuration > Spider > Limits 下取消勾選。
- 只檢查外部連結。 在 Configuration > Spider > Crawl 下,保留 External Links 的勾選,取消其他所有頁面連結和資源類型(內部連結、圖片、CSS、JavaScript)。否則爬蟲會鑽進每個網站自己的頁面。
- 貼上並執行。 Upload > Paste,然後等它跑到 100%。
選用:在 Configuration > Speed 下放慢爬取速度。預設是同時發出 5 個請求,小型協會網站有時會因此封鎖爬蟲。
免費版:一次一個頁面
維持 Spider 模式,輸入一個資源頁的網址。預設設定會檢查外部連結的回應代碼。爬蟲只在您起始的資料夾內爬取,所以從 `chamber.org/resources/` 開始,只涵蓋這個單元,不會爬整個網站。大型網站可能還沒出現有用結果就碰到 500 個網址的上限;盡量從網站更深的位置開始。
第 3 步:查看結果
您要找的目標在兩個篩選條件裡。
- Response Codes > Client Error (4xx)。 大多是 404,也就是找不到頁面。點選其中一筆,再點底部的 Inlinks 分頁,就能看到它在您的哪個資源頁上。
- Response Codes > No Response。 Screaming Frog 對它的定義是「the URL does not send a response」(該網址沒有傳回回應)。通常是整個網域已經過期,例如商家已經歇業。這些往往是最好的目標。
想在試算表裡處理,用 Bulk Export > All External Links。依照教學,來源頁面在 B 欄,失效的目標網址在 C 欄;在狀態欄中篩選 4xx。
聯絡之前,先排除誤報:
| 代碼 | 通常代表什麼 | 怎麼處理 |
|---|---|---|
| 403 | 依 Screaming Frog 常見問題的說法,網站的安全設定拒絕了爬蟲 | 用瀏覽器開啟;通常能正常瀏覽 |
| 429 | 爬蟲發出「too many HTTP requests」(過多 HTTP 請求),速度太快 | 放慢爬取速度後重新檢查 |
| 301 然後 404 | 連結重新導向到一個失效頁面 | 勾選「Always follow redirects」後重新爬取這些目標網址 |
| 404 | 頁面已不存在 | 自己點開確認 |
Screaming Frog 的教學建議先清掉社群媒體和登入連結;它們會重新導向或拒絕爬蟲,浪費時間。
第 4 步:挑出值得爭取的失效連結
只留下您的網頁能真正取代的連結。依以下幾點替候選名單排序,越前面越重要:
- 客戶相同。 資源頁服務的是您的地區或行業。
- 能直接替換。 失效連結原本指向一家和您類似的商家,或一篇您已經有、或寫得出來的指南。
- 頁面仍有人維護。 有最近的日期,或其他連結都能正常開啟,代表還有人在管理。
- 多個頁面有同一個失效連結。 一個替代網頁可以同時推薦給所有這些頁面。
第 5 步:替換並聯絡
寫信給頁面的編輯:寫明是哪個頁面、哪個失效連結,並把您的網頁當作一個可選的替代。不要為連結提供任何回報。Google 的垃圾內容政策把「Exchanging money for links, or posts that contain links」(用金錢交換連結或含連結的文章)和「Exchanging goods or services for links」(用商品或服務交換連結)列為連結垃圾。如何用 Wayback Machine 重建失效頁面,以及美國和加拿大的電子郵件規定,請看失效連結建置逐步指南。要大量撰寫聯絡信,請看AI 外聯。
在試算表裡記錄每次聯絡:已寄出、已回覆、已替換。一個月後,重新爬取成功的頁面,確認您的連結仍在。
範例
以下為示意案例,數字為虛構。
用免費版的水電工(美元)
他找到 12 個在地資源頁,用 Spider 模式逐一爬取。其中 3 個連到一家已經歇業的水電公司,其網域顯示 No Response。他寄信給這三個頁面,附上自己的服務頁。兩個頁面替換了連結。成本:$0 和一個晚上。
檢查 150 個頁面的記帳師(加幣)
她買了授權,因為沒有加幣價格,以 $279 美元計費。她用清單模式檢查了安大略省 150 個小型企業資源頁,找到 40 個失效連結。去掉在瀏覽器中能正常開啟的 403 之後,有 11 個指向已失效的稅務指南,她可以用自己的指南取代。她聯絡了 11 位編輯。
碰到上限的園藝造景業者
他所在城市的公園網站有好幾千個頁面。從首頁開始,免費版爬到 500 個網址就停了,沒有任何有用結果。改從「community gardens resources」資料夾重新開始,爬取順利完成,找到兩個失效的苗圃連結。
常見問題
Screaming Frog 能找出誰連到了另一個網站上的失效頁面嗎?
不能。它只檢查您給它的頁面上的連結。要找出所有連到某個失效頁面的網站,需要 Ahrefs 或 Semrush 這類反向連結資料庫。
爬取別人的網站會惹麻煩嗎?
這很正常,只要溫和一點。Screaming Frog 說它的爬蟲「is robots.txt compliant」(遵守 robots.txt),所以會遵守網站的爬取規則。放慢速度可以避免觸發安全防護。
為什麼爬取結果中有些失效連結在我的瀏覽器裡能開啟?
是網站拒絕了爬蟲(403)或限制了它的請求頻率(429),不是拒絕您。聯絡之前把每個連結都點開看看。
做失效連結建置,免費版夠用嗎?
只檢查幾個在地頁面,夠用。要用清單模式檢查很多頁面,不夠:這需要只有授權才能開啟的設定。
您的情況不同?
- 您想了解完整方法、Ahrefs 做法和電子郵件規定:失效連結建置逐步指南。
- 您剛開始用 Screaming Frog:寫給企業主的 Screaming Frog 指南。
- 從合作夥伴和供應商那裡拿連結比較容易:在地商家的反向連結。
- 您需要幫忙寫大量聯絡信:AI 外聯。
- 您希望有人替您找目標、寄信:SEO 與 GEO 代理。