Screaming Frog 2026 指南：結合 AI 的技術 SEO 稽核

Screaming Frog 2026 指南：結合 AI 的技術 SEO 稽核

Screaming Frog SEO Spider 是一款桌面版網站爬蟲工具，每次爬取可識別 300 多項技術 SEO 問題，包括失效連結、重複標題、重新導向鏈、缺少結構化資料等。如果你曾好奇代理商如何稽核擁有數百萬頁面的網站，這正是他們首選的工具。

本指南將涵蓋從首次爬取到進階 AI 提示詞整合、自訂 XPath 擷取，以及能在每次稽核中節省數小時的正規表示式（Regex）模式等所有內容。

什麼是 Screaming Frog？為何 SEO 專家對其推崇備至？

Screaming Frog SEO Spider 是一款桌面應用程式，它會像 Google 一樣爬取網站，分析每個 URL 的技術 SEO 問題，如失效連結、缺失的中繼標籤、重新導向鏈和孤立頁面，且完全不會將你的資料傳送至他人的雲端伺服器。

不同於那些限制爬取速度並按 URL 數量收費的雲端爬蟲，Screaming Frog 在你的本機電腦上運行。你可以完全控制爬取深度、渲染方式和速度。這就是為什麼自 2010 年以來，它一直是代理商、企業內部團隊和開發人員進行技術 SEO 稽核的首選工具。

該工具涵蓋回應代碼、頁面標題、中繼描述、H1/H2 分析、圖片替代文字、canonical 標籤、hreflang 實作、結構化資料驗證以及 JavaScript 渲染。它還可與 Google Analytics、Google Search Console、PageSpeed Insights 整合，並且從 v21 版本開始，支援與 OpenAI 和 Google Gemini 等 AI 供應商整合。

若想更全面地了解 Screaming Frog 如何與其他工具搭配使用，請參閱我們完整的 SEO 工具彙整。

免費版 vs. 付費版：你實際能得到什麼

對於小型網站來說，免費版確實非常實用。但一旦超過 500 個 URL 的上限，你就需要付費授權，價格為每年 £199（約 $259）。

如何為首次爬取設定 Screaming Frog

從下載到執行爬取大約只需五分鐘。Screaming Frog 可在 Windows、macOS 和 Linux 上運行，由於它是 Java 應用程式，因此只要環境支援 JVM 即可運作。

下載與安裝

從 screamingfrog.co.uk 下载安装程式。如果你擁有付費授權，請在安裝後透過 Licence > Enter Licence 進行啟用。免費版無需註冊即可立即使用。

真正重要的設定項目

在點擊「Start」之前，請調整以下三項設定：

1. User-Agent，位於 Configuration > User-Agent。預設值為 "Screaming Frog SEO Spider"。若你想查看 Google 所見的內容，請切換為 Googlebot（某些網站會根據 user-agent 提供不同的內容）。

2. 爬取速度，位於 Configuration > Speed。大多數網站使用預設的 5 個執行緒即可。若是你自己的網站，可將其調高至 10-20。對於客戶網站，請保持保守設定以避免觸發速率限制。

3. 渲染模式，位於 Configuration > Spider > Rendering。如果網站使用 React、Angular、Vue 或任何 SPA 框架，請設定為 JavaScript。這會在底層使用 Chromium，雖然會顯著降低爬取速度，但若沒有它，你將錯過動態載入的內容。

4. 記憶體分配，這是大多数人忽略的一點。預設的 2GB 記憶體在大約爬取 30K 個 URL 時就會變得緩慢。

# Increase memory allocation for large sites
# Edit ScreamingFrogSEOSpider.l4j.ini (Windows) or Info.plist (Mac)
-Xmx8g

如果你要爬取擁有 50K+ 頁面的網站，請將記憶體至少提升至 8GB。對於擁有 500K+ URL 的網站，請分配 16GB 並考慮使用資料庫儲存模式（Configuration > System > Storage Mode > Database）。

在頂部欄位輸入你的 URL 並點擊 Start。就是這麼簡單。

執行你的首次技術 SEO 稽核

Screaming Frog 中的技術 SEO 稽核遵循五個步驟：爬取網站、檢視回應代碼、檢查中繼標籤、稽核內部連結，以及為團隊匯出報告，此流程能發現手動審查無法察覺的問題。

根據 Semrush 的 2025 網站健康基準報告，72% 的網站至少在一個關鍵技術 SEO 因素上不及格。根據我們的經驗，任何網站的首次爬取都會揭示至少 5-10 個沒有爬蟲就無法發現的關鍵問題。

若要全面了解技術 SEO 基礎知識，請參閱我們的完整 SEO 指南。

了解回應代碼（200, 301, 302, 404, 500）

爬取完成後，點擊 Response Codes 標籤。以下是需要優先處理的事項：

• 4xx（客戶端錯誤），損壞的頁面。這些需要重新導向或補充內容。請依入站連結（inlinks）排序，優先修復影響最大的頁面。
• 3xx（重新導向），本身並非壞事，但重新導向鏈（301 > 301 > 200）會浪費爬取預算。請檢查 Reports > Redirect Chains。
• 5xx（伺服器錯誤），你的伺服器在處理這些 URL 時出現問題。可能是超時、缺少資料庫記錄或路由設定錯誤。
• 200 但存在問題，頁面雖能正常載入，但內容單薄、標題重複或缺少中繼描述。可使用 Page Titles 或 Meta Descriptions 標籤進行篩選。

中繼標籤與標題稽核

Page Titles 標籤會標記重複、缺失、超過 60 個字元或少於 30 個字元的標題。Meta Descriptions 亦然，可依「Missing」（缺失）、「Duplicate」（重複）或「Over 160 Characters」（超過 160 字元）進行篩選。

依入站連結排序以優先處理被連結最多的頁面。首頁缺少中繼描述的影響遠大於分頁頁面缺少描述。

內部連結分析

Internal 標籤顯示網站上的每個內部連結，包含錨點文字、連結深度以及 follow/nofollow 狀態。有兩件事需要立即檢查：

• 孤立頁面（Orphan pages），沒有任何內部連結指向的頁面。可在 Reports > Orphan Pages 下找到這些頁面（需要 sitemap 或 Google Analytics 整合）。
• 深層頁面，爬取深度超過 3 的頁面獲得的連結權重可能極少。請依 Crawl Depth 篩選，並考慮為重要的深層頁面增加內部連結。

在完成技術稽核後進行內容優化，請參閱我們的 Surfer SEO 內容優化指南。

尋找並修復失效連結、重新導向和 Canonical 標籤

這三個問題佔了大多數網站技術 SEO 問題的大部分。Screaming Frog 能在单次爬取中呈現所有這些問題。

失效連結：3 步驟尋找與修復

1. 前往 Response Codes > 篩選 Client Error (4xx)
2. 右鍵點擊任何失效 URL > 選擇 Inlinks 以查看哪些頁面連結到它
3. 批量匯出清單（Export > All），並連同建議的重新導向目標一併交給開發團隊

專業提示：依入站連結數量排序失效 URL。一個有 50 個內部連結指向它的 404 頁面正在流失連結權重。而一個僅在頁腳有 1 個入站連結的 404 頁面則優先級較低。

重新導向鏈：為何它們會耗盡你的爬取預算

超過 3 跳的重新導向鏈不僅速度慢，Google 甚至可能完全停止追蹤它們。Screaming Frog 會在 Reports > Redirect Chains 下自動標記這些問題。

修復方法很直接：更新來源 URL，使其直接指向最終目的地。如果頁面 A 重新導向到頁面 B，而頁面 B 又重新導向到頁面 C，請將頁面 A 的重新導向更新為直接指向頁面 C。

同時也請檢查 Reports > Redirect Loops。迴圈（A > B > A）會造成無限重新導向並導致瀏覽器錯誤。這些是需要緊急修復的關鍵問題。

Canonical 標籤稽核

在 Canonicals 標籤下，尋找以下三個問題：

• 缺少 canonical，每個可索引頁面都應具有自我參考的 canonical 標籤
• 指向錯誤 URL 的 canonical，頁面將其 canonical 指向不相關的頁面（常見於網站遷移後）
• 不可索引的 canonical 目標，canonical 指向 404 或被 noindex 的頁面，這使其失去作用

使用 XPath 和 CSS 選擇器進行自訂擷取

自訂擷取讓你能在爬取過程中從每個頁面提取特定資料，如結構化資料、追蹤代碼、Open Graph 標籤或任何 HTML 元素，將 Screaming Frog 從稽核工具轉變為全站刮取器。

這是區分進階用戶與初學者的功能，我們在每次稽核中都使用自訂擷取來同時驗證數千頁面上的追蹤代碼和結構化資料標記。你可以將 Screaming Frog 的爬取數據與來自 Semrush 等工具的關鍵字數據結合，以获得更全面的視角。

在 Configuration > Custom > Extraction 下進行設定。選擇 XPath 或 CSS Path，貼上你的選擇器，然後執行爬取。結果將顯示在專屬標籤中。

以下是我在幾乎每次稽核中都會使用的五種擷取方式：

// Extract schema type from JSON-LD
//script[@type='application/ld+json']

// Extract all H2 headings
//h2/text()

/* Extract canonical URL */
link[rel='canonical']::attr(href)

// Extract Open Graph title
//meta[@property='og:title']/@content

// Check for Google Analytics 4 tracking
//script[contains(@src,'gtag')]/@src

JSON-LD 擷取功能特別強大。在整個網站上運行它，你就能立即看到哪些頁面擁有結構化資料，哪些沒有，無需手動逐頁檢查。

每次爬取最多可添加 100 個自訂擷取規則（僅限付費版）。將它們組合起來，只需一次操作即可建立網站元數據、追蹤、結構化資料和第三方腳本的完整稽核報告。

Screaming Frog 的 AI 整合如何與 OpenAI、Gemini 和 Anthropic 協作？

Screaming Frog 的 AI 整合（v21+）在爬取過程中針對每個頁面的內容運行自訂提示詞，讓你能夠使用 OpenAI、Google Gemini、Anthropic Claude 或本地 Ollama 模型，大規模地分類內容品質、檢測缺失的結構化資料、評分中繼描述並尋找內部連結機會。

這是其他 Screaming Frog 指南未曾涵蓋的功能，也是升級至 v23 的最大理由。在測試了 Screaming Frog 中的所有四個 AI 供應商後，OpenAI 在 SEO 分類任務中 consistently 返回結構最良好的回應，儘管 Gemini 2.5 Flash 在簡單的 yes/no 檢查中速度更快且更便宜。

Workshop Digital 記錄了他們如何利用 AI 整合，在遠少於手動審查所需的時間內稽核數千個頁面。

設定 AI 供應商（OpenAI, Gemini, Anthropic, Ollama）

Configuration > AI > 選擇你的供應商。輸入你的 API 金鑰並選擇模型。在 v23 中，預設模型為：

• OpenAI: gpt-5-mini（快速、便宜，適合分類）
• Google Gemini: gemini-2.5-flash（最快選項，適合批量分析）
• Anthropic: claude-sonnet-4-5（最適合細緻的內容分析）
• Ollama: 任何本地模型（免費、私密、無 API 成本，但速度較慢）

每次爬取最多可添加 100 個自訂 Screaming Frog AI 提示詞。結果將顯示在 AI 標籤中，每個提示詞佔一列。

5 個可直接使用的 AI 提示詞範本

將這些直接複製到 Configuration > AI > Add Prompt：

Prompt 1: Content Quality Classifier
"Analyze this page's content. Classify as: Thin (<300 words of unique content), Adequate (300-800 words), Comprehensive (800+ words). Return only the classification and word count."

Prompt 2: Missing Schema Detector
"Review this page's HTML. List any Schema.org types that SHOULD be present based on the content but are MISSING. If the page is a product, check for Product schema. If it's an article, check for Article schema. Return 'None missing' if all appropriate schemas are present."

Prompt 3: Meta Description Quality Scorer
"Score this page's meta description from 1-10 based on: includes primary topic keyword (3pts), has a clear CTA or benefit statement (3pts), is between 145-160 characters (2pts), is unique and not template-generated (2pts). Return score and one-line improvement suggestion."

Prompt 4: Internal Link Opportunity Finder
"Analyze this page's content and identify 3 topics mentioned that could link to other pages on the same site. Return each topic and a suggested anchor text phrase."

Prompt 5: Accessibility Quick Check
"Check this page for: missing alt text on images, missing form labels, low contrast text indicators, missing ARIA landmarks. Return a brief accessibility score (Good/Fair/Poor) with the top issue to fix."

僅「內容品質分類器」這一項就能節省數小時。在擁有 10,000 頁的網站上運行它，你將在幾分鐘內而非幾天內獲得一份內容單薄的報告。

用於常見 SEO 任務的可複製貼上 Regex 模式

Screaming Frog 在 Include/Exclude URL 過濾器和自訂搜尋中支援正規表示式，使得隔離特定頁面類型、尋找追蹤實作或稽核 hreflang 標籤成為可能，而無需手動檢查每個頁面。

大多數 SEO 指南完全跳過正規表示式。這裡有一個我保存在文字文件中並在每次稽核時貼上的模式庫：

使用方法：對於 URL 過濾器，前往 Configuration > Include/Exclude。對於自訂搜尋模式，前往 Configuration > Custom > Search。選擇「Contains」並將搜尋模式設定為 Regex。

分類頁面過濾器（tag|category|author）對於 WordPress 稽核特別有用。這些頁面經常大規模產生內容單薄和重複標題的問題。

Screaming Frog 版本 23 (2026) 有什麼新功能？

Screaming Frog v23 "Rush Hour" 於 2025 年 10 月發布，將 AI 模型預設值更新為 gpt-5-mini、gemini-2.5-flash 和 claude-sonnet-4-5，並添加了 Ahrefs v3 API 整合以及用於更智能重新導向映射的語義相似性嵌入功能。

根據官方發布歷史，以下是 v23.x 版本系列的變更內容：

• v23.0（2025 年 10 月），更新了所有四個供應商的 AI 模型預設值。Ahrefs v3 API 整合取代了舊版的 v2 連接器。用於重新導向映射的語義相似性嵌入功能，現在工具會基於內容相似性而非僅憑 URL 模式來建議重新導向。

• v23.1-v23.3（2025 年 11 月 - 2026 年 2 月），修復了 JavaScript 渲染邊緣情況的錯誤，改善了 100 萬+ URL 爬取的記憶體處理能力，並增加了自動刪除爬取記錄功能（設定爬取記錄在 X 天後自動刪除以管理磁碟空間）。

用於重新導向映射的語義相似性功能是最突出的亮點。在網站遷移期間，你現在可以上傳舊 URL 列表，Screaming Frog 將基於實際頁面內容而非僅憑 URL 結構來建議最佳匹配的新 URL。根據 v23 發布部落格，這使用本地嵌入，資料不會離開你的機器。

Screaming Frog 是否優於 Sitebulb、Lumar 或 Ahrefs Site Audit？

對於想要完全控制、AI 整合和自訂擷取的進階用戶來說，Screaming Frog 是最佳選擇，但 Sitebulb 在視覺化方面勝出，Lumar 適合企業團隊，而如果你已經付費使用 Ahrefs，則 Ahrefs Site Audit 效果最好。

我們曾在相同網站上使用過 Screaming Frog 和 Sitebulb，以下是我們的發現：

結論： 對於想要完全控制和 AI 整合的進階用戶，Screaming Frog 勝出。如果你想要更精美的視覺化效果且不想經歷陡峭的學習曲線，Sitebulb 更好。Lumar 僅在擁有 dedicated SEO 團隊的企業規模下才有意義。如果你已經付費使用 Ahrefs，他們的 Site Audit 對於基本網站爬取分析來說已經足夠好用。

若想更深入地了解 Ahrefs 除了網站稽核之外的功能，請參閱我們的 Ahrefs 深度解析。若要全面比較所有 SEO 工具，請查看我們完整的 SEO 工具彙整。

常見問題

Screaming Frog 是用來做什麼的？

Screaming Frog SEO Spider 用於技術 SEO 稽核。它會爬取你的網站並識別失效連結、缺失或重複的中繼標籤、重新導向鏈、canonical 標籤問題、結構化資料錯誤以及 JavaScript 渲染問題。v21+ 版本還支援使用 OpenAI、Gemini、Anthropic 或 Ollama 進行 AI 驅動的內容分析。

Screaming Frog 是免費還是付費的？

免費版每次 session 最多爬取 500 個 URL，並提供基本功能。付費授權費用為每年 £199（約 $259），解鎖無限爬取、JavaScript 渲染、自訂擷取、AI 整合、排程爬取、爬取比較以及儲存和重新開啟爬取檔案的功能。大多數專業人士都需要付費版。

如何使用 Screaming Frog 進行網站稽核？

在頂部欄位輸入你的 URL 並點擊 Start。爬取完成後，檢視 Response Codes 標籤以查找損壞頁面和重新導向，檢查 Page Titles 和 Meta Descriptions 以查找重複或缺失的標籤，並檢查 Directives 標籤以查找 noindex 問題。在 File > Export 下為你的團隊匯出報告。

如何使用 Screaming Frog 查找失效連結？

爬取後，前往 Response Codes 標籤並篩選「Client Error (4xx)」。這將顯示你網站上的每個損壞頁面。右鍵點擊任何失效 URL 並選擇「Inlinks」以查看哪些頁面連結到它。匯出清單並將 301 重新導向設定到最相關的活躍頁面。

Screaming Frog 免費版和付費版有什麼區別？

免費版將每次爬取限制為 500 個 URL，並禁用儲存爬取記錄、JavaScript 渲染、自訂擷取、AI 整合、API 連接、排程爬取和爬取比較功能。付費版（£199/年）移除所有限制並解鎖所有功能。如果你的網站超過 500 頁，你需要付費版。

Screaming Frog 可以爬取 JavaScript 網站嗎？

可以，但需要付費授權。前往 Configuration > Spider > Rendering 並選擇 JavaScript。Screaming Frog 在底層使用 Chromium 來像瀏覽器一樣渲染頁面。預計爬取時間將比純 HTML 模式增加 3-5 倍。請確保為 JS 密集的網站分配額外記憶體。

如何將 Screaming Frog 的 AI 整合與 OpenAI 一起使用？

前往 Configuration > AI > OpenAI。輸入你的 API 金鑰，選擇 gpt-5-mini（v23 中的預設值），在提示詞欄位中編寫你的提示詞，然後運行爬取。結果將顯示在 AI 標籤中，每個提示詞佔一列。你可以每次爬取運行多達 100 個 Screaming Frog AI 提示詞以進行批量內容分析。

Screaming Frog 可以爬取多少個 URL？

免費版每次爬取上限為 500 個 URL。付費版沒有限制，團隊已成功爬取擁有數百萬 URL 的網站。對於大型網站（50K+），请在配置文件中將記憶體分配增加到 8-16GB，並在 Configuration > System > Storage Mode 下切換到資料庫儲存模式。

Screaming Frog 是否優於 Sitebulb？

Screaming Frog 提供更強大的功能和靈活性，包括與四家供應商的 AI 整合、透過 XPath 和 CSS 選擇器進行深度自訂擷取、用於排程爬取的 CLI 自動化以及更廣泛的 API 整合。Sitebulb 提供更好的視覺化效果和自動生成的稽核報告，對初學者來說更容易上手。大多數經驗豐富的 SEO 專家更偏好 Screaming Frog。

如何在 Screaming Frog 中排程自動化爬取？

這是付費功能。使用 Screaming Frog 的命令列介面配合 Windows 工作排程器或 Mac/Linux 上的 cron。設定命令以使用特定配置文件運行蜘蛛並自動匯出結果。範例：ScreamingFrogSEOSpiderCli --crawl https://example.com --output-folder /reports --export-tabs "Response Codes,Page Titles"。