
스크리밍 프로그 가이드 2026: AI 통합 기술적 SEO 감사
스크리밍 프로그 SEO 스파이더(Screaming Frog SEO Spider)는 한 번의 크롤링당 300개 이상의 기술적 SEO 문제를 식별하는 데스크톱 기반 웹사이트 크롤러입니다. 끊어진 링크, 중복된 제목, 리디렉션 체인, 누락된 스키마 등을 찾아냅니다. 수백만 개의 페이지를 가진 사이트를 에이전시가 어떻게 감사하는지 궁금했다면, 그들이 가장 먼저 찾는 도구가 바로 이것입니다.
이 가이드는 첫 번째 크롤링부터 고급 AI 프롬프트 통합, 맞춤형 XPath 추출, 그리고 매번 감사할 때마다 시간을 절약해주는 정규식 패턴까지 모든 것을 다룹니다.
스크리밍 프로그란 무엇이며 왜 SEO 전문가들은 이를 신뢰할까요?
스크리밍 프로그 SEO 스파이더는 구글과 동일한 방식으로 웹사이트를 크롤링하여 끊어진 링크, 누락된 메타 태그, 리디렉션 체인, 고아 페이지 등의 기술적 SEO 문제를 분석하는 데스크톱 애플리케이션으로, 데이터를 타인의 클라우드로 보내지 않습니다.
크롤링 속도를 제한하고 URL당 비용을 청구하는 클라우드 기반 크롤러와 달리, 스크리밍 프로그는 사용자의 로컬 머신에서 실행됩니다. 크롤링 깊이, 렌더링 및 속도에 대한 완전한 제어권을 가질 수 있습니다. 이것이 2010년부터 에이전시, 사내 팀 및 개발자들이 선호하는 기술적 SEO 감사 도구인 이유입니다.
이 도구는 응답 코드, 페이지 제목, 메타 설명, H1/H2 분석, 이미지 대체 텍스트(alt text), 캐노니컬 태그, hreflang 구현, 구조화 데이터 검증 및 자바스크립트 렌더링을 다룹니다. 구글 애널리틱스, 구글 서치 콘솔, 페이지스피드 인사이트와 통합되며, v21부터는 OpenAI 및 구글 제미니(Gemini)와 같은 AI 제공업체와도 통합됩니다.
스크리밍 프로그가 다른 도구들과 어떻게 조화를 이루는지 더 넓은 관점에서 보고 싶다면 우리의 완벽한 SEO 도구 라운드업을 확인하세요.
무료 vs 유료: 실제로 얻는 것
무료 버전은 소규모 사이트에 genuinely 유용합니다. 하지만 500 URL 한도에 도달하면 연간 £199(약 $259)의 유료 라이선스가 필요합니다.
| 기능 | 무료 | 유료 (£199/년) |
|---|---|---|
| URL 크롤링 제한 | 500 | 무제한 |
| 크롤 저장/열기 | 불가 | 가능 |
| 자바스크립트 렌더링 | 불가 | 가능 |
| 맞춤형 추출 | 불가 | 가능 |
| AI 통합 | 불가 | 가능 |
| API 통합 | 불가 | 가능 |
| 예약 크롤링 | 불가 | 가능 |
| 크롤 비교 | 불가 | 가능 |
첫 번째 크롤링을 위해 스크리밍 프로그 설정하기
다운로드부터 크롤링 실행까지 약 5분이 소요됩니다. 스크리밍 프로그는 Windows, macOS 및 Linux에서 실행되는 자바 애플리케이션이므로 JVM이 작동하는 곳이라면 어디에서나 사용할 수 있습니다.
다운로드 및 설치
screamingfrog.co.uk에서 설치 프로그램을 받으세요. 유료 라이선스가 있다면 설치 후 Licence > Enter Licence 메뉴에서 활성화하세요. 무료 버전은 등록 없이 즉시 작동합니다.
실제로 중요한 구성 설정
시작 버튼을 누르기 전에 세 가지 사항을 조정하세요:
-
사용자 에이전트(User-Agent), Configuration > User-Agent. 기본값은 "Screaming Frog SEO Spider"입니다. 구글이 보는 내용을 확인하려면 Googlebot으로 변경하세요(일부 사이트는 사용자 에이전트에 따라 다른 콘텐츠를 제공합니다).
-
크롤링 속도, Configuration > Speed. 대부분의 사이트에는 기본값인 5개의 스레드가 적합합니다. 자체 사이트라면 10-20개로 높여도 됩니다. 고객 사이트의 경우 속도 제한(rate limits)을 유발하지 않도록 보수적으로 유지하세요.
-
렌더링 모드, Configuration > Spider > Rendering. 사이트가 React, Angular, Vue 또는 기타 SPA 프레임워크를 사용한다면 JavaScript로 설정하세요. 내부적으로 Chromium을 사용하므로 크롤링 속도가 크게 느려지지만, 이 설정 없이는 동적으로 로드된 콘텐츠를 놓치게 됩니다.
-
메모리 할당, 대부분이 건너뛰는 부분입니다. 기본 2GB는 약 3만 개의 URL에서 병목 현상이 발생합니다.
# Increase memory allocation for large sites
# Edit ScreamingFrogSEOSpider.l4j.ini (Windows) or Info.plist (Mac)
-Xmx8g5만 개 이상의 페이지를 크롤링한다면 메모리를 최소 8GB로 늘리세요. 50만 개 이상의 URL 사이트라면 16GB를 할당하고 데이터베이스 스토리지 모드(Configuration > System > Storage Mode > Database) 사용을 고려하세요.
상단 바에 URL을 입력하고 시작(Start)을 클릭하세요. 끝입니다.
첫 번째 기술적 SEO 감사 실행하기
스크리밍 프로그에서의 기술적 SEO 감사는 다섯 단계로 진행됩니다: 사이트 크롤링, 응답 코드 검토, 메타 태그 확인, 내부 링크 감사, 팀을 위한 보고서 내보내기. 이 과정은 수동 검토로는 볼 수 없는 문제를 포착합니다.
Semrush의 2025년 웹사이트 건강 벤치마크에 따르면, 웹사이트의 72%가 적어도 하나의 중요한 기술적 SEO 요소에서 실패합니다. 우리의 경험상, 어떤 사이트든 첫 크롤링 시 크롤러 없이는 보이지 않는 5-10개의 중요한 문제가 드러납니다.
기술적 SEO 기초에 대한 완전한 이해를 위해 우리의 완벽한 SEO 가이드를 참조하세요.
응답 코드 이해하기 (200, 301, 302, 404, 500)
크롤링이 완료되면 응답 코드(Response Codes) 탭을 클릭하세요. 우선순위 지정 항목은 다음과 같습니다:
- 4xx (클라이언트 오류), 끊어진 페이지입니다. 리디렉션이나 콘텐츠 추가가 필요합니다. 영향력이 큰 순서대로 수정하기 위해 인링크(inlinks) 기준으로 정렬하세요.
- 3xx (리디렉션), 본질적으로 나쁘지는 않지만 리디렉션 체인(301 > 301 > 200)은 크롤링 예산을 낭비합니다. Reports > Redirect Chains를 확인하세요.
- 5xx (서버 오류), 서버가 이러한 URL에서 과부하 상태입니다. 타임아웃 문제, 누락된 데이터베이스 기록 또는 잘못 구성된 라우트 때문일 수 있습니다.
- 문제가 있는 200, 잘 로드되지만 콘텐츠가 빈약하거나 제목이 중복되거나 메타 설명이 누락된 페이지입니다. Page Titles 또는 Meta Descriptions 탭을 사용하여 필터링하세요.
메타 태그 및 제목 감사
Page Titles 탭은 중복, 누락된 제목, 60자 초과 제목, 30자 미만 제목을 표시합니다. Meta Descriptions도 마찬가지로 "Missing(누락)", "Duplicate(중복)" 또는 "Over 160 Characters(160자 초과)"로 필터링하세요.
인링크 기준으로 정렬하여 가장 많이 링크된 페이지를 우선순위로 두세요. 홈페이지의 메타 설명 누락은 페이지네이션 페이지의 누락보다 훨씬 중요합니다.
내부 링크 분석
Internal 탭은 앵커 텍스트, 링크 깊이 및 follow/nofollow 상태와 함께 사이트의 모든 내부 링크를 보여줍니다. 즉시 확인해야 할 두 가지 사항:
- 고아 페이지(Orphan pages), 내부 링크가 하나도 연결되지 않은 페이지입니다. Reports > Orphan Pages에서 찾을 수 있습니다(사이트맵 또는 구글 애널리틱스 통합 필요).
- 깊은 페이지(Deep pages), 크롤링 깊이 3을 넘어가는 페이지는 링크 에퀴티(link equity)를 거의 받지 못합니다. Crawl Depth로 필터링하고 중요한 깊은 페이지에 내부 링크를 추가하는 것을 고려하세요.
기술적 감사가 끝난 후 콘텐츠 최적화를 위해 콘텐츠 최적화를 위한 Surfer SEO 가이드를 확인하세요.
끊어진 링크, 리디렉션 및 캐노니컬 찾기 및 수정하기
이 세 가지 문제는 대부분의 사이트에서 기술적 SEO 문제의 대부분을 차지합니다. 스크리밍 프로그는 한 번의 크롤링으로 이 모든 것을 표면화합니다.
끊어진 링크: 3단계로 찾고 수정하기
- Response Codes로 이동 > Client Error (4xx)로 필터링
- 끊어진 URL 우클릭 > Inlinks를 선택하여 해당 페이지로 연결하는 페이지 확인
- 목록 일괄 내보내기(Export > All) 후 권장 리디렉션 대상과 함께 개발팀에 전달
프로 팁: 끊어진 URL을 인링크 수로 정렬하세요. 내부 링크가 50개나 연결된 404 페이지는 링크 에퀴티를 흘려보내고 있습니다. 푸터에서 인링크가 1개인 404 페이지는 우선순위가 낮습니다.
리디렉션 체인: 크롤링 예산을 죽이는 이유
3홉 이상의 리디렉션 체인은 느릴 뿐만 아니라, 구글이 아예 추적을 중단할 수도 있습니다. 스크리밍 프로그는 Reports > Redirect Chains에서 이를 자동으로 플래그 지정합니다.
해결 방법은 간단합니다: 원본 URL이 최종 대상으로 직접 연결되도록 업데이트하세요. 페이지 A가 페이지 B로 리디렉션되고, 페이지 B가 페이지 C로 리디렉션된다면, 페이지 A의 리디렉션을 페이지 C로 직접 연결하도록 업데이트하세요.
Reports > Redirect Loops도 확인하세요. 루프(A > B > A)는 브라우저 오류를 반환하는 무한 리디렉션을 생성합니다. 이는 긴급히 수정해야 합니다.
캐노니컬 태그 감사
Canonicals 탭에서 다음 세 가지 문제를 찾으세요:
- 누락된 캐노니컬, 인덱싱 가능한 모든 페이지에는 자기 참조(self-referencing) 캐노니컬이 있어야 합니다.
- 잘못된 URL로의 캐노니컬, 관련 없는 페이지로 캐노니컬을指向하는 페이지(사이트 이전 후 흔함).
- 인덱싱 불가능한 캐노니컬 대상, 404 또는 noindex된 페이지를 가리키는 캐노니컬은 그 목적을 상실합니다.
XPath 및 CSS 선택자를 사용한 맞춤형 추출
맞춤형 추출(Custom extraction)은 크롤링 중 모든 페이지에서 특정 데이터(구조화 데이터, 추적 코드, Open Graph 태그 또는 любой HTML 요소)를 끌어낼 수 있게 하여, 스크리밍 프로그를 단순 감사 도구에서 전체 사이트 스크래퍼로 변모시킵니다.
이는 초보자와 파워 유저를 구분하는 기능이며, 우리는 매 감사마다 수천 개의 페이지에 걸쳐 추적 코드와 스키마 마크업을 검증하기 위해 맞춤형 추출을 사용합니다. 스크리밍 프로그 크롤 데이터와 Semrush와 같은 도구의 키워드 데이터를 결합하여 완전한 그림을 그릴 수 있습니다.
Configuration > Custom > Extraction에서 설정하세요. XPath 또는 CSS Path를 선택하고, 선택자를 붙여넣은 후 크롤링을 실행하세요. 결과는 별도의 탭에 나타납니다.
거의 모든 감사에서 사용하는 다섯 가지 추출 항목은 다음과 같습니다:
// Extract schema type from JSON-LD
//script[@type='application/ld+json']// Extract all H2 headings
//h2/text()/* Extract canonical URL */
link[rel='canonical']::attr(href)// Extract Open Graph title
//meta[@property='og:title']/@content// Check for Google Analytics 4 tracking
//script[contains(@src,'gtag')]/@srcJSON-LD 추출은 특히 강력합니다. 전체 사이트에서 실행하면 어느 페이지에 구조화 데이터가 있고 어느 페이지에 없는지 즉시 확인할 수 있어, 페이지별로 수동 확인하는 필요가 없습니다.
크롤링당 최대 100개의 맞춤형 추출을 추가할 수 있습니다(유료 버전 전용). 이를 조합하여 한 번의 패스로 사이트의 메타데이터, 추적, 스키마 및 서드파티 스크립트에 대한 완전한 감사를 구축할 수 있습니다.
스크리밍 프로그의 AI 통합은 OpenAI, Gemini 및 Anthropic과 어떻게 작동하나요?
스크리밍 프로그의 AI 통합(v21+)은 크롤링 중 모든 페이지의 콘텐츠를 대상으로 맞춤형 프롬프트를 실행하여, OpenAI, 구글 제미니, 앤트로픽 Claude 또는 로컬 Ollama 모델을 사용해 콘텐츠 품질 분류, 누락된 스키마 탐지, 메타 설명 점수 부여 및 대규모 내부 링크 기회 발굴을 가능하게 합니다.
다른 스크리밍 프로그 가이드에서는 다루지 않는 기능이며, v23으로 업그레이드해야 하는 가장 큰 이유입니다. 스크리밍 프로그에서 네 가지 AI 제공업체를 모두 테스트한 결과, OpenAI는 SEO 분류 작업에서 가장 구조화된 응답을 일관되게 반환했지만, Gemini 2.5 Flash는 간단한 예/아니오 확인에 더 빠르고 저렴했습니다.
Workshop Digital은 문서화했습니다 어떻게 그들이 AI 통합을 사용하여 수동 검토에 걸리는 시간의 일부로 수천 개의 페이지를 감사했는지.
AI 제공업체 설정하기 (OpenAI, Gemini, Anthropic, Ollama)
Configuration > AI > 제공업체 선택. API 키를 입력하고 모델을 선택하세요. v23의 기본 모델은 다음과 같습니다:
- OpenAI: gpt-5-mini (빠름, 저렴, 분류에 좋음)
- Google Gemini: gemini-2.5-flash (가장 빠른 옵션, 대량 분석에 훌륭함)
- Anthropic: claude-sonnet-4-5 (미묘한 콘텐츠 분석에 최고)
- Ollama: 모든 로컬 모델 (무료, 비공개, API 비용 없음, but 느림)
크롤링당 최대 100개의 맞춤형 스크리밍 프로그 AI 프롬프트를 추가할 수 있습니다. 결과는 AI 탭에 프롬프트당 하나의 열로 표시됩니다.
바로 사용할 수 있는 5가지 AI 프롬프트 템플릿
이를 Configuration > AI > Add Prompt에 직접 복사하세요:
Prompt 1: Content Quality Classifier
"Analyze this page's content. Classify as: Thin (<300 words of unique content), Adequate (300-800 words), Comprehensive (800+ words). Return only the classification and word count."Prompt 2: Missing Schema Detector
"Review this page's HTML. List any Schema.org types that SHOULD be present based on the content but are MISSING. If the page is a product, check for Product schema. If it's an article, check for Article schema. Return 'None missing' if all appropriate schemas are present."Prompt 3: Meta Description Quality Scorer
"Score this page's meta description from 1-10 based on: includes primary topic keyword (3pts), has a clear CTA or benefit statement (3pts), is between 145-160 characters (2pts), is unique and not template-generated (2pts). Return score and one-line improvement suggestion."Prompt 4: Internal Link Opportunity Finder
"Analyze this page's content and identify 3 topics mentioned that could link to other pages on the same site. Return each topic and a suggested anchor text phrase."Prompt 5: Accessibility Quick Check
"Check this page for: missing alt text on images, missing form labels, low contrast text indicators, missing ARIA landmarks. Return a brief accessibility score (Good/Fair/Poor) with the top issue to fix."콘텐츠 품질 분류기(Content Quality Classifier) alone은 시간을 크게 절약합니다. 1만 페이지 사이트에서 실행하면 며칠이 아닌 몇 분 만에 빈약한 콘텐츠 보고서를 얻을 수 있습니다.
일반적인 SEO 작업을 위한 복사-붙여넣기 정규식 패턴
스크리밍 프로그는 Include/Exclude URL 필터와 Custom Search에서 정규식(regex)을 지원하여, 각 페이지를 수동으로 확인하지 않고도 특정 페이지 유형을 분리하거나, 추적 구현을 찾거나, hreflang 태그를 감사할 수 있게 합니다.
대부분의 SEO 가이드는 정규식을 완전히 무시합니다. 다음은 제가 텍스트 파일에 보관하고 매 감사마다 붙여넣는 패턴 라이브러리입니다:
| 패턴 | 사용 사례 | 적용 위치 |
|---|---|---|
.*\?.*utm_ | UTM 매개변수가 있는 URL 찾기 | Include 필터 |
.*\/(tag|category|author)\/ | 택소노미 페이지 찾기 | Include 필터 |
.*\.(pdf|doc|xlsx)$ | 문서 파일 찾기 | Include 필터 |
<a[^>]+href="tel: | 전화번호 링크 찾기 | Custom Search > Contains |
<a[^>]+href="mailto: | 이메일 링크 찾기 | Custom Search > Contains |
<script[^>]*gtm | GTM 구현 찾기 | Custom Search > Contains |
hreflang | hreflang 태그 찾기 | Custom Search > Contains |
noindex | noindex 지시문 찾기 | Custom Search > Contains |
사용 방법: URL 필터의 경우 Configuration > Include/Exclude로 이동하세요. Custom Search 패턴의 경우 Configuration > Custom > Search로 이동하세요. "Contains"를 선택하고 검색 모드를 Regex로 설정하세요.
택소노미 페이지 필터(tag|category|author)는 WordPress 감사에 특히 유용합니다. 이러한 페이지는 종종 대규모로 빈약한 콘텐츠와 중복 제목 문제를 생성합니다.
스크밍 프로그 버전 23(2026)의 새로운 기능은 무엇인가요?
2025년 10월 출시된 스크리밍 프로그 v23 "Rush Hour"는 AI 모델 기본값을 gpt-5-mini, gemini-2.5-flash 및 claude-sonnet-4-5로 업데이트했으며, 더 스마트한 리디렉션 매핑을 위한 의미론적 유사성 임베딩(sematic similarity embeddings)과 함께 Ahrefs v3 API 통합을 추가했습니다.
공식 릴리스 히스토리에 따른 v23.x 릴리스의 변경 사항은 다음과 같습니다:
-
v23.0 (2025년 10월), 네 가지 제공업체 전반에 걸쳐 AI 모델 기본값 업데이트. 레거시 v2 커넥터를 대체하는 Ahrefs v3 API 통합. 리디렉션 매핑을 위한 의미론적 유사성 임베딩, 이제 도구는 URL 패턴뿐만 아니라 콘텐츠 유사성을 기반으로 리디렉션을 제안합니다.
-
v23.1-v23.3 (2025년 11월 - 2026년 2월), 자바스크립트 렌더링 엣지 케이스에 대한 버그 수정, 100만 개 이상 URL 크롤링을 위한 향상된 메모리 처리 및 크롤 자동 삭제 기능(디스크 공간 관리를 위해 X일 후 크롤을 자동 삭제하도록 설정).
리디렉션 매핑을 위한 의미론적 유사성 기능이 눈에 띕니다. 사이트 이전 동안, 이제 구형 URL 목록을 업로드하면 스크리밍 프로그는 URL 구조뿐만 아니라 실제 페이지 콘텐츠를 기반으로 가장 잘 일치하는 새 URL을 제안합니다. v23 릴리스 블로그에 따르면, 이는 로컬 임베딩을 사용하므로 데이터가 머신을 벗어나지 않습니다.
스크리밍 프로그가 Sitebulb, Lumar 또는 Ahrefs Site Audit보다 나은가요?
스크리밍 프로그는 완전한 제어권, AI 통합 및 맞춤형 추출을 원하는 파워 유저에게 최고의 선택이지만, Sitebulb은 시각화에서 승리고, Lumar은 엔터프라이즈 팀에 적합하며, Ahrefs Site Audit은 이미 Ahrefs를付费하는 경우 가장 잘 작동합니다.
우리는 동일한 사이트에서 스크리밍 프로그와 Sitebulb을 모두 사용해 보았으며, 발견한 내용은 다음과 같습니다:
| 기능 | 스크리밍 프로그 | Sitebulb | Lumar (DeepCrawl) | Ahrefs Site Audit |
|---|---|---|---|---|
| 유형 | 데스크톱 | 데스크톱 | 클라우드 | 클라우드 |
| 가격 | £199/년 | £132/년 | 엔터프라이즈 | 플랜 포함 |
| URL 제한 (무료) | 500 | 500 | 없음 | 없음 (유료 전용) |
| AI 통합 | 예 (4개 제공업체) | 아니오 | 아니오 | 아니오 |
| 맞춤형 추출 | 예 (XPath/CSS) | 제한적 | 예 | 아니오 |
| 자바스크립트 렌더링 | 예 | 예 | 예 | 예 |
| 적합 대상 | 파워 유저, 개발자 | 시각적 감사, 초보자 | 엔터프라이즈 팀 | 올인원 SEO 사용자 |
결론: 완전한 제어권과 AI 통합을 원하는 파워 유저에게는 스크리밍 프로그가 승리합니다. 학습 곡선 없이 더 멋진 시각화를 원한다면 Sitebulb이 낫습니다. Lumar은 전용 SEO 팀을 갖춘 엔터프라이즈 규모에서만 의미가 있습니다. 그리고 이미 Ahrefs를付费하고 있다면, 그들의 Site Audit은 기본적인 웹사이트 크롤 분석에 충분합니다.
사이트 감사 이상의 Ahrefs 기능에 대한 자세한 내용은 우리의 Ahrefs 심층 분석을 참조하세요. 모든 SEO 도구의 완전한 비교를 위해 우리의 완벽한 SEO 도구 라운드업을 확인하세요.
FAQ
스크리밍 프로그는 무엇을 위해 사용되나요?
스크리밍 프로그 SEO 스파이더는 기술적 SEO 감사를 위해 사용됩니다. 웹사이트를 크롤링하여 끊어진 링크, 누락되거나 중복된 메타 태그, 리디렉션 체인, 캐노니컬 태그 문제, 구조화 데이터 오류 및 자바스크립트 렌더링 문제를 식별합니다. v21 이상 버전은 또한 OpenAI, Gemini, Anthropic 또는 Ollama를 사용한 AI 기반 콘텐츠 분석을 지원합니다.
스크리밍 프로그는 무료인가요 유료인가요?
무료 버전은 기본 기능과 함께 세션당 최대 500개의 URL을 크롤링합니다. 유료 라이선스는 연간 £199(약 $259)이며, 무제한 크롤링, 자바스크립트 렌더링, 맞춤형 추출, AI 통합, 예약 크롤링, 크롤 비교 및 크롤 파일 저장 및 다시 열기 기능을 잠금 해제합니다. 대부분의 전문가는 유료 버전이 필요합니다.
스크리밍 프로그로 사이트 감사를 어떻게 하나요?
상단 바에 URL을 입력하고 시작(Start)을 클릭하세요. 크롤링이 끝나면 끊어진 페이지와 리디렉션을 위해 Response Codes 탭을 검토하고, 중복或缺落 태그를 위해 Page Titles 및 Meta Descriptions을 확인하며, noindex 문제를 위해 Directives 탭을 검사하세요. 팀을 위해 File > Export에서 보고서를 내보내세요.
스크리밍 프로그로 끊어진 링크를 어떻게 찾나요?
크롤링 후 Response Codes 탭으로 이동하여 "Client Error (4xx)"로 필터링하세요. 이는 사이트의 모든 끊어진 페이지를 보여줍니다. 끊어진 URL을 우클릭하고 "Inlinks"를 선택하여 해당 페이지로 연결하는 페이지를 확인하세요. 목록을 내보내고 가장 관련성 높은 활성 페이지로 301 리디렉션을 설정하세요.
스크리밍 프로그 무료와 유료의 차이점은 무엇인가요?
무료 버전은 크롤링당 500개의 URL로 제한되며, 크롤 저장, 자바스크립트 렌더링, 맞춤형 추출, AI 통합, API 연결, 예약 크롤링 및 크롤 비교 기능을 비활성화합니다. 유료 버전(£199/년)은 모든 제한을 제거하고 모든 기능을 잠금 해제합니다. 사이트가 500페이지 이상이라면 유료가 필요합니다.
스크리밍 프로그는 자바스크립트 웹사이트를 크롤링할 수 있나요?
예, 유료 라이선스가 있다면 가능합니다. Configuration > Spider > Rendering으로 이동하여 JavaScript를 선택하세요. 스크리밍 프로그는 내부적으로 Chromium을 사용하여 브라우저와 정확히 동일하게 페이지를 렌더링합니다. HTML 전용 모드에 비해 크롤링 시간이 3-5배 증가할 것으로 예상하세요. JS 중심 사이트에는 추가 메모리를 할당해야 합니다.
OpenAI와 함께 스크리밍 프로그의 AI 통합을 어떻게 사용하나요?
Configuration > AI > OpenAI로 이동하세요. API 키를 입력하고, gpt-5-mini(v23의 기본값)를 선택하고, 프롬프트 필드에 프롬프트를 작성한 후 크롤링을 실행하세요. 결과는 AI 탭에 프롬프트당 하나의 열로 표시됩니다. 대량 콘텐츠 분석을 위해 크롤링당 최대 100개의 스크리밍 프로그 AI 프롬프트를 실행할 수 있습니다.
스크리밍 프로그는 몇 개의 URL을 크롤링할 수 있나요?
무료 버전은 크롤링당 500개의 URL로 제한됩니다. 유료 버전에는 제한이 없으며, 팀은 수백만 개의 URL이 있는 사이트를 성공적으로 크롤링했습니다. 대형 사이트(5만 개 이상)의 경우, config 파일에서 메모리 할당을 8-16GB로 늘리고 Configuration > System > Storage Mode에서 데이터베이스 스토리지 모드로 전환하세요.
스크리밍 프로그가 Sitebulb보다 나은가요?
스크리밍 프로그는 더 많은 파워와 유연성, 4개 제공업체와의 AI 통합, XPath 및 CSS 선택자를 통한 깊은 맞춤형 추출, 예약 크롤링을 위한 CLI 자동화 및 광범위한 API 통합을 제공합니다. Sitebulb은 자동 생성된 감사 보고서로 더 나은 시각화를 제공하며 초보자에게 더 쉽습니다. 대부분의 숙련된 SEO 전문가들은 스크리밍 프로그를 선호합니다.
스크리밍 프로그에서 자동 크롤링을 어떻게 예약하나요?
이는 유료 기능입니다. Windows 작업 스케줄러 또는 Mac/Linux의 cron과 함께 스크리밍 프로그의 명령줄 인터페이스(CLI)를 사용하세요. 특정 구성 파일로 스파이더를 실행하고 결과를 자동 내보내는 명령을 설정하세요. 예: ScreamingFrogSEOSpiderCli --crawl https://example.com --output-folder /reports --export-tabs "Response Codes,Page Titles".