GEO 위키 · 테크니컬 SEO
로그 파일 분석
Log File Analysis
정의
서버 접속 기록을 분석해 어떤 로봇이 언제 어떤 페이지를 가져갔는지 확인하는 작업입니다.
GEO 관점에서
AI 크롤러 방문 빈도를 직접 확인하는 가장 확실한 방법입니다.
관련 용어
User Agent
유저 에이전트
브라우저나 로봇이 자신이 누구인지 서버에 알리는 이름표입니다. 예: Googlebot, GPTBot.
AI CrawlerAI 크롤러
AI 회사가 학습이나 검색 답변을 위해 웹페이지를 수집하는 로봇입니다. GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot 등이 있습니다.
Crawl Budget크롤 버짓
검색엔진이 일정 기간 한 사이트에서 수집하는 페이지 수의 한도입니다.