AI 노출 쉽게 보기
AI가 내 사이트를 읽을 수 있는지 먼저 확인하세요
좋은 콘텐츠가 있어도 robots.txt, noindex, 오류 응답, sitemap 누락 때문에 AI와 검색엔진이 발견하지 못하면 답변에 쓰이기 어렵습니다.
점검할 크롤러
- OpenAI 검색 노출에는 OAI-SearchBot 접근 허용 여부를 확인합니다.
- 검색 색인에는 Googlebot과 네이버 Yeti 접근을 확인합니다.
- PerplexityBot, ClaudeBot 등 주요 AI 봇은 서비스 정책에 맞춰 허용 여부를 결정합니다.
기술 체크리스트
- robots.txt가 핵심 페이지를 차단하지 않는지 확인합니다.
- sitemap.xml에 중요한 랜딩, 글로서리, 샘플 리포트 URL이 들어 있는지 봅니다.
- noindex, canonical, 3xx/4xx/5xx 응답, JavaScript 의존도를 함께 점검합니다.
주의할 점
- llms.txt는 Google AI 기능 노출의 필수 조건으로 과장하면 안 됩니다.
- 구조화 데이터는 보이는 콘텐츠와 일치해야 합니다.
- 크롤러 허용은 개인정보·관리자 페이지까지 열라는 뜻이 아닙니다.
자주 묻는 질문
OAI-SearchBot과 GPTBot은 같은가요?
역할이 다릅니다. OpenAI 문서 기준으로 웹마스터는 robots.txt에서 각 봇 접근을 독립적으로 관리할 수 있습니다.
네이버 검색로봇 이름은 무엇인가요?
네이버 서치어드바이저는 네이버 검색로봇 User-Agent로 Yeti를 안내합니다. 실제 버전 문자열은 바뀔 수 있습니다.