무료 AI 점검
무료 AI 점검은 홈페이지 주소를 입력하면 AI 크롤러가 그 사이트를 읽을 수 있는지 다섯 가지 항목으로 바로 확인하는 도구입니다. AI 크롤러 허용 여부, 구조화 데이터, 제목과 설명, 자바스크립트 없이 읽히는 본문, llms.txt를 차례로 살펴보고, 항목마다 양호·주의·미흡으로 결과를 알려 드립니다.
공개된 페이지만 읽고, 입력한 주소와 결과는 저장하지 않습니다.
무엇을 점검하나요?
- AI 크롤러 허용 robots.txt가 GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, Claude-User, PerplexityBot, Google-Extended를 사이트 전체에서 막고 있는지 봅니다. 막혀 있으면 해당 AI가 홈페이지를 읽거나 답변에 인용할 수 없습니다.
- 구조화 데이터 첫 화면에 JSON-LD가 있는지 봅니다. 구조화 데이터는 기관 이름, 주소, 연락처를 AI가 하나의 실체로 묶어 읽게 해 줍니다.
- 제목·설명 title과 meta description이 비어 있지 않은지 봅니다. 두 값은 AI와 검색엔진이 페이지를 요약할 때 가장 먼저 쓰는 문장입니다.
- 본문 텍스트 자바스크립트를 실행하지 않은 HTML에 본문 글이 충분한지 봅니다. 많은 AI 크롤러는 스크립트를 실행하지 않아, 브라우저에서만 만들어지는 글은 읽지 못합니다.
- llms.txt 사이트 루트에 AI용 안내 파일 llms.txt가 있는지 봅니다. 필수는 아니지만 AI가 주요 페이지를 빠르게 찾는 데 도움이 됩니다.
결과는 어떻게 읽나요?
항목마다 양호, 주의, 미흡 가운데 하나로 표시됩니다. 양호는 AI가 읽는 데 문제가 없는 상태이고, 주의는 읽을 수는 있지만 보완하면 더 정확히 읽히는 상태입니다. 미흡은 AI가 해당 정보를 읽지 못하거나 사이트 접근이 막힌 상태라 먼저 고쳐야 합니다. 다섯 항목이 모두 양호여도 AI 답변에 인용되는 것까지 보장되지는 않으며, 인용 여부는 각 AI 서비스가 정합니다.
크롤러마다 하는 일이 다른가요?
같은 운영사의 크롤러라도 하는 일이 다릅니다. robots.txt에서 무엇을 막을지 정하기 전에 아래 표를 참고하세요. 설명은 각 운영사의 공개 문서를 기준으로 했습니다.
| 크롤러 | 운영사 | 하는 일 |
|---|---|---|
| GPTBot | OpenAI | 생성형 AI 모델 학습에 쓰일 수 있는 웹 콘텐츠 수집 |
| OAI-SearchBot | OpenAI | ChatGPT 검색 결과에 웹사이트를 보여 주기 위한 수집 |
| ChatGPT-User | OpenAI | 사용자가 ChatGPT에 요청했을 때 해당 페이지를 직접 열람 |
| ClaudeBot | Anthropic | 모델 학습에 쓰일 수 있는 웹 콘텐츠 수집 |
| Claude-User | Anthropic | 사용자가 Claude에 질문했을 때 해당 페이지를 직접 열람 |
| PerplexityBot | Perplexity | Perplexity 검색 결과에 웹사이트를 보여 주고 연결하기 위한 수집 |
| Google-Extended | Gemini 모델 학습·답변 근거 활용 여부를 정하는 robots.txt 토큰. Google 검색 노출과는 별개 |
출처: OpenAI 크롤러 문서, Anthropic 크롤러 안내, Perplexity 크롤러 문서, Google 크롤러 개요
결과가 미흡하면 어떻게 하나요?
robots.txt 수정, 구조화 데이터 추가, llms.txt 작성은 대부분 홈페이지 관리 화면이나 서버 파일 수정으로 해결됩니다. 방법이 궁금하면 문서를 참고하거나 문의하기로 남겨 주세요.