ChatGPT 검색 접근 점검: robots.txt·본문·구조화 데이터 확인법

ChatGPT 검색에 내 글이 보이지 않을 때, 사이트 운영자가 먼저 확인할 것은 공개 페이지의 접근 상태입니다. 검색용 봇이 읽을 수 있는지, 페이지가 질문에 답하는지, 실제 답변에 어떤 URL이 연결됐는지를 차례로 확인하세요.

이 글은 기술 설정을 점검하는 방법을 다룹니다. 검색용 봇·학습용 봇의 차이와 인용 관측의 전체 흐름은 ChatGPT 인용과 크롤러 역할 가이드에서 이어서 확인할 수 있습니다.

검색용 봇과 학습용 봇을 먼저 구분하세요

OpenAI는 다음 역할을 구분합니다.

• OAI-SearchBot: ChatGPT 검색에 웹사이트를 표시하기 위한 검색 크롤러입니다.

• GPTBot: 기반 모델 학습에 사용될 수 있는 콘텐츠를 수집합니다.

• ChatGPT-User: 사용자의 요청에 따라 페이지를 방문하며, 자동 검색 크롤러가 아닙니다.

검색 허용과 학습 사용 제어는 독립적입니다. GPTBot을 차단하면서 OAI-SearchBot의 검색 접근을 허용할 수 있습니다. OAI-SearchBot을 거부한 사이트는 ChatGPT 검색 답변에 표시되지 않지만 탐색용 링크로는 남을 수 있습니다. OpenAI 크롤러 공식 문서

공개 URL의 접근 오류부터 확인하세요

1. 로그아웃한 상태에서 대표 URL을 엽니다. 제목과 핵심 본문이 보이고 정상 응답하는지 확인합니다.

2. 실제로 제공되는 robots.txt에서 OAI-SearchBot에 적용되는 규칙을 확인합니다.

3. CDN·WAF·서버 로그를 볼 수 있다면 공식 IP 목록과 요청을 대조해 403·429 같은 차단 응답을 확인합니다.

4. 리디렉션, canonical, 내부 링크가 의도한 대표 페이지를 가리키는지 확인합니다.

User-Agent 문자열만으로 공식 봇이라고 판단하지 마세요. 현재 IP 목록은 OpenAI 크롤러 문서에서 확인할 수 있습니다. robots.txt 설정 변경이 반영되기까지 약 24시간이 걸릴 수 있다는 안내도 있으므로, 수정 직후의 한 번의 답변만으로 결론을 내리지 마세요.

기존 robots.txt를 통째로 덮어쓰거나 모든 경로를 열 필요는 없습니다. 봇별 규칙과 공통 규칙이 어떻게 적용되는지 확인하고, 관리자·고객 자료 등 비공개 경로는 인증으로 보호하세요. 실제 사이트 설정 변경은 공개할 경로와 보호할 경로를 정한 뒤 진행합니다.

본문은 독자가 답을 찾을 수 있게 정리하세요

제목이 약속한 질문에 먼저 답하고, 중요한 주장에는 원출처와 적용 조건을 붙입니다. 순서가 중요하면 목록을, 여러 항목을 비교해야 하면 표를 사용하세요. 질문형 소제목이나 표의 개수를 맞추는 것 자체가 목적은 아닙니다.

읽기 쉬운 형식은 독자의 확인을 돕습니다. 특정 형식이 ChatGPT 인용 확률을 얼마나 높이는지는 공개된 공식으로 확인되지 않습니다. 실제 내용이 달라지지 않았는데 수정일만 최신으로 바꾸는 것도 피하세요.

구조화 데이터는 실제 내용을 설명하도록 맞추세요

BlogPosting 같은 구조화 데이터는 글의 제목·작성자·날짜·대표 이미지를 설명할 수 있습니다. 화면과 코드에 담긴 정보가 일치하는지 확인하는 것이 우선입니다.

BlogPosting은 Article의 하위 유형입니다. 동일한 글에 둘을 별도 개체로 중복 추가하거나, 본문에 없는 FAQ를 숨겨 넣지 마세요. JSON-LD 문법이 맞다는 사실은 글 전체의 정확성이나 AI 인용을 보증하지 않습니다.

Google도 AI Overviews·AI Mode에 별도 특수 스키마가 필요하지 않다고 안내합니다. 이는 Google Search에 관한 설명이며 다른 엔진의 내부 선택 방식까지 증명하는 자료는 아닙니다. Google AI 기능과 웹사이트

기술 점검과 실제 인용 결과를 따로 기록하세요

• 접근 확인: 공개 페이지의 응답과 핵심 본문, 공식 봇의 요청 기록

• 인용 확인: 같은 질문에서 브랜드 이름, 홈페이지 링크, 개별 글 링크가 각각 나타났는지

• 유입 확인: 답변의 링크를 통해 실제 방문이 발생했는지

비교할 때는 질문 문장, 엔진·검색 모드, 언어·지역, 실행 시각과 반복 횟수를 남깁니다. 준비도 점수와 실제 인용 결과의 차이는 AEO 준비도와 AI 인용 관측에서 확인하세요.

SearchTune OS는 공개 URL의 SEO·AEO·GEO 준비도를 점검하는 출발점으로 사용할 수 있습니다. OpenAI 내부 순위나 인용 확률, 고객 서버의 크롤러 로그를 대신 확인해 주는 기능으로 해석하지 마세요. 사이트 준비도 점검하기

오늘 확인할 세 가지

1. 검색용 OAI-SearchBot과 학습용 GPTBot 정책을 구분했는가?

2. 공개 본문·메타정보·구조화 데이터가 같은 사실을 설명하는가?

3. 접근 상태와 실제 답변의 URL 인용을 각각 기록했는가?

기술 설정의 목표는 의도치 않은 접근 오류와 정보 불일치를 고치는 것입니다. 설정을 통과한 뒤의 출처 선택은 같은 질문으로 직접 관측해야 합니다.

공식 자료 확인일: 2026년 9월 7일.