ChatGPT와 Claude를 위한 AI 준비된 문서 작성법
ChatGPT, Claude, Perplexity 및 AI 에이전트가 읽을 수 있는 고객 센터를 만드는 실제 방법: 크롤링 가능한 HTML, 올바른 robots.txt 규칙, 답변 중심의 아티클, 그리고 llms.txt와 MCP에 대한 솔직한 분석.
Berkay Akpolat읽는 시간 11분
2026년 11월 3일 업데이트
문서를 AI에 최적화하려면 입증된 기본 사항부터 시작하세요. AI 크롤러가 페이지를 일반 HTML로 가져올 수 있어야 하고, robots.txt가 검색 봇의 접근을 허용해야 하며, 각 아티클은 플랜, 역할, 제한 사항을 명시하여 하나의 질문에 명확히 답변해야 합니다. 페이지를 최신 상태로 유지한 다음, 마크다운 사본, llms.txt 및 AI 에이전트를 위한 MCP 서버를 추가하세요. 이러한 추가 요소는 비용은 적게 들지만, AI 답변에 미치는 측정 가능한 효과는 아직 미미합니다.
이 가이드는 고객이 이제 ChatGPT, Perplexity 또는 Google의 AI 개요(AI Overviews)를 통해 제품 사용법을 묻는 상황에 직면한 지원 팀 리더와, 개발자가 Claude Code나 Cursor를 문서에 연결하는 팀을 위한 것입니다. 이 글은 증거가 있는 것과 여전히 실험적인 것을 구분합니다.
AI 준비된 문서란 무엇인가요?
AI 준비된 문서란 AI 시스템이 올바르게 가져오고, 이해하고, 인용할 수 있는 문서를 의미합니다. 답변 엔진을 위한 AI 읽기 전용 문서와, 이를 기반으로 작동하는 AI 에이전트를 위한 문서가 있습니다. 두 가지 유형의 독자가 중요합니다.
- 답변 엔진(ChatGPT 검색, Perplexity, Claude, Google AI 개요 및 AI 모드)은 고객의 질문에 답변하고 페이지를 출처로 인용합니다.
- AI 에이전트(Claude Code, Cursor, Codex, 맞춤형 어시스턴트)는 마크다운 파일이나 MCP 서버를 통해 작업을 수행하기 위해 문서를 읽습니다.
두 분야 모두 빠르게 성장하고 있습니다. Stack Overflow의 2025년 설문조사에 따르면 개발자의 84%가 AI 도구를 사용하거나 사용할 계획이며, Similarweb은 2025년 6월 AI 플랫폼으로부터의 추천 방문 수가 전년 대비 357% 증가한 11억 3천만 건에 달했고, 그중 80% 이상이 ChatGPT를 통해 유입되었다고 집계했습니다. 또한 Google이 AI 요약을 표시하면 사용자의 클릭률은 낮아집니다. Pew Research는 AI 요약이 있는 경우 사용자가 결과 링크를 클릭하는 비율이 8%인 반면, 없는 경우는 15%라는 사실을 발견했습니다. 클릭 없이 답변이 표시된다면 답변은 정확해야 하며, 그 정확도는 문서의 수준에 달려 있습니다. 고객이 도움을 찾는 곳에 대한 더 많은 수치는 고객 셀프 서비스 통계에서 확인할 수 있습니다.
AI 크롤러가 실제로 고객 센터를 읽을 수 있나요?
답이 '아니오'라면 다른 모든 것은 중요하지 않으므로 이 부분을 먼저 확인하세요.
텍스트가 HTML 안에 있나요? Vercel의 2024년 12월 크롤러 트래픽 분석에 따르면 주요 AI 크롤러 중 JavaScript를 렌더링하는 곳은 없습니다. Google의 Gemini 크롤러와 Apple의 크롤러는 예외입니다. 클라이언트 측 JavaScript로 아티클을 로드하는 고객 센터는 ChatGPT와 Claude의 크롤러에게는 비어 있는 것처럼 보일 수 있습니다. 테스트해보세요:
curl -s -A "GPTBot" https://help.example.com/your-article \
| grep "a sentence from the article"문장이 응답에 포함되지 않으면 크롤러도 이를 볼 수 없습니다. 서버 렌더링 또는 사전 렌더링된 페이지가 이 문제를 해결합니다.
URL이 정상적으로 연결되나요? 동일한 Vercel 데이터에서 ChatGPT와 Claude 크롤러가 가져온 페이지의 약 35%가 404 오류를 반환했습니다. 아티클을 이동하거나 이름을 변경할 때 리디렉션을 유지하고 사이트맵을 최신 상태로 유지하세요. 플랫폼을 변경하는 경우 고객 센터 마이그레이션 체크리스트를 따르세요.
페이지가 공개되어 있나요? 답변 엔진은 로그인 뒤에 숨겨진 페이지를 읽을 수 없습니다. 고객을 위한 비공개 문서가 있다면, AI 답변은 공개 페이지, 포럼 및 타사 사이트에서 제공될 것임을 받아들여야 합니다.
어떤 AI 봇을 robots.txt에서 허용해야 하나요?
각 AI 기업은 학습용 봇과 검색용 봇을 별도로 운영합니다. "모든 AI 봇"을 차단하면 AI 답변에서 귀사의 콘텐츠가 제외됩니다.
| 봇 (기업) | 역할 | 차단해야 하는 경우… |
|---|---|---|
| GPTBot (OpenAI) | 모델 학습용 콘텐츠 수집 | 학습에서 제외하고 싶을 때 |
| OAI-SearchBot (OpenAI) | ChatGPT 검색에 표시할 페이지 탐색 | 드묾: 차단 시 ChatGPT 검색 답변에서 제외됨 |
| ChatGPT-User (OpenAI) | 사용자 질문 시 페이지 가져오기 | 비실용적: 사용자 요청에 의한 호출은 robots.txt를 따르지 않을 수 있음 |
| ClaudeBot (Anthropic) | 학습용 콘텐츠 수집 | 학습에서 제외하고 싶을 때 |
| Claude-SearchBot, Claude-User (Anthropic) | 검색 인덱싱 및 사용자 요청 호출 | Claude 검색 답변에서 제외하고 싶을 때만 |
| PerplexityBot (Perplexity) | 답변 인용을 위한 페이지 인덱싱(학습용 아님) | Perplexity 답변에서 제외하고 싶을 때만 |
| Perplexity-User (Perplexity) | 사용자 질문 시 페이지 가져오기 | 비실용적: Perplexity는 일반적으로 robots.txt를 무시한다고 밝힘 |
| Google-Extended (Google) | Gemini 학습 및 접지(grounding); 검색이나 AI 개요 아님 | Gemini 학습 및 접지에서 제외하고 싶을 때 |
자세한 내용은 각 기업의 자체 문서에서 확인할 수 있습니다: OpenAI, Anthropic, Perplexity. 인용은 원하지만 학습에는 사용되고 싶지 않은 고객 센터는 다음과 같이 설정할 수 있습니다:
User-agent: GPTBot
Disallow: /
User-agent: ClaudeBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: *
Allow: /
Sitemap: https://help.example.com/sitemap.xml자체 그룹을 가진 봇은 * 규칙을 무시하므로, 각 명명된 그룹에 Disallow 줄(예: /admin)을 반복해서 작성하세요. Google-Extended를 차단하면 Gemini 앱이 귀사의 페이지를 기반으로 답변을 생성하는 것도 중단되지만, Google 검색 및 AI 개요에는 영향을 미치지 않습니다.
또한 CDN이나 방화벽을 확인하세요. 그곳의 "AI 봇 차단" 토글이 허용적인 robots.txt 설정을 무시할 수 있습니다.
AI가 올바르게 답변하도록 도움말 아티클을 어떻게 작성해야 할까요?
답변 엔진은 사이트 전체가 아닌 특정 구절을 가져옵니다. 각 구절은 독립적으로 의미가 통해야 합니다.
- 아티클당 하나의 작업, 고객이 묻는 방식의 제목. "구독 관리"가 아닌 "구독 취소 또는 일시 중지".
- 답변 우선. 각 제목 아래의 첫 두 문장은 해당 제목에 대한 답변이어야 합니다. 저희의 고객 센터 아티클 템플릿은 이런 방식으로 구성되어 있습니다.
- 조건 명시. 어떤 플랜, 어떤 역할, 어떤 플랫폼인지 밝히세요. "관리자만 워크스페이스를 삭제할 수 있습니다"는 인용 가능하지만, "워크스페이스를 삭제할 수 있습니다"라고 하면 다른 사용자에게 잘못된 답변을 제공하게 됩니다.
- 제품이 할 수 없는 것을 명시. 어시스턴트는 종종 "…할 수 있나요?"라는 질문을 받습니다. 문서에 존재하는 기능만 설명하면 모델은 추측하게 됩니다.
- 항목당 하나의 이름 사용 및 정의. "워크스페이스", "계정", "조직"이 같은 의미라면 하나를 선택하고, 제품 용어를 정의하는 짧은 용어집 페이지를 유지하세요.
- 모든 페이지에 깔끔한 메타데이터 제공. 구체적인 제목, 한 줄 설명, 마지막 업데이트 날짜, 그리고 해당되는 경우 플랜이나 제품 영역을 포함하세요. 답변 엔진과 자체 검색 기능은 이를 사용하여 질문에 답할 페이지를 결정합니다.
- 이미지나 비디오에 단계를 숨기지 마세요. 모든 스크린샷에 실제 대체 텍스트(alt text)를 제공하고, 비디오에 나오는 모든 단계가 텍스트로도 존재하는지 확인하세요.
- 예외 사례보다 기본 사항을 먼저 다루세요. 고객 센터를 구축 중이라면 AI를 활용한 지식 베이스 구축 방법부터 시작하세요.
- 최신 상태 유지. 오래된 아티클은 이제 확신을 가지고 반복되는 오래된 답변이 됩니다. 문서를 최신 상태로 유지하는 방법 가이드는 릴리스별 루틴을 다루며, 모든 릴리스마다 문서를 자동 업데이트하는 방법은 릴리스 자체에서 시작하는 방법을 보여줍니다.
Google도 더 쉬운 말로 같은 내용을 설명합니다. AI 기능에 대해 "추가 요구 사항은 없으며" 일반적인 SEO 외에 특별한 최적화는 필요하지 않다고 합니다. 또한 가이드에서는 AI를 위해 콘텐츠를 작은 조각으로 나눌 필요가 없다고 명시하고 있으므로, 모델에 맞추기 위해 아티클을 파편화하지 마세요.
문서를 위해 llms.txt를 추가해야 할까요?
벤더들이 제안하는 것만큼 큰 도움이 되지는 않습니다. llms.txt은 사이트 루트에 있는 마크다운 파일로, 가장 유용한 페이지를 짧은 설명과 함께 나열합니다. Jeremy Howard가 2024년 9월 언어 모델을 위한 지도로 제안했습니다.
지금까지의 증거는 다음과 같습니다:
- Google은 이를 무시합니다. Google 가이드는 Google 검색에 노출되기 위해 새로운 기계 판독형 파일, AI 텍스트 파일, 마크업 또는 Markdown이 필요하지 않으며, llms.txt 파일은 검색 엔진이 이를 무시하므로 도움이 되지도 해가 되지도 않는다고 명시합니다. 2025년, Google의 John Mueller는 llms.txt를 키워드 메타 태그에 비유했습니다.
- 요청하는 봇이 거의 없습니다. Ahrefs가 137,210개의 도메인을 조사한 결과, 2026년 5월에 llms.txt 파일에 대한 요청이 0건인 경우가 97%였습니다. AI 검색 봇이 전체 요청의 1.1%만을 차지했으며(AI 어시스턴트는 2.5%), Claude Code와 같은 코딩 에이전트가 주요 독자 중 하나였습니다.
결론: 문서 플랫폼에서 무료로 제공한다면 llms.txt을 추가하세요. 특히 개발자가 코딩 에이전트와 함께 문서를 사용하는 경우라면 더욱 그렇습니다. 하지만 ChatGPT가 귀사에 대해 어떻게 말할지에 영향을 줄 것이라고 기대하지는 마세요. llms-full.txt(모든 페이지를 하나의 파일로)은 제안서의 일부가 아닌 일반적인 관례입니다.
문서를 Markdown으로 제공해야 할까요?
비용이 들지 않는다면 제공하는 것이 좋습니다. 페이지를 가져오는 에이전트는 탐색 메뉴와 스크립트로 가득 찬 HTML보다 깔끔한 Markdown에서 더 잘 작동하며, llms.txt 제안서는 각 페이지를 .md이 추가된 동일한 URL에서 제공할 것을 권장합니다. 세 가지 세부 사항은 다음과 같습니다.
- Markdown 복사본에
noindex을 표시하여(X-Robots-Tag헤더 사용) 검색 엔진이 이를 HTML 페이지의 중복 콘텐츠로 처리하지 않도록 하세요. - HTML과 동일한 소스에서 생성되도록 유지하여 내용이 어긋나지 않게 하세요.
- 에이전트가 찾을 수 있도록 하세요: 제안서는 각 HTML 페이지에
<link rel="alternate" type="text/markdown">태그를 추가할 것을 권장합니다.
AI 에이전트는 MCP를 통해 문서를 어떻게 사용하나요?
Model Context Protocol은 AI 애플리케이션이 도구를 호출하고 다른 시스템의 데이터를 읽을 수 있게 해주는 오픈 표준입니다. 문서 MCP 서버를 사용하면 에이전트가 학습한 내용에 의존하는 대신 필요할 때마다 문서를 검색할 수 있으며, 적절한 권한이 있다면 페이지를 초안 작성하거나 업데이트할 수 있습니다. 사용 가능한 서버 비교는 문서용 MCP 서버를 참조하세요.
문서 기반의 자체 어시스턴트(검색 증강 생성, RAG)를 구축하는 경우에도 동일한 규칙이 적용됩니다. 어시스턴트는 검색된 구절만큼만 정확할 수 있습니다. 두 가지 주의 사항: 사람이 검토하지 않는 한 고객 대면 콘텐츠에 대한 읽기 전용 액세스 권한만 부여하고, MCP는 사용자가 직접 연결하는 에이전트를 돕는다는 점을 기억하세요. 이는 공개 답변 엔진이 말하는 내용을 바꾸지는 않습니다.
AI 어시스턴트가 우리 제품에 대해 어떻게 말하는지 어떻게 테스트하나요?
모델 내부를 볼 수 있는 사람은 없으므로 출력을 테스트해야 합니다. 한 달에 한 번 다음을 수행하세요:
- 티켓과 실패한 고객 센터 검색에서 실제 고객 질문 20개를 적습니다.
- ChatGPT, Perplexity, Claude, Google(AI 모드 또는 AI 개요)에 각각 질문합니다.
- 답변이 정확한지, 어떤 페이지를 인용했는지 기록합니다.
| 질문(어시스턴트) | 답변 내용(인용 출처) | 수정 사항 |
|---|---|---|
| 송장을 CSV로 내보내는 방법은? (ChatGPT) | 부분적으로 맞음: 오래된 메뉴 경로(2024년 포럼 게시물) | 내보내기 문서 업데이트; 첫 번째 단락에 새 경로 추가 |
| 구독을 일시 중지할 수 있나요? (Perplexity) | 틀림: 불가능하다고 함(출처 없음) | 요금제 제한 사항을 명시한 "일시 중지 또는 취소" 문서 추가 |
- 잘못된 답변이 나왔어야 할 문서를 수정하고 다음 달에 다시 질문하세요.
트래픽 측면을 보려면 리퍼러(chatgpt.com, perplexity.ai, claude.ai)별로 방문을 분류하고, 위 표의 봇 이름(자체 사용자 에이전트가 없는 Google-Extended 제외)에 대해 서버 로그를 확인하세요. Google은 Search Console의 실적 보고서에서 웹 검색 유형 아래에 AI 기능으로부터의 클릭 수를 집계합니다.
문서를 AI-ready로 만드는 방법: 체크리스트
| 우선순위 | 작업 | 근거 |
|---|---|---|
| 1 | JavaScript 없이 HTML에 문서 텍스트 포함 | 강력함: 주요 AI 크롤러는 JS를 렌더링하지 않음 |
| 2 | robots.txt 및 방화벽이 검색 봇 허용(학습 봇은 선택 사항) | 강력함: 각 AI 기업이 문서화함 |
| 3 | 문서당 하나의 작업, 답변 우선, 계획 및 역할 명시 | 좋음: Google 가이드라인과 일치 |
| 4 | 릴리스마다 콘텐츠 업데이트; 404 오류 없음 | 좋음: 오래된 페이지는 잘못된 답변을 생성함 |
| 5 | 사이트맵 최신 상태 | 좋음: 표준 검색 |
| 6 | 각 페이지의 Markdown 복사본, noindexed | 보통: 코딩 에이전트가 사용 |
| 7 | llms.txt | 현재 약함: 요청이 거의 없고 Google은 무시함 |
| 8 | 에이전트용 MCP 서버 | 에이전트 사용자에게 유용; 공개 답변에는 영향 없음 |
| 항상 | 실제 질문 20개에 대한 월간 테스트 | 자체 근거 |
Clevera 고객 센터가 AI 독자를 위해 구축되는 방식
Clevera는 화면 녹화 영상을 내레이션이 포함된 사용 방법 영상, 단계별 도움말 문서, 호스팅된 고객 센터 페이지로 74개 언어로 변환하는 AI 플랫폼입니다. Clevera의 호스팅 고객 센터는 무료 플랜을 포함한 모든 플랜에서 체크리스트의 기술적 절반을 처리합니다:
- 사전 렌더링된 페이지와 사이트맵: 크롤러가 가져오는 HTML에 문서 텍스트가 포함됩니다.
llms.txt,llms-full.txt및 모든 페이지의.md복사본: 기본적으로 켜져 있는 llms.txt 및 Markdown 복사본("AI 도구가 문서를 읽을 수 있도록 허용") 설정 아래에 있습니다. 자체 고객 센터에서 Markdown 복사본은noindex과 함께 제공됩니다. 비공개 고객 센터(Pro 이상)는 이 모든 것을 로그인 뒤에 유지합니다.- 독자를 위한 AI 질문하기: (설정 → AI 어시스턴트에서 어시스턴트 표시를 켜세요; 무료 플랜에서 월 300개 답변). 내장된 어시스턴트는 게시된 페이지에서만 답변하고, 출처를 링크하며, 문서가 질문을 다루지 않을 때는 이를 알리고, 답변되지 않은 질문 아래에 해당 질문을 나열하여 다음에 무엇을 작성해야 할지 알 수 있게 합니다(고객 센터 콘텐츠 공백에 대한 가이드에서 해결 방법을 확인하세요).
- AI 에이전트 및 MCP(Pro 이상): Claude Code, Codex, Cursor, Claude 또는 ChatGPT는 Clevera의 MCP 서버와 API를 통해 고객 센터를 검색, 초안 작성 및 게시 권한이 있는 경우 업데이트할 수 있습니다. 지원 어시스턴트 토큰은 게시된 공개 페이지만 검색할 수 있습니다.
다음은 자체 고객 센터가 게시하는 llms.txt의 상단 부분입니다(단축됨):
# Clevera Help Center
> Clevera turns screen recordings into polished videos: record your screen
> or let the AI record a website, edit with zooms, captions and AI
> voice-overs, then share or embed the result. ...
Every page is also available as Markdown: append `.md` to its URL.
The full text of all pages is at https://help.clevera.ai/llms-full.txt.
### Getting started
- [Understand what Clevera makes](https://help.clevera.ai/docs/getting-started/what-clevera-makes.md): ...
작성 작업은 여전히 귀사의 몫이며, Clevera도 이를 돕습니다. 화면 녹화에서 생성된 문서는 화면에 무엇이 있는지 보여주는 스크린샷과 번호가 매겨진 단계로 구성되며, 영상 뒤의 녹화본으로도 서면 문서를 생성할 수 있어 단계가 영상에만 머물지 않습니다. ChatGPT가 귀사를 인용할 것이라고 보장하는 플랫폼은 없으며, 저희도 마찬가지입니다.
무료로 시작하기를 통해 호스팅된 고객 센터를 이용하거나 Zendesk, Intercom, GitBook 및 기타 플랫폼에서 현재 고객 센터를 가져오세요. 설정은 문서 사이트를 읽을 수 있는 사람 제어, 문서 사이트 어시스턴트 설정 및 AI 에이전트를 문서 사이트에 연결에서 확인할 수 있습니다. 제품 개요는 고객 센터 소프트웨어 페이지와 문서 사이트 출시 게시물에 있습니다.
FAQ
llms.txt를 고객 센터에 추가할 가치가 있나요?
플랫폼에서 무료로 생성해 준다면 추가하세요. 비용이 들지 않고 코딩 에이전트가 이를 읽기는 하지만, Google은 이를 사용하지 않으며 연구 결과 AI 검색 봇의 요청은 거의 없는 것으로 나타났습니다. 크롤링 가능한 HTML과 명확하고 최신 상태인 문서가 훨씬 더 중요합니다.
ChatGPT가 우리 제품에 대한 질문에 정확하게 답변하게 하려면 어떻게 해야 하나요?
OAI-SearchBot이 공개 고객 센터를 크롤링할 수 있는지, 문서 텍스트가 HTML에 포함되어 있는지, 각 문서가 명시된 조건에 따라 하나의 질문에 답변하는지 확인하세요. 그런 다음 매달 실제 고객 질문을 테스트하고 잘못된 답변의 원인이 되는 페이지를 수정하세요. 이렇게 하면 확률이 높아지지만, ChatGPT가 귀사를 인용하도록 강제할 수는 없습니다.
GPTBot과 ClaudeBot을 차단해야 할까요?
이는 가시성 문제가 아니라 학습 결정입니다. GPTBot과 ClaudeBot을 차단하면 문서가 모델 학습에 사용되지 않지만, OAI-SearchBot과 Claude-SearchBot을 사용하는 ChatGPT 또는 Claude 검색에서 귀사가 제거되지는 않습니다. 인용되고 싶다면 이들을 차단하지 마세요.
구조화된 데이터가 AI 개요에 도움이 되나요?
Google은 AI 기능을 위해 특별한 스키마가 필요하지 않다고 말합니다. 일반 검색에서와 마찬가지로 보이는 콘텐츠를 설명하는 구조화된 데이터를 사용하세요.
AI-ready 문서와 고객 센터의 AI 챗봇은 어떤 차이가 있나요?
AI-ready 문서는 외부 어시스턴트가 내 페이지의 내용을 바탕으로 답변할 수 있도록 돕습니다. Clevera의 Ask AI와 같은 헬프 센터 챗봇은 동일한 페이지를 활용해 웹사이트 방문자에게 직접 답변을 제공합니다. 두 경우 모두 명확하고 최신 상태인 문서가 핵심입니다.
