llms.txt는 웹사이트 루트에 두는 작은 Markdown 파일로, AI 에이전트에게 중요한 페이지를 안내합니다. 만들기 쉽고, ChatGPT에 인용되거나 AI 검색에서 상위에 오르게 해 준다고 약속하는 조언도 많습니다. 이 글은 문서로 확인된 사실과 기대에 불과한 것을 나눕니다. 짧게 말하면, llms.txt는 Google 검색에 도움이 되지 않고, AI 인용을 늘린다는 증거도 없지만, 에이전트가 문서를 읽도록 돕는 한 가지 일에는 확실히 쓸모가 있습니다. 저희도 파일을 유지하고 있으며, 그것이 모순이 아닌 이유를 아래에서 설명합니다.
llms.txt란 무엇인가
이 제안은 Jeremy Howard가 만들었고 2024년 9월 3일 llmstxt.org에 공개되었습니다. 현재 이 페이지에는 제안의 버전 2가 실려 있으며, 마지막 수정일은 2026년 8월 10일입니다. 아이디어는 이렇습니다. 웹 페이지는 사람을 위해 만들어져서 본문 주위에 내비게이션, 스크립트, 레이아웃이 있습니다. 사이트를 이해해야 하는 에이전트에게는 짧고 깔끔한 요약과 중요한 페이지의 Markdown 버전 링크가 더 잘 맞습니다.
형식은 단순하고 정해져 있습니다.
- 사이트 이름을 적은 H1(유일한 필수 요소)
- 짧은 요약을 담은 인용 블록
- 세부 내용을 담은 선택적 문단
- H2 제목 아래의 섹션. 각 섹션은 선택적 메모가 붙는 링크 목록
- 관례상, 에이전트가 건너뛰어도 되는 링크를 모은 “Optional” 섹션
제안은 이 파일의 용도를 분명히 밝힙니다. 이 파일은 “on demand, when an agent needs information about a topic while assisting a user”, 즉 에이전트가 사용자를 돕다가 어떤 주제에 대한 정보가 필요할 때 그때그때 읽힙니다. 권한 파일이 아닙니다. 접근 규칙은 robots.txt에 있으며, llms.txt로는 어떤 크롤러도 허용하거나 차단할 수 없습니다.
SaaS 제품을 위한 최소한의 파일은 다음과 같을 수 있습니다.
# ExampleApp
> ExampleApp schedules social posts for small teams. Paid plans from $9 per month; free plan with 3 channels.
## Docs
- [Quick start](https://example.com/docs/start.md): set up the first channel
- [API reference](https://example.com/docs/api.md): REST endpoints and limits
## Product
- [Pricing](https://example.com/pricing.md): plans, limits, refunds
## Optional
- [Changelog](https://example.com/changelog.md)
Google의 입장
Google은 이 질문에 직접 답했습니다. 생성형 AI 기능을 위한 최적화 가이드에서 llms.txt를 Google 검색에서는 무시해도 되는 항목으로 꼽습니다.
“You don’t need to create new machine readable files, AI text files, markup, or Markdown to appear in Google Search (including its generative AI capabilities), as Google Search itself doesn’t use them.”
즉, Google 검색(생성형 AI 기능 포함)에 나오기 위해 새로운 기계 판독용 파일, AI 텍스트 파일, 마크업, Markdown을 만들 필요가 없으며, Google 검색 자체가 이를 사용하지 않는다는 뜻입니다.
2026년 6월 15일 Google은 이를 분명히 하는 메모를 추가했고, 문서 업데이트 기록에도 남겼습니다. 현재 가이드에는 이렇게 적혀 있습니다.
“It’s completely fine if you decide to create and maintain LLMS.txt files (or other similar files) for other services or systems that use these files. Doing so will neither harm nor help your site’s visibility or rankings in Google Search, as Google Search ignores them.”
정리하면, 이런 파일을 사용하는 다른 서비스나 시스템을 위해 LLMS.txt를 만들고 관리하는 것은 전혀 문제없지만, Google 검색은 이를 무시하므로 Google 검색에서의 노출이나 순위에 득도 실도 없다는 뜻입니다.
이는 AI Overviews와 AI Mode를 포함한 Google 검색에 해당합니다. ChatGPT, Claude, Perplexity에 대해서는 아무 말도 하지 않으며, 거기까지 확대해석해서는 안 됩니다.
다른 회사들은 어떨까요? 2026년 10월 1일 기준 OpenAI, Anthropic, Perplexity의 크롤러 페이지는 OAI-SearchBot, Claude-SearchBot, PerplexityBot 같은 robots.txt 토큰을 검색 노출을 관리하는 방법으로 설명합니다. 어느 곳도 llms.txt를 순위나 인용 신호로 언급하지 않습니다. 긍정하든 부정하든 아무런 언급을 찾지 못했으므로, “무시한다”는 말도 “사용한다”는 말만큼 근거가 없습니다. 이 크롤러들과 인용 여부를 실제로 좌우하는 요소는 AI 검색에서의 제품 노출 가이드에서 다룹니다.
데이터가 말하는 것과 말할 수 없는 것
가장 자주 인용되는 연구는 SE Ranking이 약 30만 개 도메인을 분석해 2025년 11월 7일에 발표한 것입니다. 결과는 다음과 같습니다.
- 10.13%의 도메인이 llms.txt 파일을 갖고 있었습니다.
- 도입률은 트래픽 규모와 관계없이 거의 비슷했습니다. 방문 0~100회 사이트는 9.88%, 1,001~5,000회는 10.54%, 100,000회 초과는 8.27%였습니다.
- Spearman 상관분석과 XGBoost 모델 모두에서 llms.txt가 도메인이 AI 모델에 인용되는 빈도에 미치는 효과는 발견되지 않았습니다. 이 변수를 빼자 모델은 오히려 더 정확해졌습니다.
저희는 이 수치를 쓰기 전에 방법론 부분을 읽었고, 중요한 한계가 세 가지 있었습니다.
- 상관관계 연구입니다. 파일이 있는 사이트와 없는 사이트를 비교할 뿐입니다. 파일을 추가하면 어떻게 될지는 어느 방향으로도 보여 줄 수 없습니다.
- 인용 데이터가 자세히 설명되어 있지 않습니다. 어떤 모델, 어떤 프롬프트, 어떤 기간, 몇 개의 답변을 표본으로 삼았는지 밝히지 않았고, 효과 크기도 공개하지 않았습니다. 저자들 스스로도 결과를 “context-dependent”(상황에 따라 다름)라고 부릅니다.
- 제안의 버전 2보다 앞선 연구이며, AI 노출 추적 서비스를 판매하는 회사가 수행했습니다. 그렇다고 틀린 것은 아니지만, 알아 둘 가치는 있습니다.
따라서 정직하게 읽으면 이렇습니다. 이 데이터셋에서 llms.txt 파일이 있다는 것은 AI 인용이 더 많다는 것과 함께 나타나지 않았습니다. 유용한 결과이고 Google의 입장과도 일치합니다. 하지만 llms.txt가 어떤 엔진에서도 절대 의미가 없다는 증명은 아닙니다. llms.txt로 인용을 늘려 주겠다는 사람이 있다면, 상관관계가 아니라 인과관계를 보여 주는 증거를 요청하세요. 저희는 그런 증거를 본 적이 없습니다.
llms.txt를 실제로 쓰는 곳
이 파일이 쓸모없는 것은 아닙니다. 대부분의 조언이 내세우는 용도는 아니지만, 실제 역할을 찾았습니다.
- AI 기업들이 자사 개발자 문서에 사용합니다. 2026년 10월 1일, developers.openai.com/llms.txt, platform.claude.com/llms.txt(docs.claude.com에서 리디렉션), docs.perplexity.ai/llms.txt 모두 200을 반환했습니다. OpenAI의 크롤러 문서는 아예 “For the complete documentation index, see llms.txt.”라는 문장으로 시작합니다.
- Chrome의 Lighthouse가 이를 검사합니다. Lighthouse에는 실험적인 “Agentic browsing” 카테고리가 있습니다(문서 최종 업데이트 2026년 5월 5일). 이 llms.txt 감사는 파일을 가져올 수 없으면 서버 오류로 표시하고, 파일이 없으면(404) “as providing the file is optional at the moment”, 즉 현재로서는 파일 제공이 선택 사항이라는 이유로 해당 없음 처리합니다. 순위 요소가 아니라 에이전트 대응 준비 상태를 보는 검사이며, Chrome 150 이상이 필요합니다.
- 코딩 에이전트가 문서를 읽을 때 사용합니다. 제안자는 이 파일이 “used most heavily for software documentation, where coding agents follow them to find API references and tutorials”라고 씁니다. 소프트웨어 문서에서 가장 많이 쓰이며, 코딩 에이전트가 API 레퍼런스와 튜토리얼을 찾기 위해 따라간다는 뜻입니다. 제안이 말하는 “필요할 때” 읽는 방식이 바로 이것입니다.
패턴은 이렇습니다. llms.txt는 에이전트가 이미 내 사이트에 있거나 곧 올 예정이고 지도가 필요할 때 도움이 됩니다. 에이전트를 그곳으로 데려오지는 않습니다.
LaunchRepo가 하는 일
저희는 두 파일을 모두 둡니다. /llms.txt와 더 긴 /llms-full.txt입니다. 2026년 10월 1일 기준 사실과 함께 그 이유를 설명합니다.
- 유지하는 데 비용이 들지 않습니다. 두 파일 모두 빌드 시점에 페이지와 같은 데이터, 즉 가격, 카탈로그 수, 가이드, 비교에서 생성됩니다. 사이트 내용과 어긋날 수 없습니다.
- 실제 독자가 있습니다. LaunchRepo는 코딩 에이전트를 위한 툴킷입니다. 누군가 자기 에이전트에게 LaunchRepo가 자기 제품에 맞는지 물으면, 가격과 제한이 담긴 깔끔한 요약이 그 에이전트가 정확히 답하도록 돕습니다.
- 현재 공개된 llms.txt는 63,009바이트이며, 19개 섹션과 177개 링크가 있습니다. 컨텍스트에 쉽게 들어가는 파일이라는 제안의 구상보다 크지만, 에이전트는 필요한 H2 섹션만 읽을 수 있습니다.
저희가 주장하지 않는 것: 이 파일이 트래픽, 인용, 순위를 가져다준다는 것. /llms.txt 요청에 대해 서버 로그를 분석하지 않았으므로 얼마나 자주, 누가 읽는지 말할 수 없고, 추측하지도 않겠습니다. 저희의 데이터 작업은 사람과 엔진이 인용할 수 있는 페이지에 집중합니다. 디렉터리 상태 지수와 디렉터리 백링크로 증명할 수 있는 것과 없는 것에 관한 글이 그 예입니다.
만들어야 할까?
| 내 상황 | 만들 가치가 있나? | 이유 |
|---|---|---|
| 에이전트가 읽는 API나 개발자 문서가 있다 | 예 | 이 형식이 만들어진 목적 그대로이며, 문서 플랫폼이 자동 생성해 주는 경우가 많다 |
| Google 순위나 AI Overviews 노출을 높이고 싶다 | 아니요 | Google 검색은 이 파일을 무시한다 |
| ChatGPT, Claude, Perplexity 인용을 늘리고 싶다 | 수단으로는 아님 | 효과의 증거가 없다. 대신 각 회사의 검색 크롤러를 허용한다 |
| 사이트가 원래 구조화된 데이터로 생성된다 | 추가 비용이 적다 | 자동 생성하면 낡을 일이 없다 |
| 직접 손으로 쓰고 관리해야 한다 | 우선순위 낮음 | 그 시간을 다른 누구도 갖지 못한 사실을 담은 페이지에 쓴다 |
만든다면 가격, 요금제, 제한, 그리고 제품이 하지 못하는 일까지 정확하게 유지하세요. 에이전트가 llms.txt에 남은 오래된 가격을 인용한다면 파일이 아예 없는 것보다 해롭습니다. 그리고 AI만을 위한 특별 페이지는 만들지 마세요. Google의 스팸 정책은 생성형 AI 답변에도 적용되며, 가이드는 답변을 조작하기 위해서만 콘텐츠를 만드는 행위를 분명히 지적합니다.
자주 묻는 질문
llms.txt가 Google 순위를 높여 주나요?
아니요. Google은 Google 검색이 llms.txt와 비슷한 파일들을 무시하며, 이를 두더라도 AI Overviews와 AI Mode를 포함해 노출이나 순위에 득도 실도 없다고 밝힙니다.
ChatGPT는 llms.txt를 사용하나요?
OpenAI는 그렇다고 말한 적이 없습니다. 크롤러 문서는 ChatGPT search를 관리하는 수단으로 OAI-SearchBot과 robots.txt를 꼽고, llms.txt는 언급하지 않습니다. 다만 OpenAI는 자사 개발자 문서용 llms.txt를 공개하고 있으며, 에이전트는 필요할 때 이를 읽을 수 있습니다.
llms.txt는 robots.txt와 같은 건가요?
아니요. robots.txt는 크롤러가 무엇에 접근해도 되는지 알려 줍니다. llms.txt는 에이전트를 위한 읽기 안내서이며, 무엇도 허용하거나 차단할 수 없습니다. AI 크롤러를 관리하려면 각 회사가 공개한 토큰으로 robots.txt를 설정하세요.
llms.txt로 AI 학습을 차단할 수 있나요?
아니요. 그러려면 GPTBot, ClaudeBot, Google-Extended 같은 robots.txt 토큰을 사용하세요. 이들은 검색 크롤러와 별개이므로 학습은 차단하면서도 AI 검색에는 계속 나타날 수 있습니다.
llms.txt 파일이 사이트에 해가 되나요?
Google은 Google 검색에서 득도 실도 없다고 말합니다. 실제 위험은 오래된 정보뿐입니다. 페이지에는 더 이상 없는 내용이 파일에 남아 있으면 에이전트가 잘못된 정보를 반복할 수 있습니다.
llms-full.txt는 무엇인가요?
llms.txt 제안에 포함된 것은 아닙니다. 제안의 중심은 짧은 색인과 페이지의 Markdown 버전입니다. 저희를 포함한 일부 사이트는 중요한 페이지의 전문을 담은 두 번째 파일을 공개해, 에이전트가 한 번의 요청으로 모든 내용을 읽을 수 있게 합니다. 저희 파일은 2026년 10월 1일 기준 174,811바이트였습니다.
AI 답변에 실제로 영향을 주는 요소들 사이에서 llms.txt가 어디에 위치하는지는 AI 검색에서의 제품 노출 가이드에서 확인하세요. 다음 단계가 사람과 엔진이 찾는 곳에 등록되는 것이라면 요금을 확인하세요.
출처(모두 2026년 10월 1일 확인): llmstxt.org(v2, 2026년 8월 10일), Google Search Central “Optimizing your website for generative AI features”(2026년 7월 10일 업데이트) 및 2026년 6월 15일 문서 업데이트, SE Ranking “Does LLMs.txt impact your AI visibility and citations?”(2025년 11월 7일), Chrome for Developers의 Lighthouse llms.txt 감사 및 agentic browsing 점수(2026년 5월 5일), OpenAI·Anthropic·Perplexity 크롤러 문서, 위에 언급한 llms.txt 파일들의 HTTP 상태, 2026년 10월 1일에 제공된 launchrepo.dev/llms.txt.