쓰고 싶으면 쓰세요. 10분이면 끝나고 망가지는 것도 없습니다. 다만 표시 전략으로 계획에 올려두지는 마세요. 137K 도메인의 서버 로그에 따르면 2026년 5월 llms.txt 파일의 97%는 단 한 번도 다운로드되지 않았고, 3,048개 페이지의 사전등록 연구는 인용된 페이지가 파일을 가질 확률이 더 높지 않음을 발견했습니다. Google Search는 이 파일을 무시합니다.
아이디어와 그 확산
llms.txt는 사이트 루트에 두는 Markdown 파일로, 이 사이트가 무엇인지 요약하고 중요한 페이지를 가리킵니다. Answer.AI의 Jeremy Howard가 2024년 9월 이 형식을 제안할 때의 논거는 일리가 있었습니다. 웹 페이지는 인간을 위해 설계되었고, AI 에이전트가 읽기 전에 내비게이션, 광고, 스크립트를 걷어내야 한다면 그 대가로 시간과 토큰을 지불하게 된다. 예측 가능한 위치의 깔끔한 요약이 읽기에 더 저렴하다는 것입니다.
제안은 청중을 찾았습니다. Ahrefs 웹 애널리틱스 제품을 쓰는 137K 도메인 샘플에서 2026년 중반 기준 28%가 llms.txt를 공개하고 있었습니다. 대형 AI 랩은 자사 개발자 문서에 이런 파일을 공개하고 있고, 2026년 5월 말에는 Chrome의 Lighthouse가 실험적 에이전틱 내비게이션 감사에 llms.txt 점검을 추가했습니다. 주변부 실험이 아니라 실제 채택을 동반한 실제 형식입니다.
증거 1: 97%의 파일은 한 번도 읽히지 않았다
만약 파일이 제너레이터 판매 페이지가 내세우는 대로 작동한다면, AI 크롤러는 끊임없이 이를 요청했을 것입니다. 서버 로그는 반대를 보여줍니다. Ahrefs는 자사 애널리틱스 제품을 쓰는 137,210개 도메인의 실제 로그와 트래픽을 분석했습니다. 핵심 발견: 공개된 llms.txt 파일의 97%는 2026년 5월 단 하나의 요청도 받지 못했습니다. 아무것도 다운로드하지 않은 것입니다.
다운로드된 3%에는 고유한 이야기가 있습니다. 요청의 대부분은 각종 봇에서 왔습니다(96%). 이름이 언급된 AI 도구는 다운로드의 19.5%를 차지했습니다—GPTBot이 선두, Claude-Code가 뒤를 이으며 모든 AI 검색 봇을 앞섰습니다. 나머지 12%는 GEO 도구, llms.txt 체커, 연구자들에서 왔습니다. 업계가 스스로의 숙제를 채점하고 있는 셈입니다.
가장 날카로운 발견은 보고서 말미에 있습니다. 존재하지 않는 llms.txt 파일에 대한 AI 봇의 요청은 0건이었습니다. 봇은 스스로 찾으러 다니지 않습니다. "ChatGPT, Claude, Perplexity가 찾는 사양에 맞춰 구축된" 파일을 내세우는 판매 페이지는 로그에서 실제로 일어나지 않는 읽기를 묘사하고 있는 것입니다.
증거 수준: 대규모 관찰 로그 데이터, 1개월(2026년 5월), 애널리틱스 벤더 1개
다운로드 로그가 측정하는 것은 크롤링입니다. 두 번째 연구가 측정하는 것은 정말 중요한 것: 인용되는 것. Timmermans Media의 Matt Timmermans는 2026년 9월 브랜드 없는 400개 질문을 ChatGPT와 Gemini API로 흘려보내고(질문당 3회), 답변 안의 인용 페이지를 모두 수집해 llms.txt 보유 여부를 확인했습니다. 대조군: 같은 질문의 Google 상위 10위권이지만 인용되지 않은 페이지. 총 3,048개 페이지.
결과: 인용되고 검증 가능한 페이지의 22.4%가 파일을 갖고 있었습니다. 그리고 인용되지 않고 검증 가능한 페이지에서는 25.4%. 신뢰구간은 서로 겹치고, 방향이 있다면 오히려 반대로 기울어 있습니다. 다시 말해, 인용되고 검증 가능한 1,331개 페이지 중 1,033개(78%)는 /llms.txt에 쓸 만한 파일을 전혀 갖고 있지 않았습니다. 가장 많이 인용된 20개 페이지 중 16개—네덜란드 소비자 단체와 국가 정부 사이트 포함—는 파일이 없었습니다.
이 연구는 방법론 때문에 신뢰할 가치가 있고, 이 시장에서 그것은 희소합니다. 사전등록, Zenodo의 공개 데이터, 그리고 저자는 측정한 것과 측정하지 않은 것을 구분합니다. 이는 기술적 비교이지 인과가 아니며—파일을 추가하면 어떤 페이지의 인용이 바뀌는지 보여줄 수 없습니다. 그는 두 집단을 페이지 유형으로 재가중하고 작은 격차가 더 좁아진다고 보고했습니다. 이런 정성으로 제시된 0의 결과는 정성 없이 제시된 양의 결과보다 가치 있습니다.
증거 수준: 사전등록된 기술적 비교, 1일 측정(2026년 9월 26일), 네덜란드어 질문, ChatGPT와 Gemini API만 사용
Google이 말하는 것
2026년 5월 공개된 Google의 생성형 AI 기능 최적화 가이드에는 "생성형 AI 검색 오해 풀기" 섹션이 있고, llms.txt는 무시해도 되는 것 목록의 선두에 있습니다.
"Google Search(생성형 AI 기능 포함)에 노출되기 위해 기계 가독형의 새로운 텍스트 파일, AI용 파일, 마크업, Markdown을 만들 필요가 없습니다. Google Search가 이를 사용하지 않기 때문입니다."
가이드는 또한 이를 만드는 것이 "Google Search에서 페이지의 가시성과 위치에 해롭지도 도움되지도 않습니다. Google Search가 이를 무시하기 때문"이라고 덧붙입니다. Ahrefs의 인용: 검색이 무시하는 파일을 왜 Chrome Lighthouse 팀이 감사해야 하는지에 대한 Lily Ray의 질문에 Google의 John Mueller는 llms.txt가 검색을 위해 만들어진 형식이 아니라 개발자 문서를 읽는 AI 코딩 도구를 위한 "임시 목발—아마 토큰을 몇 개 아끼기 위한" 것이라고 답했습니다.
이 묘사는 파일의 실제 사용 방식과 일치합니다. 이는 기술 문서를 읽는 코딩 에이전트를 위한 형식입니다. 검색 채널이 아니며, 챗봇의 인용 채널도 아닙니다.
큰 약속은 어디서 오는가
그런 사정이 마케팅의 발걸음을 멈추지는 않았습니다. 제너레이터 판매 페이지는 "다음에 ChatGPT, Claude, Perplexity가 당신 사이트를 방문하면 추측 대신 명확한 지도를 얻을 것"이라고 약속합니다. 플러그인 페이지는 파일이 없으면 AI 시스템이 "당신을 인용하거나 추천하는 일이 거의 없다"고 주장하고, 그중 하나는 Perplexity에서 온 트래픽이 "3배가 되었다"는 추천사로 치장되어 있습니다. 체커 도구는 대형 기계가 단 한 번도 요청한 적 없는 파일을 검사합니다.
이 패턴은 업계 전반에서 반복됩니다. 약속은 사실의 형태로 진술됩니다. 뒷받침 링크는 있어도 다른 벤더의 글을 가리킵니다. 실제로 통제한 연구는 빈손으로 돌아옵니다. 같은 패턴을 JSON-LD 글(스키마 마크업이 AI 인용에 실제로 하는 일)에서 이미 다뤘습니다. 벤더 페이지는 마크업 변경에 큰 배수를 인용하고, 통제 테스트는 아무것도 찾지 못합니다. 벤더가 마크업 변경에 큰 이득을 인용할 때는 그 숫자가 통제 연구에서 왔는지 벤더 내부 벤치마크에서 왔는지 확인하세요. 지금까지 마크업 이득은 전부 후자 유형입니다.
그렇다면 쓸 만한가
이것이 우리 스스로에게 적용하는 판단입니다.
10분 분량으로 할 만한 경우:
- 개발자 문서를 공개하는 경우. 로그가 등을 떠받쳐주는 유일한 유스케이스입니다. 다운로드는 주로 코딩 도구에서 왔습니다. GPTBot과 Claude-Code는 Ahrefs 로그에서 가장 활동적인 두 AI 페처였고, Mueller는 이 형식을 바로 이 청중을 위한 목발이라고 불렀습니다. 제품이 API를 제공한다면 당신의 케이스입니다.
- CMS나 SEO 플러그인이 이미 생성하는 경우. 무시하지 말고 확인하세요. 자동 생성 파일은 비어 있거나 오래되었을 수 있고, 빈 파일은 어렵게나마 읽어주는 에이전트에게도 도움이 되지 않습니다.
- 사이트에 대한, 사람이 읽기 좋은 정규 요약을 예측 가능한 위치에 두고 싶은 경우. 크롤러가 보지 않아도 문서로서의 가치가 있습니다.
예산을 쓸 가치가 없는 경우:
- llms.txt를 AI 가시성 전략으로 구매하는 것. 현존하는 최고의 두 데이터셋이 같은 말을 합니다. 이 파일은 레버가 아닙니다.
- 월 단위로 파일을 관리하고 진지하게 재제출하는 것. Timmermans 연구에서 인용된 페이지 대부분은 파일이 없었고도 인용되었습니다. 인용된 페이지가 실제로 공유한 습관에는 당신의 시간이 가치 있는 것들이 있습니다. 당신 구매자가 읽는 네트워크에서 이름으로 불리는 것과, 분야의 질문에 통째로 답하는 페이지입니다. AI가 당신을 이름으로 부르는지 측정해 본 적이 없다면 수동 테스트는 오후 하나면 끝나고 도구가 필요 없습니다.
이 논의에서 우리의 입장
우리가 이 점검들을 운영하는 것은 그것으로 생계를 유지하기 때문입니다. CiteGap 진단에서 llms.txt는 위생 수준에 놓여 있습니다. 파일이 존재하고 유용한 말을 하는지 확인합니다. 인용 지표를 바꾼다고 주장하지는 않습니다. 당신의 가시성을 실제로 짓밟을 수 있는 점검들은 그 앞에 있습니다. AI 크롤러가 당신 페이지에 도달하는지, robots.txt가 사용자에게 답하는 봇을 막고 있는지, 페이지가 제품명을 명확히 말하는지. 무료 첫걸음으로: 즉시 검증이 홈페이지를 몇 초 만에 점검하고 모든 결과를 페이지에서 보여줍니다.
이 글의 모든 숫자는 2026년 11월 4일 기준으로 링크된 소스와 다시 대조했습니다. 이 시장은 빠르게 움직입니다. 고객 자료에 숫자를 인용하기 전에 다시 확인하세요.
출처
- Ahrefs: 97%의 llms.txt 파일은 한 번도 읽히지 않았다 (137,210 도메인, 로그·트래픽 분석, 2026년 5월 데이터, 2026년 6월 공개): ahrefs.com/blog/llmstxt-study
- Timmermans Media: llms.txt가 AI 인용에 도움이 되나? (3,048 페이지, 2026년 9월 26일 측정, 2026년 10월 8일 공개. 사전등록, 공개 데이터): timmermansmedia.com/research/llms-txt-ai-sources, 사전등록 doi.org/10.5281/zenodo.22974863
- Google Search Central: 생성형 AI 기능을 위한 페이지 최적화, "생성형 AI 검색 오해 풀기" 섹션: developers.google.com/search/docs/fundamentals/ai-optimization-guide
- Google Search Central, 2026년 6월 15일 릴리스 노트: llms.txt 파일에 대한 명확화: developers.google.com/search/updates
- llmstxt.org: Jeremy Howard의 원 제안, 2024년 9월 (v2, 2026년 8월): llmstxt.org
- 위에서 인용한 마케팅 사례: okara.ai llms.txt generator, hillms.com, ai-seo.pro