Напишите, если хотите: это стоит десять минут и ничего не ломает. Только не вносите это в план как стратегию видимости. Логи серверов по 137K доменов показывают, что 97% файлов llms.txt не были скачаны ни разу за май 2026, а пре-регистрированное исследование 3,048 страниц находит, что цитируемые страницы имеют файл не чаще. Google Search его игнорирует.
Идея и то, как она разошлась
llms.txt — это файл Markdown в корне сайта, который пересказывает, о чём сайт, и указывает важные страницы. Джереми Ховард из Answer.AI предложил формат в сентябре 2024 с разумным аргументом: веб-страницы спроектированы для людей, а AI-агенту, которому нужно сначала срезать навигацию, рекламу и скрипты, чтобы их прочитать, это стоит времени и токенов. Чистый пересказ в предсказуемом месте стоит дешевле чтения.
Предложение нашло аудиторию. В выборке Ahrefs из 137K доменов, использующих его продукт web analytics, 28% опубликовали llms.txt к середине 2026. Крупные AI-лаборатории публикуют такие файлы для собственной документации для разработчиков, а в конце мая 2026 Lighthouse в Chrome добавил проверку llms.txt в свои экспериментальные аудиты агентной навигации. Это настоящий формат с настоящим принятием, а не нишевый эксперимент.
Доказательство 1: 97% файлов не читаются никогда
Если бы файл работал так, как обещают лендинги генераторов, AI-краулеры запрашивали бы его безостановочно. Логи серверов говорят обратное. Ahrefs проанализировал логи и реальный трафик 137,210 доменов, использующих его аналитические продукты. Ключевая находка: 97% опубликованных файлов llms.txt не получили в мае 2026 ни одного запроса. Их никогда не скачивали.
Эти 3% скачанных рассказывают свою историю. Большинство запросов пришло от ботов всякого рода (96%). Именованные AI-инструменты дали 19.5% скачиваний — впереди GPTBot, следом Claude-Code, опережая все боты AI-поисковиков. Ещё 12% пришло от GEO-инструментов, чекеров llms.txt и исследователей: индустрия проверяет собственную домашнюю работу.
Самое острое наблюдение — в конце отчёта. Для файлов llms.txt, которых не существовало, боты AI сделали ноль запросов. Они никогда не идут его искать. Лендинги, обещающие файл «собранный по спецификации, которую ищут ChatGPT, Claude и Perplexity», описывают чтение, которое в логах просто не происходит.
Уровень доказательств: наблюдательные данные логов на большой выборке, один месяц (май 2026), один аналитический вендор
Логи скачиваний измеряют crawling. Второе исследование измеряет то, что действительно важно: быть цитируемым. Мэтт Тиммерманс из Timmermans Media пропустил в сентябре 2026 через API ChatGPT и Gemini 400 вопросов без бренда, по три прогона на вопрос, собрал каждую цитированную в ответах страницу и проверил, есть ли у неё llms.txt. Группа сравнения: страницы из топ-10 Google по тем же вопросам, нецитируемые. Всего 3,048 страниц.
Результат: 22.4% верифицируемых цитированных страниц имели файл. И 25.4% верифицируемых нецитируемых. Интервалы перекрываются, а направление скорее обратное. Иначе говоря: 1,033 из 1,331 верифицируемых цитированных страниц (78%) не имели никакого полезного файла по /llms.txt. Из 20 самых цитируемых страниц у 16 — включая голландскую потребительскую организацию и сайт национального правительства — не было никакого.
Исследование заслуживает похвалы за методику, редкую на этом рынке. Пре-регистрация, открытые данные на Zenodo, а автор отделяет то, что измерил, от того, что не измерил: это описательное сравнение, не причинное — оно не может показать, изменило бы добавление файла цитируемость страницы. Он взвесил обе группы по типу страниц и сообщает, что небольшая разница сужается ещё сильнее. Нулевой результат, поданный с такой тщательностью, стоит больше положительного, поданного без всякой.
Уровень доказательств: пре-регистрированное описательное сравнение, один день замера (26 сентября 2026), вопросы на голландском, только API ChatGPT и Gemini
Что говорит Google
Руководство Google по оптимизации для генеративного AI, опубликованное в мае 2026, содержит раздел «Mythbusting generative AI search», и llms.txt открывает список того, что можно игнорировать:
«Вам не нужно создавать новые машиночитаемые файлы, текстовые файлы для AI, разметку или Markdown, чтобы появляться в Google Search (включая его генеративные AI-функции), поскольку сам Google Search их не использует».
Руководство добавляет, что его создание «не вредит и не помогает видимости и позиции вашей страницы в Google Search, поскольку Google Search их игнорирует». Ahrefs приводит: на вопрос Лили Рэй, зачем команде Chrome Lighthouse аудировать файл, который поиск игнорирует, Джон Мюллер из Google назвал llms.txt форматом, «не сделанным для поиска», «временной костыль — возможно, чтобы сэкономить немного токенов» — для AI-инструментов для кода, читающих документацию разработчиков.
Это описание совпадает с реальным использованием файла. Это формат для кодирующих агентов, читающих техническую документацию, — не канал поиска и не канал цитирований в чат-ботах.
Откуда берутся большие обещания
Ничто из этого не затормозило маркетинг. Лендинги генераторов обещают, что «в следующий раз, когда ChatGPT, Claude или Perplexity посетит ваш сайт, он получит ясную карту вместо догадок». Страницы плагинов утверждают, что без файла AI-системы «редко цитируют или рекомендуют вас», а один хвастается отзывом о трафике из Perplexity, «утроенном». Инструменты-чекеры сканируют файл, о котором большие движки почти никогда не спрашивают.
Паттерн повторяется по всей категории. Обещание формулируется как факт. Поддерживающая ссылка, если есть, ведёт на статью другого вендора. Исследования, которые что-то контролируют, возвращаются пустыми. Тот же паттерн мы описали для JSON-LD (что schema-разметка на самом деле делает с цитированиями AI): страницы вендоров цитируют огромные множители за правки разметки, пока контролируемые тесты не находят ничего. Когда вендор цитирует огромный прирост от правки разметки, проверьте, откуда число — из контролируемого исследования или из внутреннего бенчмарка вендора. Пока что все приросты от разметки были из второй категории.
Так стоит ли писать?
Вот вердикт, который мы применяем к себе.
Стоят десяти минут:
- Вы публикуете документацию для разработчиков. Это единственный случай использования с опорой на логи. Скачивания, которые случаются, в основном от кодовых инструментов: GPTBot и Claude-Code были двумя самыми активными AI-фетчерами в логах Ahrefs, а Мюллер описал формат как костыль именно для этой аудитории. Если ваш продукт выставляет API — это ваш случай.
- Ваша CMS или SEO-плагин уже генерирует его. Проверьте его вместо того, чтобы игнорировать. Автосгенерированные файлы бывают пустыми или устаревшими, а пустой файл не помогает редкому агенту, который всё же читает.
- Вам нужно каноничное, читаемое человеком резюме своего сайта в предсказуемом месте. Это документационная ценность, даже если ни один краулер не заглянет.
Не стоят бюджета:
- Покупка llms.txt как стратегии видимости AI. Два лучших доступных набора данных говорят одно и то же: файл не является рычагом.
- Ежемесячное ухаживание за файлом и повторные сабмиты на всякий случай. В исследовании Тиммерманса большинство цитированных страниц не имели файла и всё же были процитированы. Привычки, которые эти страницы действительно разделяют, стоят ваших часов: быть называемым в сети, которую читают ваши покупатели (почему быть называемым стоит дороже, чем ранжироваться), и страницы, целиком отвечающие на вопрос категории. Если вы никогда не мерили, называет ли вас AI, ручной тест занимает половину дня и не требует инструментов.
Наше место во всём этом
Мы делаем эти проверки, потому что на этом живём. В диагностике CiteGap llms.txt находится на уровне гигиены: мы проверяем, существует ли ваш файл и говорит ли он что-то полезное, не утверждая, что он меняет ваш показатель цитирований. Проверки, которые действительно могут стоить вам видимости, идут раньше: доходят ли AI-краулеры до ваших страниц, блокирует ли robots.txt ботов, отвечающих пользователям, ясно ли ваши страницы говорят, как называется ваш продукт. Для бесплатного первого взгляда: мгновенная проверка протестирует вашу главную страницу за секунды и покажет каждый результат на странице.
Каждое число в этой статье сверено с линкуемым источником 4 ноября 2026 года. Этот рынок быстро движется; перепроверьте, прежде чем привести хоть одно число в клиентском материале.
Источники
- Ahrefs: 97% файлов llms.txt никогда не читаются (137,210 доменов, анализ логов и трафика, данные мая 2026, опубликовано в июне 2026): ahrefs.com/blog/llmstxt-study
- Timmermans Media: помогает ли llms.txt цитированиям AI? (3,048 страниц, замер 26 сентября 2026, опубликовано 8 октября 2026; пре-регистрация, открытые данные): timmermansmedia.com/research/llms-txt-ai-sources, пре-регистрация doi.org/10.5281/zenodo.22974863
- Google Search Central: оптимизируйте страницу под генеративные AI-функции, раздел «Mythbusting generative AI search»: developers.google.com/search/docs/fundamentals/ai-optimization-guide
- Google Search Central, release notes 15 июня 2026: пояснения о файлах llms.txt: developers.google.com/search/updates
- llmstxt.org: исходное предложение Джереми Ховарда, сентябрь 2024 (v2, август 2026): llmstxt.org
- Приведённые выше маркетинговые примеры: okara.ai llms.txt generator, hillms.com, ai-seo.pro