3 декабря 2025 года SEO-сообщество получило одну из самых ироничных новостей года: на портале документации Google Search Central появился файл llms.txt — стандарт, который представители Google публично называли бесполезным на протяжении всего 2025 года. Файл обнаружила SEO-специалист Лидия Инфанте (Lidia Infante) и опубликовала находку в Bluesky с прямым вопросом к Джону Мюллеру: «Это одобрение llms.txt или вы троллите нас, Джон?» Мюллер ответил криптичным «hmmn :-/». Через несколько часов файл вернул 404.
Что такое llms.txt и зачем он нужен
llms.txt — это текстовый файл в формате Markdown, который размещается в корне сайта. Его задача — дать языковым моделям (ChatGPT, Claude, Perplexity, YandexGPT) структурированную карту самого важного контента сайта без необходимости парсить навигацию, рекламу и JavaScript. Стандарт предложил Джереми Ховард (Jeremy Howard), сооснователь Answer.AI, в сентябре 2024 года. По данным BuiltWith, к октябрю 2025 года файл внедрили более 844 000 сайтов, включая Anthropic, Cloudflare, Stripe и Vercel.
Ключевое отличие от robots.txt: llms.txt не блокирует доступ, а направляет AI-системы к наиболее ценным страницам. Если robots.txt — это охранник на входе, то llms.txt — библиотекарь, который подсказывает, какие книги стоит прочитать первыми.
Хронология конфликта: что Google говорил vs что Google делал
| Дата | Событие | Источник |
|---|---|---|
| Сентябрь 2024 | Джереми Ховард публикует спецификацию llms.txt на llmstxt.org | llmstxt.org |
| Ноябрь 2024 | Anthropic добавляет llms.txt и llms-full.txt в свою документацию через платформу Mintlify | Mintlify Blog |
| Июнь 2025 | Джон Мюллер: «Ни одна AI-система не использует llms.txt» | Bluesky |
| Июль 2025 | Гэри Илиес на Search Central Live: «Google не поддерживает llms.txt и не планирует» | Search Central Live |
| Июль 2025 | Мюллер рекомендует ставить noindex на llms.txt, чтобы файл не засорял поисковую выдачу | Search Engine Journal |
| 3 декабря 2025 | Файл llms.txt обнаружен на developers.google.com/search/docs/llms.txt | Bluesky, Search Engine Roundtable |
| 3 декабря 2025 | Файл найден и на других Google-поддоменах: developer.chrome.com, web.dev, developers.google.com/wallet | Dave Smart, Bluesky |
| 3 декабря 2025 | Файл удалён с Search Central. На других поддоменах остаётся | Search Engine Roundtable |
| Январь 2026 | Мюллер подтверждает: наличие файла на Google-поддоменах — не одобрение стандарта | Bluesky, Search Engine Roundtable |
Почему файл появился и исчез
Наиболее вероятное объяснение: CMS-платформа, которую Google использует для документации, получила обновление с поддержкой llms.txt. Файлы автоматически сгенерировались на всех поддоменах — это платформенное обновление, а не осознанное решение команды Search Central. Эту версию подтвердил SEO-специалист Дэйв Смарт (Dave Smart), указав на одновременное появление файлов на developer.chrome.com, web.dev и developers.google.com/wallet.
Команда Search Central заметила файл и удалила его в тот же день. Другие команды Google не обратили внимания или не посчитали нужным — файл на ai.google.dev/api/llms.txt, например, остаётся доступным.
Что это значит на практике
Главный вывод: Google как корпорация экспериментирует с llms.txt, даже если команда Search публично от него открещивается. Это нормальная ситуация для компании с десятками продуктовых команд. Gemini API, Chrome DevTools и другие подразделения могут иметь собственное мнение о полезности стандарта.
Для владельцев сайтов это означает три вещи:
- llms.txt не влияет на ранжирование в Google Search. Ни один представитель Google не заявлял обратного, и декабрьский инцидент этого не опроверг.
- llms.txt может быть полезен для AI-поисковиков за пределами Google. Anthropic внедрил стандарт в свою документацию. Mintlify генерирует файл автоматически для сотен проектов. Есть данные о визитах GPTBot на llms.txt в серверных логах отдельных сайтов.
- Внедрение llms.txt — это час работы с нулевым даунсайдом. Файл не может навредить. В худшем случае его просто никто не прочитает. В лучшем — AI-агенты получат чистую карту вашего контента.
Позиция melanina.ru: мы внедряем llms.txt
На практике я применяю подход «cheap option»: если действие стоит мало, не может навредить и потенциально полезно — делай. Файл llms.txt для melanina.ru занял 30 минут на создание. В него вошли: описание сайта, ссылки на pillar-гайды, глоссарий и ключевые страницы услуг. Через 30 дней опубликую замер: какие AI-краулеры обратились к файлу и изменилась ли цитируемость.
Это эксперимент — и именно в этом ценность. Пока SEO-сообщество спорит, стоит ли внедрять llms.txt, я получу собственные данные. Результаты будут в отдельном материале AI-лаборатории.
Контекст: кто уже использует llms.txt
Anthropic (документация Claude API) — файл содержит 8 364 токена, llms-full.txt — 481 349 токенов с полным текстом документации. Cloudflare структурирует файл по продуктам. Stripe — по категориям сервисов. NVIDIA разделяет файл для технической документации и основного сайта. Vercel использует llms.txt с контекстными описаниями для AI-агентов, чтобы те выбирали нужные эндпоинты API.
Среди CMS и SEO-плагинов поддержку добавили Yoast SEO (автогенерация с еженедельным обновлением через cron), Rank Math, Mintlify (автоматически для всех размещённых документаций) и несколько плагинов для Drupal и VitePress.
Что делать владельцу сайта прямо сейчас
- Создайте llms.txt вручную. Не полагайтесь на автоматические генераторы — вы лучше знаете, какие 10-30 страниц определяют ваш бизнес. Формат: Markdown, H1 с названием проекта, цитата-описание, секции со ссылками на ключевые страницы.
- Добавьте noindex через HTTP-заголовок. Рекомендация самого Мюллера: файл может случайно попасть в поисковую выдачу, если на него сошлются из блога или обзора. Заголовок
X-Robots-Tag: noindexрешает проблему. - Настройте мониторинг серверных логов. Отфильтруйте запросы к /llms.txt по User-Agent: GPTBot, ClaudeBot, PerplexityBot, Googlebot. Это единственный способ проверить, читает ли кто-то ваш файл.
- Не ждите от llms.txt чуда. Это не фактор ранжирования, не замена качественному контенту и не гарантия цитирования. Это один из сигналов в экосистеме AI-поиска, которая формируется прямо сейчас.
Главный урок: Google сам не знает, что думает о llms.txt
Декабрьский инцидент — не про llms.txt. Он про разрыв между тем, что Google говорит, и тем, что Google делает. Команда Search отрицает стандарт. Команда Gemini API публикует файл. CMS-платформа генерирует его автоматически. Протокол Agent2Agent (A2A) от Google упоминает llms.txt. Левая рука не знает, что делает правая — и это нормально для компании с тысячами инженеров.
Для нас, практиков, это означает: ориентироваться надо не на заявления, а на данные. Внедряйте, замеряйте, публикуйте результаты. Именно так формируются стандарты — не через одобрение сверху, а через массовое adoption снизу. Вспомните robots.txt: он тоже начинался как неформальное предложение в 1994 году.
Что читать дальше
- Что такое llms.txt — глоссарная страница с определением и примерами
- Как оптимизировать сайт под AI-поиск — pillar-гайд по всем аспектам AI-видимости
- Добавила llms.txt — замер цитируемости через 30 дней — эксперимент AI-лаборатории (скоро)
