Действительно ли llms.txt приводит вас в ответы ИИ?
Почти каждый гайд по AEO велит вам добавить файл llms.txt. Но по данным Otterly, за 90 дней наблюдения на живом сайте из 62,100 визитов ИИ-краулеров файла коснулись лишь 84 — 0.1% — а Google говорит, что ни одна система ИИ его не использует. В этом выпуске мы проходим три вещи, которые действительно открывают дверь к ChatGPT и Perplexity — доступ краулеров, обнаружение через карту сайта и чистый серверный рендеринг — на реальных живых файлах, с полной расшифровкой ниже, которую можно прочитать и процитировать.

То, что действительно приводит вас в ответы ИИ, — это не файл, который советует каждый гайд. llms.txt почти не запрашивают: по данным Otterly, за 90 дней на живом сайте его коснулись лишь 84 из 62,100 визитов ИИ-краулеров (0.1%), и ни один крупный провайдер не подтверждает, что читает его. Дверь открывают доступ краулеров, полная карта сайта и чистый серверный рендеринг.
llms.txt — это текстовый файл в корне вашего домена, машиночитаемое резюме того, кто вы, где находитесь и что делаете, написанное для больших языковых моделей, а не для людей. AEO (Answer Engine Optimization, иногда пишут GEO) — это искусство быть процитированным ИИ-ассистентами вроде ChatGPT, Perplexity, Gemini и Claude. llms.txt — самая рекомендуемая тактика AEO 2026 года и, как показывают измеренные данные ниже, самая переоценённая.
Смотрите разбор
Что вообще такое llms.txt и почему его советует каждый гайд по AEO?
llms.txt — это текстовое резюме вашего бизнеса: кто вы, где находитесь, что делаете — написанное для языковых моделей, а не для человеческих читателей. Идея звучит по-настоящему заманчиво: вместо того чтобы заставлять модель гадать по вашим маркетинговым страницам, вы вручаете ей одно аккуратное машиночитаемое описание. Именно поэтому почти каждый чек-лист AEO на 2026 год велит его добавить. Намерение хорошее. Разбивается оно о факты.
Что на самом деле говорят данные про llms.txt?
По данным Otterly, за 90 дней наблюдения на одном живом сайте из 62,100 визитов ИИ-краулеров файл llms.txt запросили лишь 84 — одна десятая процента. И это не случайность одного сайта: опубликованный Lumentir анализ примерно 300,000 доменов не нашёл никакой связи между наличием llms.txt и тем, как часто сайт цитируют крупные модели. Файл, который продаёт почти каждый гайд, в измеренной реальности почти не запрашивают.
Использует ли Google llms.txt — и где этот файл действительно полезен?
Нет. Джон Мюллер из Google прямо сказал, что сейчас ни одна система ИИ не использует llms.txt, и сравнил его со старым мета-тегом keywords — полем, которое владельцы сайтов заполняют и которое поисковики давно научились игнорировать. Ни один крупный провайдер — ни OpenAI, ни Anthropic, ни Google — не подтвердил, что читает его при построении своих ответов. Единственное место, где llms.txt действительно отрабатывает своё, — это документация для разработчиков, где ассистенты кодирования забирают справочники API — технические доки за такими инструментами, как Stripe или Vercel. Для малого бизнеса, который хочет попасть в ChatGPT, это почти шум.
Кто решает, впускать ли ИИ на ваш сайт?
Ваш robots.txt — первый файл, который читает краулер, и именно он решает, кто вообще войдёт. Он должен явно разрешать поимённо названных ИИ-краулеров — GPTBot и OAI-SearchBot от OpenAI, ClaudeBot от Anthropic, PerplexityBot от Perplexity, Google-Extended от Google. Это важнее любого файла-резюме: собственная документация OpenAI прямо говорит, что если вы заблокируете OAI-SearchBot, вас нет в поисковых ответах ChatGPT — не низко в выдаче, а вообще нет. Большинство небольших сайтов блокируют этих ботов случайно, одной строкой, скопированной годы назад. Открыть эту дверь бесплатно — и это самый ценный одиночный шаг здесь.
Есть ли файл, который читает каждый движок ИИ?
Да — и это ваш sitemap.xml, просто список всех страниц, которые вы хотите отдать на обход, с датой последнего изменения каждой. Так краулер находит страницы, на которые нет ссылок с вашей главной, и так узнаёт, какие страницы свежие. Тонкая или отсутствующая карта сайта оставляет краулеру только то, на что он случайно наткнётся с главной; полная вручает ему всю карту сразу. Большинство платформ создают её автоматически — ваша задача проверить, что она существует, что она указана в вашем robots.txt и что в ней есть ваши важные страницы. В отличие от llms.txt, этот файл использует каждый движок.
Доходит ли ваш текст до ИИ, если сайт собран на JavaScript?
Многие современные сайты строят свой контент на JavaScript. Проблема в том, что многие ИИ-краулеры сначала читают сырой HTML, который отдаёт ваш сервер — и если ваши слова появляются только после выполнения JavaScript, краулер может попасть на почти пустую страницу. Решение — серверный рендеринг: сделайте так, чтобы текст вашей страницы был в HTML прямо от сервера, до запуска любого скрипта. Проверить это можно за секунды — откройте исходный код страницы, и если вы видите свои настоящие абзацы, их видит и краулер.
Работает ли всё это иначе на неанглоязычном рынке?
Сама техника — нет: robots.txt, sitemap.xml и серверный рендеринг слепы к языку, и краулер добирается до русскоязычной страницы через ровно те же три двери. Меняется ответ, который ждёт по ту сторону. Когда дверь открыта, движок сопоставляет вопрос на родном языке с родными словами, а не с переводом — так что ход, который выигрывает цитирования, для неанглоязычного бизнеса — это ясный, прямой ответ на языке клиента. Наладьте технику один раз — она бесплатна и в основном автоматична — и вложите свои настоящие силы именно туда. А llms.txt? Оставьте, если он у вас уже есть, он ничего не стоит; но ни один движок не подтвердил, что использует его, так что не тратьте на него реальных сил.
Часто задаваемые вопросы
Поможет ли добавление файла llms.txt получить цитирование от ChatGPT?
Почти нет. По данным Otterly, из 62,100 визитов ИИ-краулеров llms.txt коснулись лишь 84 — 0.1% — а отдельный взгляд на примерно 300,000 доменов не нашёл связи между наличием файла и цитируемостью. Ни один крупный провайдер не подтверждает, что использует его. Добавьте, если хотите, он ничего не стоит, но не ждите, что он приведёт вас в ответы ИИ.
Действительно ли OpenAI, Anthropic или Google читают llms.txt?
Ни один не подтвердил, что читает его при построении ответов. Джон Мюллер из Google прямо сказал, что сейчас ни одна система ИИ не использует llms.txt, и сравнил его со старым мета-тегом keywords. Исследование Otterly приходит к тому же выводу — ни один крупный провайдер LLM публично не обязался использовать его в масштабе.
Значит, мне удалить свой файл llms.txt?
Не нужно — держать его ничего не стоит, и в одном месте он действительно полезен: в документации для разработчиков, где ассистенты кодирования забирают справочники API (доки за такими инструментами, как Stripe или Vercel). Просто не полагайтесь на него как на трюк для ChatGPT или Google — и не давайте продать его вам как такой трюк.
Что вместо этого — самая ценная одиночная правка для AEO?
Доступ краулеров, заданный в вашем robots.txt. Это первый файл, который читает краулер, и он решает, войдут ли ИИ-боты вообще. Собственная документация OpenAI говорит, что если вы заблокируете OAI-SearchBot, вас просто нет в поисковых ответах ChatGPT. Открыть эту дверь бесплатно — а большинство небольших сайтов блокируют этих ботов случайно.
Как проверить, какие ИИ-краулеры добираются до моего собственного сайта?
Откройте собственный robots.txt и проверьте, разрешены ли поимённо названные ИИ-краулеры — GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot, Google-Extended — а затем загляните в исходный код страницы, чтобы убедиться, что ваш настоящий текст есть в серверном HTML. Наш открытый трекер aeo-platform проверяет доступ краулеров за вас автоматически и бесплатен на npm.
Хотите узнать, какие ИИ-краулеры действительно добираются до вашего сайта?
Мы проводим полную проверку вашего сайта — какие движки до вас дотягиваются, какие страницы они видят и какие запросы вы упускаете — и первый аудит ИИ-видимости бесплатный. Если вы предпочитаете перестать гадать про robots.txt, карту сайта и рендеринг, запросите бесплатный аудит на webappski.com.



