llms.txt: что это за файл, как его составить и нужен ли он вашему сайту

Что такое llms.txt и кто его предложил

Формат llms.txt предложил Джереми Говард (Jeremy Howard), сооснователь компании Answer.AI. Предложение опубликовано на сайте llmstxt.org 3 сентября 2024 года.

Сам сайт описывает формат как «предложение стандартизировать использование файла /llms.txt». Слово «предложение» здесь ключевое: это не стандарт, принятый поисковой системой или организацией по стандартизации, а инициатива одного автора и его проекта. Для сравнения: протокол, на котором строится robots.txt, — документ, прошедший полный путь согласования в Инженерном совете интернета (IETF), со статусом Standards Track (RFC 9309). У llms.txt такой процедуры не было.

По словам самого llmstxt.org, формат уже используют: тысячи сайтов публикуют llms.txt, некоторые инструменты для документации формируют такой файл автоматически, а в 2026 году Chrome Lighthouse добавил проверку на его наличие. Это заявления самого автора формата о его распространённости — не подтверждение того, что поисковые системы учитывают файл при ранжировании или ответах. Разница разобрана в следующем разделе.

Как устроен файл

По спецификации llmstxt.org у файла несложная структура: заголовок H1 с названием сайта или проекта — единственный обязательный элемент. Дальше — необязательная цитата (blockquote) с коротким описанием и любое число разделов H2 со списками ссылок на страницы, каждая с кратким описанием.

# Название компании

> Краткое описание компании или продукта в одном предложении.

Документация

• Название страницы: о чём страница, одна фраза

Дополнительно

• О компании: страница с историей и контактами

Это иллюстрация синтаксиса, а не готовый шаблон для любого сайта: список ссылок и формулировки зависят от структуры конкретного ресурса.

Чем llms.txt отличается от robots.txt и sitemap.xml

Три файла лежат в корне сайта, но решают разные задачи и имеют разный статус.

Файл	Назначение	Кем читается	Обязательность	Кто официально поддерживает
llms.txt	Краткое Markdown-описание сайта для ИИ-инструментов	По заявлению llmstxt.org — инструменты документации и отдельные функции агентных браузеров; подтверждённого использования поисковыми системами нет (раздел ниже)	Необязателен: это предложение, а не требование какой-либо системы	Независимый сайт llmstxt.org — не организация по стандартизации
robots.txt	Инструкции поисковым роботам, какие адреса им разрешено сканировать	Поисковые роботы, которые соблюдают протокол добровольно	Необязателен: без файла или при ошибке 4xx Google считает, что ограничений на сканирование нет	Standards Track-протокол Инженерного совета интернета, RFC 9309, 2022 год; реализован Google и Яндексом
sitemap.xml	Список страниц сайта, который помогает поисковым роботам находить их	Поисковые роботы Google и Яндекса — как подсказка, а не инструкция	Необязателен; Google называет его нужным не для всех сайтов, Яндекс не гарантирует попадание перечисленных страниц в поиск	Протокол Sitemaps.org; поддерживается Google и Яндексом

Подробный синтаксис директив — отдельная тема: в robots.txt — правила для ботов, здесь, в llms.txt, — отдельный самостоятельный файл с другим назначением и форматом. Если нужно разобраться в директивах User-agent, Disallow и Allow, — в статье о том, как устроен файл robots.txt. Что включать в карту сайта и как её отправить в поисковые системы, — в статье про карту сайта sitemap.xml.

Что известно об использовании llms.txt поисковыми системами и ИИ-сервисами

Главный вопрос для владельца сайта — читают ли этот файл поисковые системы и ИИ-сервисы и влияет ли он на видимость. Разберём по компаниям, на основании их официальных документов.

Google

У Google есть страница о llms.txt, но не в документации поискового ранжирования, а в разделе Chrome DevTools про агентный браузинг. Lighthouse проверяет наличие файла в категории аудитов для агентных браузеров; страница называет формат «формирующимся соглашением» (emerging convention) и отмечает, что предоставлять файл пока необязательно: если его нет, аудит просто помечается как неприменимый.

Для самого Поиска у Google другая позиция. В руководстве по оптимизации сайта для функций генеративного ИИ прямо сказано: для показа в Поиске и ответах генеративного ИИ не нужно создавать машиночитаемые файлы, другие специальные файлы, внедрять особую разметку или использовать Markdown. Там же уточняется: вы можете поддерживать файлы llms.txt для других сервисов, которые их используют, но на видимость и позицию сайта в Google Поиске это не повлияет.

Яндекс

Официальной документации Яндекса о llms.txt как формате для владельцев сайтов на дату проверки нет: в справке Яндекс Вебмастера для вебмастеров такого раздела не нашлось. При этом у собственного портала разработчиков Яндекса (dev.webmaster) есть файл /llms.txt — это указатель разделов документации API Вебмастера в Markdown. Это тот же приём, что и у самого llmstxt.org для документации: краткий индекс для ИИ-инструментов, а не заявление о политике ранжирования или формирования ответов.

OpenAI и другие ИИ-сервисы

OpenAI разделяет своих роботов по задачам: GPTBot собирает контент, который может использоваться для обучения моделей, а показом сайтов в результатах поиска ChatGPT занимается отдельный робот — OAI-SearchBot. В документации об этих роботах нет утверждения, что один из них читает llms.txt сторонних сайтов и меняет из-за этого результаты поиска или обучения.

При этом страница документации developers.openai.com об этих роботах сама ссылается на собственный файл /llms.txt как указатель своей документации. По словам llmstxt.org, похожим способом файл используют и другие компании для собственных технических документов — это тоже не связано с тем, как ИИ-сервисы оценивают чужие сайты.

Нужен ли llms.txt вашему сайту

На дату проверки ни одна крупная поисковая система не подтвердила, что учитывает llms.txt при ранжировании или при формировании ИИ-ответов. Google прямо говорит, что для его ИИ-функций такой файл не требуется и не влияет на видимость. Это совпадает с выводом, который мы уже разбирали в статье о GEO и оптимизации для генеративного поиска: специальные файлы и разметка «для нейросетей» не входят в подтверждённые требования поисковых систем.

Это не значит, что файл вреден. Создать его можно: формат простой, а структура — название сайта, короткое описание, список ссылок на ключевые страницы — не противоречит здравому смыслу. Но как приоритет в подготовке сайта к работе с ИИ-поиском llms.txt не входит. Эта работа начинается с доступности страниц для роботов, понятных сущностей и контента-ответа.

Если вы всё же решите завести такой файл, относитесь к нему как к необязательному дополнению, а не к замене технической работы над сайтом. Обходом роботов и картой сайта управляют robots.txt и sitemap.xml — именно их официально поддерживают поисковые системы.

Частые вопросы

Это стандарт или просто чья-то инициатива?

Инициатива одного автора, оформленная как предложение на отдельном сайте. Сам llmstxt.org называет это «предложением стандартизировать» использование файла, а не стандартом, принятым организацией вроде IETF или W3C.

Подтвердили ли Google или Яндекс, что читают llms.txt?

Нет. Google прямо пишет, что такой файл не нужен для показа в Поиске и ответах генеративного ИИ и не влияет на видимость сайта. У Яндекса в справке для вебмастеров подобного раздела на дату проверки нет.

Чем отличается от robots.txt?

robots.txt управляет тем, какие адреса поисковым роботам разрешено сканировать, и это протокол, прошедший стандартизацию в IETF. llms.txt — описание содержимого сайта в свободном формате без сопоставимой процедуры. Подробный синтаксис — в отдельной статье о robots.txt.

Используют ли ChatGPT или другие ИИ-сервисы такой файл?

В официальной документации OpenAI о её роботах подтверждения этому нет: GPTBot собирает контент для обучения, OAI-SearchBot — отдельный робот для поиска в ChatGPT, но ни один документ не говорит, что они читают llms.txt чужих сайтов.

Нужно ли удалять llms.txt, если он уже есть на сайте?

Нет оснований для этого: файл не мешает сканированию и не нарушает другие правила. Решение — на ваше усмотрение, но не считайте его приоритетной задачей технического SEO.