LLMs.txt — это текстовый файл в формате Markdown, который служит структурированной «шпаргалкой» для больших языковых моделей (LLM). Размещается в корне сайта по адресу: ваш-сайт.com/llms.txt.
Важно: формат llms.txt не является официальным стандартом — он не закреплён регуляторами или консорциумами.
Структура
Некоторые элементы файла llms.txt:
Заголовок H1 — название проекта или сайта (обязательный элемент).
Краткое описание в блоке цитаты — 1–3 предложения, резюмирующие назначение проекта или сайта.
Дополнительные подробности — один или несколько абзацев или списков Markdown (без новых заголовков), где можно дать модели важные детали, пояснения, ограничения.
Разделы ссылок (H2 и ниже) — тематические разделы, каждый из которых содержит список ссылок на важные документы. Каждая ссылка оформляется как элемент Markdown-списка: [Название](URL): краткое описание.
Помимо основного файла, существует сопутствующий формат llms-full.txt — он содержит полный контекст сайта: фактически это объединение всех Markdown-страниц, перечисленных в llms.txt, в один большой текст.
Назначение
Цель llms.txt — предоставить LLM краткую, структурированную выжимку ключевой информации о сайте (проекта, продукта, документации и т. п.). Это помогает моделям легче понимать содержимое сайта и находить нужные данные при построении ответов.
Некоторые преимущества использования llms.txt:
Упрощает навигацию по сайту для моделей — LLM получают заранее подготовленную структуру, а не пытаются разбирать сложную DOM-модель, фреймворки или «тяжёлые» страницы.
Снижает риск искажений — аннотации и краткие описания помогают ИИ корректнее интерпретировать смысл страниц, избегать выдуманных фактов и ошибок в суммаризации.
Экономит вычислительные ресурсы — AI-агенты могут ориентироваться по компактному файлу вместо полного сканирования.
Позволяет владельцу сайта управлять представлением ресурса — автор определяет, какие страницы важны, а какие — вспомогательные.
Пример для блога:
User-agent: *
Allow: /blog/
Disallow: /private/
Use-For-Training: no
Use-For-Inference: yes
Cite: example.com/blog/
Contact: legal@example.com
Информация из Алисы. Пишу с телефона. Может криво немного быть, подправлю дома с компьютера.