llms.txt — это предлагаемый стандарт для простого файла Markdown, размещенного в корне сайта по адресу /llms.txt, который предоставляет большим языковым моделям краткую, курируемую карту наиболее полезного контента сайта. Это удобство для ИИ-инструментов, которые читают веб-сайты, а не сигнал ранжирования или средство контроля доступа. Маркетологи могут быстро добавить его, но не должны ожидать, что он сам по себе изменит видимость в Google или ИИ-поисковиках.
Предложение было опубликовано Джереми Ховардом из Answer.AI в 2024 году. Идея проста: веб-страницы перегружены навигацией, скриптами и макетами, что затрудняет их чтение языковыми моделями в рамках ограниченных контекстных окон. Чистое резюме в формате Markdown, указывающее на важные страницы, в идеале с версиями этих страниц в формате Markdown, помогает ИИ-инструменту находить и понимать то, что важно.
Что содержит файл llms.txt?
Формат намеренно свободный и читаемый человеком. Типичный файл включает:
- Заголовок H1 с названием сайта или проекта.
- Краткая цитата, резюмирующая деятельность сайта или компании.
- Дополнительные абзацы с ключевым контекстом, например, для кого предназначен продукт.
- Разделы H2 со списками ссылок, каждая с кратким описанием, например, “Услуги”, “Руководства”, “Цены”, “Документация”.
- Дополнительный раздел, часто называемый “Опционально”, для второстепенных ссылок, которые можно пропустить, когда контекст ограничен.
Некоторые сайты также публикуют /llms-full.txt, единый файл, содержащий полный текст ключевых страниц. Платформы документации, такие как Mintlify, и несколько компаний, занимающихся инструментами для разработчиков, были первыми пользователями.
Чем он отличается от robots.txt и sitemap.xml?
Эти три файла часто путают, но они выполняют разные задачи.
- robots.txt сообщает краулерам, какие пути они могут или не могут запрашивать. Это вопрос разрешения, и его читают такие краулеры, как Googlebot, GPTBot и ClaudeBot.
- sitemap.xml перечисляет URL-адреса для обнаружения поисковыми системами, с дополнительными датами. Это вопрос полноты.
- llms.txt предлагает курируемое, читаемое резюме для языковых моделей. Это вопрос понимания, и он перечисляет только то, что вы считаете наиболее важным.
Блокировка или разрешение ИИ-краулеров по-прежнему осуществляется в robots.txt. llms.txt не может помешать кому-либо использовать ваш контент.
Помогает ли llms.txt SEO или видимости в ИИ?
На момент написания статьи нет публичного подтверждения того, что крупные поисковые системы или ИИ-ответы используют llms.txt в качестве сигнала ранжирования или цитирования. Представители Google публично заявили, что Google Search его не использует. Анализ логов сервера, опубликованный различными SEO-специалистами, показал мало или полное отсутствие регулярных обращений со стороны крупных ИИ-краулеров.
Он используется в инструментах, которые запрашивают сайт по требованию: помощники по кодированию, ИИ-агенты и инструменты для разработчиков, которые ищут /llms.txt, когда их просят прочитать документацию. Для компании-разработчика ПО это использование реально. Для местного сервисного бизнеса практическая польза меньше.
Поэтому относитесь к этому как к недорогому дополнению с низким уровнем риска. Это занимает полдня, заставляет вас решить, какие страницы лучше всего представляют бизнес, и может помочь по мере того, как его будут внедрять больше инструментов. Это не заменяет работу, которая действительно повышает видимость.
Что на самом деле повышает видимость в ИИ-ответах?
Если цель — появиться в ChatGPT, Gemini, Perplexity, Copilot или Google AI Overviews, те же основы важнее, чем любой отдельный файл:
- Краулинговые, быстрые страницы с серверным рендерингом текста, который могут читать краулеры.
- Четкие ответы в верхней части страниц под заголовками, сформулированными как вопросы.
- Структурированные данные, такие как схема Organization, Product, FAQ и Article, где это уместно.
- Согласованная информация об объекте: название компании, адрес, услуги и основатели везде одинаковы.
- Упоминания и ссылки с доверенных сторонних сайтов, отзывы и каталоги.
- Правила robots.txt, которые разрешают ИИ-краулерам, для которых вы хотите быть видимыми.
llms.txt стоит рядом с ними как небольшое дополнение, а не вместо них.
Как написать хороший llms.txt?
Выберите страницы
Выберите от 10 до 30 страниц, которые лучше всего объясняют бизнес: основные страницы услуг или продуктов, цены, о нас, контакты, ключевые руководства и политики. Пропустите пустые страницы, архивы тегов и лендинги кампаний.
Напишите полезные описания
Каждая ссылка получает одно предложение, говорящее о том, что найдет читатель. “SEO-услуги: технический аудит, контент-стратегия и линкбилдинг для B2B-компаний” полезнее, чем “Наша SEO-страница”.
Поддерживайте его в актуальном состоянии
Устаревший llms.txt, указывающий на удаленные страницы, хуже, чем его отсутствие. Добавляйте его в чек-лист каждый раз, когда создается, переименовывается или удаляется ключевая страница.
Простая структура
- Название компании как H1.
- Резюме из одного предложения в цитате.
- Два или три предложения о том, кому вы служите и где.
- Разделы для услуг, ресурсов, информации о компании и контактов.
- Дополнительный раздел для второстепенных ресурсов.
Распространенные ошибки
- Относиться к llms.txt как к файлу разрешений и ожидать, что он заблокирует обучение ИИ.
- Перечислять сотни URL-адресов, что сводит на нет цель курируемого резюме.
- Писать маркетинговые лозунги вместо фактических описаний.
- Забыть разместить его как обычный текст точно по корневому пути.
- Утверждать клиентам, что это гарантирует цитирование в ИИ.
Как Alien Road применяет llms.txt
В типичном проекте по оптимизации генеративных движков llms.txt — это один небольшой пункт в более широком техническом обзоре. Исследование начинается с того, как ИИ-системы в настоящее время описывают клиента: мы задаем ChatGPT, Gemini, Perplexity и Copilot ряд вопросов о бренде и категории и записываем, какие источники они цитируют и в чем ошибаются.
Настройка сначала фокусируется на основах: доступ краулеров в robots.txt, структурированные данные, согласованная информация об объекте и четкий контент с ответами на ключевых страницах. Затем файл llms.txt пишется на основе того же списка приоритетных страниц с фактическими описаниями в одну строку и размещается в корне сайта. Для клиентов с документацией мы также рассматриваем версии ключевых страниц в формате Markdown.
Измерение не приписывает результаты только llms.txt, так как это невозможно честно изолировать. Мы проверяем логи сервера на наличие запросов к файлу и ежемесячно повторяем вопросы ИИ-ответов, чтобы отслеживать, становятся ли описания бренда более точными и увеличивается ли количество цитирований. Отчетность четко указывает, какие изменения, вероятно, являются ответственными.
С чего начать на этой неделе
Запишите 15 страниц, которые вы бы показали новому сотруднику, чтобы объяснить ваш бизнес. Превратите этот список в файл llms.txt с резюме из одного предложения и кратким описанием для каждой ссылки и опубликуйте его в корне вашего сайта. Затем потратьте остаток времени на проверку robots.txt на наличие правил для ИИ-краулеров, что оказывает гораздо большее влияние на видимость в ИИ.
Читать далее: GEO – AIO – AEO · GEO