Как создать llms.txt

Если ещё не решено, нужен ли файл вообще: Что такое llms.txt.

1. Выбери главные страницы.

   Представь человека, который впервые пришёл на сайт с вопросом. Какие пять-двадцать страниц ответят на большинство вопросов? Это и есть содержимое файла.

   Не подходят: страницы входа и корзины, результаты поиска, служебные и закрытые разделы, дубли.

2. Сгруппируй их по смыслу.

   Двух-пяти разделов хватает почти любому сайту: документация и примеры, каталог и условия, статьи и справка.

3. Напиши файл.

   Название сайта, одна-две фразы о нём, затем разделы со ссылками. К каждой ссылке - пояснение, что по ней находится.

4. Положи файл в корень сайта.

   Он должен открываться по адресу https://твой-сайт/llms.txt и отдаваться как текст.

5. Проверь ответ сервера.

   Код 200, текстовый тип, первая строка начинается с решётки. Частая ошибка - сайт отдаёт вместо файла HTML-страницу.

6. Реши, как файл будет обновляться.

   Файл, который не меняется вместе с сайтом, через полгода ведёт на несуществующие страницы.

Тот же файл целиком:

# Колос API

> Сервис доставки для интернет-магазинов: расчёт стоимости, создание заказов, отслеживание.

Все запросы требуют ключа. Тестовая среда: sandbox.kolos.example

## Документация

- [Быстрый старт](https://kolos.example/docs/start.md): ключ, первый запрос, первый заказ
- [Справочник API](https://kolos.example/docs/api.md): методы, параметры, коды ошибок

## Optional

- [История изменений](https://kolos.example/changelog.md): версии и даты

Точные правила: формат файла, секции. Больше образцов: базовые примеры.

Файл кладут в корень сайта, рядом с robots.txt. Для статического сайта это папка с публичными файлами. Для сайта на системе управления файл обычно отдаёт расширение, и на диске его нет.

Вторая редакция proposal разрешает и файл в разделе сайта. Тогда он описывает только адреса внутри этого раздела:

/llms.txt        весь сайт
/docs/llms.txt   только раздел /docs/

curl -sI https://example.ru/llms.txt
curl -s https://example.ru/llms.txt | head -n 3

Полный список проверок: Проверка файлов и разметки.

Вторая редакция добавила связь, по которой страница сама сообщает, какой llms.txt её описывает:

<link rel="describedby" href="/llms.txt">

Это необязательный шаг. Подробно: Обнаружение файла и Markdown-версий.

Если сайт работает на системе управления, писать файл руками незачем: его соберёт расширение из уже существующих страниц.

Автоматически собранный файл проверяют так же, как написанный вручную. И его стоит просмотреть глазами: расширение знает структуру сайта, но не знает, что на нём главное.

• Не копируй карту сайта. Полный список адресов уже есть в sitemap.xml. Здесь нужен отбор.
• Не пиши запреты. Файл ничего не закрывает. Доступ роботам настраивают в robots.txt.
• Не добавляй закрытое. Файл публичный: в нём не должно быть адресов панели управления и черновиков.
• Не жди роста позиций. Поисковые системы файл для ранжирования не используют: Работает ли llms.txt.

• Лучшие практики - как сделать файл полезным
• Сайт, готовый к AI - остальные слои: доступ, разметка, содержание
• Что такое llms-full.txt - нужен ли второй файл
• Промпт для генерации - черновик файла с помощью нейросети