Перейти к содержимому
Выберите тему

Сделайте сайт понятным для нейросетей и AI-агентов

Поиск меняется: люди всё чаще получают ответ прямо в ChatGPT, Gemini, Алисе и других AI-системах. Разбираемся, как подготовить сайт к этому миру - от структуры содержания и Markdown до llms.txt, краулеров и GEO.

Кто теперь читает сайт
  1. Человекзадаёт вопрос
  2. AI-поиск или агентищет, откуда взять ответ
  3. Ваш сайтотдаёт содержание в понятном видеHTMLMarkdownllms.txtразметка данных
  4. Ответсо ссылкой на источник

Ваш сайт теперь читают не только люди

Что изменилось

Раньше

  1. Человеквводит запрос
  2. Поискпоказывает список ссылок
  3. Сайтчеловек читает страницу сам

Теперь

  1. Человекзадаёт вопрос
  2. AI-поиск или агентсам находит и читает страницы
  3. Источникинесколько сайтов сразу, ваш среди них
  4. Готовый ответчеловек может не открыть ни одной страницы

Раньше сайт в первую очередь готовили для браузера и поискового робота. Теперь появляется ещё один потребитель - AI-агент. Ему тоже нужно найти нужную страницу, понять её структуру и получить содержимое без лишнего шума.

Где здесь llms.txt?

Карта материалов для AI-агента

llms.txt - файл в корне сайта: название, короткое описание и списки ссылок на главное.

Формат файла

Три файла, три разных вопроса

  • robots.txtкуда роботу можно ходить
  • sitemap.xmlкакие страницы существуют
  • llms.txtкакие материалы могут быть полезны агенту

Это упрощённая модель, а не три взаимозаменяемых стандарта.

Чтобы сайт был готов к AI, одного файла недостаточно

Сайт, готовый к AI

Пять частей одной задачи. llms.txt закрывает одну из них.

  1. НайтиКраулеры, robots.txt, ссылки, индексируемость.
  2. ПонятьЯсная структура страницы, заголовки, Markdown.
  3. Выбратьllms.txt, навигация по документации, файлы в подпутях.
  4. ДоверятьИсточники, авторство, актуальность, доказательства.
  5. ИзмеритьЖурналы ботов, переходы из AI, упоминания и цитирования.

А это вообще помогает продвижению?

Что известно, а что нет

Подтверждено

  • Крупные сайты документации публикуют llms.txt у себя.
  • Агенты действительно работают с Markdown-версиями страниц.
  • Lighthouse проверяет файл в экспериментальной категории Agentic Browsing.
  • AI-боты посещают сайты: их владельцы описывают это в своей документации.

Не доказано

  • Что наличие llms.txt повышает позиции в поиске.
  • Что файл гарантирует попадание в ответ ChatGPT.
  • Что он сам по себе увеличивает число цитирований.

llms.txt - элемент подготовки сайта к AI, а не волшебная SEO-кнопка.

Что значит «продвижение в нейросетях» на практике

  • GEOGenerative Engine Optimization
  • AEOAnswer Engine Optimization
  • AI SEOSEO для AI-поиска
  • AI visibilityвидимость в AI

Одна задача

Быть найденным, понятым и использованным AI-системой

Из чего складывается видимость в AI
  1. Доступностьстраницу можно получить
  2. Пониманиеструктуру можно разобрать
  3. Цитируемое содержаниеесть что взять в ответ
  4. Измерениевидно, что происходит

Терминов много, смысл один. Обещать место в ответе нейросети здесь никто не может.

GEO и AEO без обещаний

Подготовить сайт можно поэтапно

  1. Проверить доступ

    AI-боты могут получить страницы сайта.

    AI-краулеры
  2. Навести порядок в содержании

    Понятные заголовки и структура страниц.

    Лучшие практики
  3. Добавить Markdown

    Там, где это оправдано: документация, справка.

    Markdown-версии страниц
  4. Создать llms.txt

    Корректный файл по второй редакции.

    Начало работы
  5. Проверить файл и ссылки

    Код ответа, структура, живые адреса.

    Список проверки
  6. Измерять результат

    Журналы ботов, переходы из AI, упоминания и цитирования.

    Измерение

Не обязательно собирать всё вручную

Для некоторых CMS уже есть готовые расширения: они собирают структуру сайта, формируют llms.txt и поддерживают его при изменениях.

Как работает готовое решение
  1. CMSстраницы, товары, статьи
  2. Расширениечитает опубликованное
  3. Структура сайтаразделы и ссылки
  4. llms.txtсобран и обновляется
  5. Проверката же, что для ручного файла
  • Webasyst

    Сайт

    Карта страниц сайта

    Источник данных
    Опубликованные страницы сайта, название и контакты
    Создаёт
    llms.txtllms-full.txt

    готовое решениеБазовая версия бесплатна

    Посмотреть решение
  • Webasyst

    Shop-Script

    Карта интернет-магазина

    Источник данных
    Категории, товары, бренды, информационные страницы и контакты
    Создаёт
    llms.txtllms-full.txt

    готовое решение

    Посмотреть решение
  • Webasyst

    Блог

    Карта статей блога

    Источник данных
    Опубликованные статьи, рубрики и теги
    Создаёт
    llms.txtllms-full.txt

    готовое решение

    Посмотреть решение
  • Webasyst

    Хаб

    Карта обсуждений сообщества

    Источник данных
    Публичные разделы и опубликованные обсуждения
    Создаёт
    llms.txtllms-full.txt

    готовое решение

    Посмотреть решение
  • Webasyst

    Поддержка

    Карта базы знаний

    Источник данных
    Публичные вопросы и ответы и страницы; заявки и переписка не попадают
    Создаёт
    llms.txtllms-full.txt

    готовое решение

    Посмотреть решение
  • Webasyst

    Фото

    Карта фотоальбомов

    Источник данных
    Публичные альбомы и страницы
    Создаёт
    llms.txtllms-full.txt

    готовое решение

    Посмотреть решение

Промокод на скидку за первый заказ в Webasyst:BE462B3B6D

Коммерческие расширения из магазина Webasyst. Каждое собирает llms.txt и llms-full.txt из данных приложения и пересобирает их по расписанию или по кнопке. Файл, созданный расширением, проверяют так же, как написанный вручную.

С чего начать именно вам

Это уже используется в реальных проектах

Эти компании публикуют llms.txt или Markdown-представления в собственной документации. Это не значит, что их агенты читают ваш файл.

файлов llms.txt найдено в открытом архиве веба
584 тыс.
Common Crawl, август 2026
сайтов в выборке публикуют файл
2,1%
Web Almanac 2025
вторая редакция proposal
v2
llmstxt.org, 10 августа 2026

Посмотрите, как это устроено

  • llms.txt за пять минут

    Минимальный файл, куда его положить и как проверить.

    1. Написать файл
    2. Положить в корень сайта
    3. Проверить ответ сервера
  • llms.txt и llms-full.txt

    Индекс и полный текст: в чём разница.

    llms.txtиндекс со ссылкамиllms-full.txtвесь текст одним файлом

  • AI-краулеры

    Три типа ботов, три разных решения в robots.txt.

    обучениепоискзапрос пользователя

  • llms.txt и MCP

    Две независимые системы и мост между ними.

    файлпротокол

  • Настоящие файлы

    Как устроены файлы OpenAI, Stripe и других.

  • Markdown для агентов

    Чистая версия страницы по тому же адресу.

  • Обнаружение в v2

    Связи alternate и describedby.

  • Работает ли llms.txt

    Исследования и их границы.

Что меняется прямо сейчас

  1. событие

    Lighthouse 13.5.0 объединил проверку llms.txt с другими точками обнаружения агентов

    Для владельца сайта. Проверка файла осталась в отчёте, теперь рядом с другими способами, которыми агент находит сайт.

    Читать запись

  2. исследование

    Common Crawl разобрал 584 тысячи файлов: 68% созданы генератором, 23% без единой ссылки

    Для владельца сайта. Файл без ссылок бесполезен: проверяйте содержание, а не только наличие.

    Читать запись

  3. редакция

    Вышла вторая редакция proposal: связи для обнаружения и файлы в подпутях

    Для владельца сайта. Файл можно объявить в коде страницы и держать отдельные файлы для разделов.

    Читать запись

  4. исследование

    Ahrefs: 97% файлов никто ни разу не запросил

    Для владельца сайта. Наличие файла само не приводит ботов: смотрите журналы сервера.

    Читать запись

  5. событие

    Google записал в документацию: Поиск такие файлы не использует

    Для владельца сайта. Ждать влияния на позиции в Google не стоит.

    Читать запись

  6. событие

    Lighthouse 13.3.0 начал проверять llms.txt по умолчанию

    Для владельца сайта. Отсутствие файла стало видно в обычном отчёте о странице.

    Читать запись

Нужно подготовить существующий сайт?

Аудит и внедрение делает команда kaktak.net.