Помощь роботам и досье в Скайнет⁠⁠ или как не дать ИИ сойти с ума на вашем сайте.

Что за файл llms.txt ?

Появился новый файлик, называется llms.txt. Не путать с robots.txt, там паукам приказы раздаём, а они их нарушают . А тут — ИИшкам вроде ChatGPT помогаем не споткнуться об вашу главную страницу, карусель баннеров и 12 мегабайт JavaScript.

Это как памятка для гостей:
  • – вот тебе тапочки,
  • – туалет налево,
  • – в холодильник не лезь.

Зачем ?

ИИ приходит на сайт, такой:
«Так, где тут документация? Где статьи? Почему всё на одной странице с бесконечной прокруткой и в SVG?»
А вы ему: «На, друг, вот тебе llms.txt — вся структура сайта, ссылки, описание разделов. Не рыдай».

В результате:

  •  ИИ не тратит полчаса на разбор <div class="div-inside-div-inside-div">
  •  Даёт людям быстрые и точные ответы
  • Не бесится и не пишет вам ночью на support@site: «Невозможно парсить этот хаос»
    Не очень понятно почему sitemap с robots.txt им не хватает, но если надо, то полезно сделать.

Что писать?

Примерно такое:

  • Кто вы, что вы, зачем вы # Title, #Description
  •  Какие разделы сайта ИИ может читать (и по каким не лазить, админка, кабинеты и пр.) Ссылки на важные разделы: статьи, блог, товары, политика возврата (ну вдруг), ru,en если применимо
  •  Чего ожидать: meta-теги, описания, структура # SEO Structure
  •  Можно ли обучатся на вашем контенте - Allow training

Простой Markdown. Человеку понятно, роботу приятно. Создавать можно через автогенерацию, если разделы могут создаваться динамически. Или написать один раз в блокноте, если разделы сайта окончательны и изменению не подлежат.

Это типа SEO?

Ну... почти. Только не для поисковиков, а для ИИ-шпионов. SEO-шники вас не поругают — наоборот, скажут: «О, норм, вы в теме».

Почему это важно?

Потому что:
  •  Будущее уже наступило
  •  Ваш сайт читают не только люди, но и боты, ассистенты, чат-боты
  •  ИИ лучше помогает клиентам, если не тонет в вашем CSS на 5000 строк

А если не сделаю?

Тогда GPT зайдёт к вам, увидит SPA на React с динамической загрузкой всего подряд, плюнет и пойдёт на сайт конкурента, где llms.txt его встретил как родного.

В общем:
llms.txt — это способ сделать сайт дружелюбным для ИИшек и заслужить пощады в будущем, а может и плюшек каких. Помогаете роботам — заботитесь о себе. Они всё запомнят. Особенно когда придет Скайнет.

Если хотите пример — вот у меня: veerdna.ru/llms.txt
Если хотите почитать, как по уму — гляньте: llmstxt.org
Назад   Вперед

Другие статьи по этой теме: