Генератор llms.txt
Вставьте URL, получите содержимое через CORS-прокси и сгенерируйте llms.txt или llms-full.txt
Что такое llms.txt?
llms.txt — это текстовый файл в формате Markdown, размещаемый в корне сайта (аналогично robots.txt), специально разработанный для больших языковых моделей (LLM) и ИИ-краулеров. Он структурированно и читабельно обобщает ключевую информацию и ссылки на страницы сайта, помогая ChatGPT, Claude, Perplexity и другим ИИ-системам быстро понять структуру и назначение сайта.
Спецификация была предложена Джереми Ховардом из Answer.AI в 2024 году с целью создания стандартизированной «инструкции по сайту» для эпохи ИИ.
- Содержит название сайта и краткое описание
- Перечисляет ссылки и краткие описания всех важных страниц
- Компактный, AI может полностью прочитать в окне контекста
- Подходит для повседневного использования на большинстве сайтов
- Содержит полное Markdown-содержание каждой страницы
- ИИ не нужен доступ к исходной странице для получения всей информации
- Большой объем, подходит для сайтов с небольшим количеством контента или документации
- Подходит для сценариев, где требуется глубокое понимание каждой страницы ИИ
Для чего это нужно?
🔍 Повышение видимости в AI-поиске
Когда пользователи задают вопросы в AI-поисковиках, таких как ChatGPT, Perplexity, llms.txt помогает AI точнее понимать и цитировать содержимое вашего сайта.
⚡ Снижение затрат на краулинг
AI-краулеры могут читать структурированный Markdown напрямую, без разбора HTML постранично, снижая нагрузку на сервер и повышая эффективность индексации.
📋 Единый вход для контента
Предоставляет стандартизированн��й вход для AI-агентов и RAG-систем, упрощая интеграцию в различные AI-рабочие процессы.
Рекомендации:После генерации загрузите файл llms.txt в корневую директорию сайта (например, https://yoursite.com/llms.txt) и добавьте Sitemap: /llms.txt в robots.txt для улучшения обнаружения. Рекомендуется обновлять этот файл при изменении содержимого сайта.
