llms.txt и llms-full.txt

Спецификация

Мы следуем предложению llmstxt.org: H1 с именем сайта, резюме в блок-цитате, затем списки ссылок, сгруппированные по H2. AI-краулеры получают это вместо HTML.

Пример

# Acme Corp

> Acme is a B2B SaaS that ships logistics dashboards.

## Product
- [Pricing](https://acme.com/pricing): Two plans, starts at €19/month.
- [API](https://acme.com/api): REST + integrations.

## Resources
- [Docs](https://acme.com/docs)
- [Changelog](https://acme.com/changelog)

Как быстро geodeck обновляет файлы?

Файлы пересобираются при каждом webhook-событии и в ежедневном cron-задании diff-а sitemap. Ответы кэшируются на edge до 5 минут (публичный CDN) или 10 минут (общий кэш).

Что такое Markdown Mirror?

Каждый отслеживаемый URL зеркалируется как Markdown в /llms-full.txt, чтобы AI-системы могли получать более чистый исходный текст без разбора полного HTML.

Как получить 100/100 за llms.txt?

geodeck генерирует ваш llms.txt автоматически. Идеальный балл означает, что файл полный и хорошо структурирован.

1. Подтвердите домен. Без подтверждённого домена geodeck не может опубликовать llms.txt.
2. Импортируйте sitemap или добавьте URL. Детальная страница домена → вкладка Index → Импорт Sitemap. Нужно минимум 15 URL.
3. Добавьте заголовки и описания. geodeck берёт их из title и meta-описания. Каждая страница должна иметь уникальный title и meta-описание (50-160 символов).
4. Включите Markdown Mirror (план Agency). llms-full.txt даёт 10 дополнительных баллов.
5. Контролируйте размер файла. Файл должен быть от 200 до 50 000 байт.

Балл 100/100: домен подтверждён, H1 есть, blockquote-резюме есть, 3+ разделов, 15+ элементов списка, llms-full.txt доступен, размер 200-50 000 байт.

Как рассчитывается балл llms.txt?

Балл от 0 до 100 измеряет полноту и структурированность вашего llms.txt:

• Файл найден и доступен (+20 б.) - самый важный сигнал. Без него балл равен 0.
• Заголовок H1 с названием сайта (+15 б.) - генерируется автоматически.
• Blockquote-резюме (+15 б.) - geodeck берёт meta-описание главной страницы.
• Минимум 1 раздел (+10 б.) - раздел - это H2-заголовок, группирующий ссылки.
• 3 или более разделов (+10 б.) - geodeck группирует URL по категориям.
• 5 или более элементов списка (+10 б.) - импортируйте минимум 5 страниц.
• 15 или более элементов (+5 б.) - импортируйте 15+.
• llms-full.txt доступен (+10 б.) - полный Markdown Mirror. На плане Agency или при активной webhook-интеграции.

Действительно ли llms.txt важен для AI-поиска?

Документация Google о функциях AI прямо говорит, что специальный файл не требуется, а руководство по началу работы schema.org использует противоположный подход, предлагая разметить саму страницу, а не публиковать отдельный файл. Статья о GEO, введшая термин оптимизации для генеративных движков, использовала бенчмарк реальных запросов, чтобы проверить, что на самом деле влияет на видимость, а не полагаться на предположение, что помогает какой-то один формат файла. llms.txt - это простой Markdown, поэтому его почти ничего не стоит поддерживать наряду с любым подходом, который в итоге победит.

You don't need to create new machine readable files, AI text files, or markup to appear in these features.

— Google Search Central documentation, “AI features and your website”

Schema.org provides a collection of shared vocabularies webmasters can use to mark up their pages in ways that can be understood by the major search engines: Google, Microsoft, Yandex and Yahoo!

— schema.org, “Getting started with schema.org using Microdata”

We facilitate systematic evaluation by introducing GEO-bench, a large-scale benchmark of diverse user queries across multiple domains, along with relevant web sources to answer these queries.

— Aggarwal et al., “GEO: Generative Engine Optimization” (arXiv:2311.09735)