Перевірка

Джерела

Повний перелік матеріалів, на які спирається цей сайт. Усі посилання перевірялися 12 серпня 2026. Розділ із галузевими виданнями винесено окремо: там наведені матеріали, які ми використали як переказ, бо оригінал був недоступний для звірки.

Специфікація llms.txt

llmstxt.org — The /llms.txt file, v2
llmstxt.org/
Основний текст пропозиції. Дата останнього оновлення документа — 10 серпня 2026.
AnswerDotAI/llms-txt — репозиторій
github.com/AnswerDotAI/llms-txt
Історія змін, обговорення, референсна реалізація.
nbs/index.qmd — вихідний текст специфікації
github.com/AnswerDotAI/llms-txt/blob/main/nbs/index.qmd
Джерело, з якого генерується сторінка llmstxt.org.
nbs/changes.qmd — що змінилося у v2
github.com/AnswerDotAI/llms-txt/blob/main/nbs/changes.q…
Пояснення автора щодо кожної зміни між версіями.
llms_txt/core.py — референсний парсер
github.com/AnswerDotAI/llms-txt/blob/main/llms_txt/core…
Регулярні вирази, які фактично визначають формат.

Google

Google Search Central — AI optimization guide
developers.google.com/search/docs/fundamentals/ai-optim…
Розділ «Mythbusting generative AI search» із прямою заявою про llms.txt.
Chrome Lighthouse — аудит llms.txt
developer.chrome.com/docs/lighthouse/agentic-browsing/l…
Опис перевірки в категорії Agentic Browsing.
Chrome Lighthouse — оцінювання Agentic Browsing
developer.chrome.com/docs/lighthouse/agentic-browsing/s…
Перелік аудитів і вимоги до версії Chrome.
Google — робочі краулери
developers.google.com/crawling/docs/crawlers-fetchers/g…
Googlebot, Google-Extended, GoogleOther та інші.
Google — спеціальні краулери
developers.google.com/search/docs/crawling-indexing/goo…
AdsBot, Mediapartners, APIs-Google, Google-Safety.
Google — фетчери на запит користувача
developers.google.com/crawling/docs/crawlers-fetchers/g…
Категорія агентів, які не перевіряють robots.txt.
Google — журнал змін документації краулерів
developers.google.com/crawling/docs/changelog
Дати появи та перейменування токенів.
Google — специфікація robots.txt
developers.google.com/search/docs/crawling-indexing/rob…
Реалізація правил зіставлення й обробки кодів відповіді.
Джон Мюллер, Bluesky, 17.06.2025
bsky.app/profile/johnmu.com/post/3lrshm4gggs2v
«FWIW no AI system currently uses llms.txt.»
Джон Мюллер, Bluesky, 20.01.2026
bsky.app/profile/johnmu.com/post/3mctq34tsjs2f
Заперечення того, що власні файли Google є підтвердженням формату.

AI-компанії

OpenAI — документація про ботів
developers.openai.com/api/docs/bots
GPTBot, OAI-SearchBot, ChatGPT-User, OAI-AdsBot із повними рядками user-agent.
OpenAI — власний llms.txt
developers.openai.com/llms.txt
Живий файл, побудований за специфікацією.
Anthropic — про краулерів
support.claude.com/en/articles/8896518-does-anthropic-c…
ClaudeBot, Claude-User, Claude-SearchBot.
Anthropic — ресурси для споживання моделями
platform.claude.com/docs/en/resources/overview
Розділ, у якому згадано llms.txt.
Perplexity — документація про ботів
docs.perplexity.ai/guides/bots
PerplexityBot і Perplexity-User.
Common Crawl — CCBot
commoncrawl.org/ccbot
Опис краулера й спосіб блокування.
Meta — вебкраулери
developers.facebook.com/docs/sharing/webmasters/web-cra…
meta-externalagent, meta-webindexer, meta-externalads та інші.
Apple — про Applebot
support.apple.com/en-us/119829
Applebot і Applebot-Extended, включно з поясненням семантики токена-перемикача.
Amazon — про Amazonbot
developer.amazon.com/amazonbot
Опис поведінки, підтримувані директиви.
DuckDuckGo — DuckAssistBot
duckduckgo.com/duckduckgo-help-pages/results/duckassist…
Опис і термін застосування змін у robots.txt.
ImageSift — про ImagesiftBot
imagesift.com/about
Джерело правила про відкат до правил Googlebot.

Стандарти

RFC 9309 — Robots Exclusion Protocol
rfc-editor.org/rfc/rfc9309.html
Нормативні правила вибору групи, зіставлення правил і обробки кодів відповіді.
RFC 8615 — Well-Known Uniform Resource Identifiers
rfc-editor.org/rfc/rfc8615.html
Альтернатива, яку специфікація llms.txt розглядає й відхиляє.
sitemaps.org — протокол Sitemap
sitemaps.org/protocol.html
Для порівняння обмежень формату.

Дослідження та вимірювання

Ahrefs — «We Analyzed 137K Sites: 97% of llms.txt Files Never Get Read»
ahrefs.com/blog/llmstxt-study/
Louise Linehan, Xibeijia Guan, 15.06.2026. Вибірка — 137 210 доменів, дані за травень 2026.
Otterly.ai — «The llms.txt experiment»
otterly.ai/blog/the-llms-txt-experiment/
Thomas Peham, 05.02.2026. 90 днів логів, понад 62 100 візитів AI-ботів.
PPC Land — про дані Originality.ai
ppc.land/llms-txt-adoption-rises-8-8x-but-97-of-files-g…
Luis Rijo, 02.07.2026. Динаміка поширення llms.txt, llms-full.txt та ai.txt.
Ahrefs — «What Is llms.txt, and Should You Care About It?»
ahrefs.com/blog/what-is-llms-txt/
Оглядовий матеріал, 15.06.2026.

Платформи та інтеграції

Mintlify — llms.txt
mintlify.com/docs/ai/llmstxt
Документація автоматичної генерації.
Mintlify — анонс, 20.11.2024
mintlify.com/blog/simplifying-docs-with-llms-txt
Tiffany Chen. Початок масового поширення формату.
GitBook — What is llms.txt
gitbook.com/blog/what-is-llms-txt
Опис реалізації на платформі.
Yoast SEO — llms.txt
yoast.com/features/llms-txt/
Функція генерації для WordPress.
AIOSEO — llms.txt
aioseo.com/features/llms-txt/
Функція генерації для WordPress.
Wix — про llms.txt
support.wix.com/en/article/understanding-your-sites-llm…
Автоматична генерація на платформі.

Галузеві видання (переказ, не першоджерело)

Search Engine Journal — про порівняння з мета-тегом keywords
searchenginejournal.com/google-says-llms-txt-comparable…
Roger Montti, 17.04.2025. Транскрипція коментаря Джона Мюллера на Reddit; оригінал нам звірити не вдалося.
Search Engine Journal — про noindex для llms.txt
searchenginejournal.com/google-says-it-could-make-sense…
Roger Montti, 21.07.2025. Видання не залишило посилання на оригінальний допис.
Search Engine Land — про Lighthouse і llms.txt
searchengineland.com/google-llms-txt-chrome-lighthouse-…
Danny Goodwin, 20.05.2026. Про розбіжність позицій усередині Google.
Search Engine Roundtable — Google не підтримує llms.txt
seroundtable.com/google-does-not-endorse-llms-txt-40789…
Barry Schwartz, 20.01.2026.

Українські та російськомовні матеріали

UAMASTER — LLMS.txt: що це за файл
blog.uamaster.com/shho-take-llms-txt-i-chomu-vin-vazhly…
Оглядовий матеріал українською, 10.06.2025.
IdeaDigital — llms.txt: чи потрібен він сайту
ideadigital.agency/blog/llmstxt-chi-potriben-vin-vam-i-…
Огляд із погляду SEO-просування.
Академія SEO — LLMS.txt: що це, приклади, кейси
seo-akademiya.com/ua/baza-znan/shtuchnyi-intelekt-shi/l…
Матеріал із прикладами впровадження, 17.10.2025.
Rete.js — документація llms.txt українською
retejs.org/uk/docs/llms/
Приклад проєкту з українською документацією й власним llms.txt.

Чого нам не вдалося перевірити

Прозорість щодо меж власної впевненості — частина принципів цього сайту. Ось список того, що ми хотіли б підтвердити, але не змогли:

  • Оригінальний тред на Reddit із коментарем Джона Мюллера про порівняння з мета-тегом keywords. Наводимо транскрипцію Search Engine Journal, у якій є авторська елізія.
  • Дослівна цитата Гері Іллеса з конференції Search Central Live Deep Dive APAC 2025. Інформація дійшла через переказ у переказі, тому ми не подаємо її як цитату.
  • Документація краулерів Bing. Сторінка Bing Webmaster Tools рендериться лише з JavaScript і не віддає даних у серверній відповіді.
  • Числова вага аудиту llms.txt у Lighthouse. Google не публікує ваги окремих аудитів цієї категорії.
  • Заяви Yandex або Mistral національними мовами. Наш пошук орієнтований на англомовні джерела.
  • Первинне джерело Originality.ai щодо динаміки поширення — ми спираємося на переказ PPC Land.

Про принципи цього сайту