Перевірка
Джерела
Повний перелік матеріалів, на які спирається цей сайт. Усі посилання перевірялися 12 серпня 2026. Розділ із галузевими виданнями винесено окремо: там наведені матеріали, які ми використали як переказ, бо оригінал був недоступний для звірки.
Специфікація llms.txt
|
llmstxt.org — The /llms.txt file, v2
llmstxt.org/ |
Основний текст пропозиції. Дата останнього оновлення документа — 10 серпня 2026. |
|
AnswerDotAI/llms-txt — репозиторій
github.com/AnswerDotAI/llms-txt |
Історія змін, обговорення, референсна реалізація. |
|
nbs/index.qmd — вихідний текст специфікації
github.com/AnswerDotAI/llms-txt/blob/main/nbs/index.qmd |
Джерело, з якого генерується сторінка llmstxt.org. |
|
nbs/changes.qmd — що змінилося у v2
github.com/AnswerDotAI/llms-txt/blob/main/nbs/changes.q… |
Пояснення автора щодо кожної зміни між версіями. |
|
llms_txt/core.py — референсний парсер
github.com/AnswerDotAI/llms-txt/blob/main/llms_txt/core… |
Регулярні вирази, які фактично визначають формат. |
|
Google Search Central — AI optimization guide
developers.google.com/search/docs/fundamentals/ai-optim… |
Розділ «Mythbusting generative AI search» із прямою заявою про llms.txt. |
|
Chrome Lighthouse — аудит llms.txt
developer.chrome.com/docs/lighthouse/agentic-browsing/l… |
Опис перевірки в категорії Agentic Browsing. |
|
Chrome Lighthouse — оцінювання Agentic Browsing
developer.chrome.com/docs/lighthouse/agentic-browsing/s… |
Перелік аудитів і вимоги до версії Chrome. |
|
Google — робочі краулери
developers.google.com/crawling/docs/crawlers-fetchers/g… |
Googlebot, Google-Extended, GoogleOther та інші. |
|
Google — спеціальні краулери
developers.google.com/search/docs/crawling-indexing/goo… |
AdsBot, Mediapartners, APIs-Google, Google-Safety. |
|
Google — фетчери на запит користувача
developers.google.com/crawling/docs/crawlers-fetchers/g… |
Категорія агентів, які не перевіряють robots.txt. |
|
Google — журнал змін документації краулерів
developers.google.com/crawling/docs/changelog |
Дати появи та перейменування токенів. |
|
Google — специфікація robots.txt
developers.google.com/search/docs/crawling-indexing/rob… |
Реалізація правил зіставлення й обробки кодів відповіді. |
|
Джон Мюллер, Bluesky, 17.06.2025
bsky.app/profile/johnmu.com/post/3lrshm4gggs2v |
«FWIW no AI system currently uses llms.txt.» |
|
Джон Мюллер, Bluesky, 20.01.2026
bsky.app/profile/johnmu.com/post/3mctq34tsjs2f |
Заперечення того, що власні файли Google є підтвердженням формату. |
AI-компанії
|
OpenAI — документація про ботів
developers.openai.com/api/docs/bots |
GPTBot, OAI-SearchBot, ChatGPT-User, OAI-AdsBot із повними рядками user-agent. |
|
OpenAI — власний llms.txt
developers.openai.com/llms.txt |
Живий файл, побудований за специфікацією. |
|
Anthropic — про краулерів
support.claude.com/en/articles/8896518-does-anthropic-c… |
ClaudeBot, Claude-User, Claude-SearchBot. |
|
Anthropic — ресурси для споживання моделями
platform.claude.com/docs/en/resources/overview |
Розділ, у якому згадано llms.txt. |
|
Perplexity — документація про ботів
docs.perplexity.ai/guides/bots |
PerplexityBot і Perplexity-User. |
|
Common Crawl — CCBot
commoncrawl.org/ccbot |
Опис краулера й спосіб блокування. |
|
Meta — вебкраулери
developers.facebook.com/docs/sharing/webmasters/web-cra… |
meta-externalagent, meta-webindexer, meta-externalads та інші. |
|
Apple — про Applebot
support.apple.com/en-us/119829 |
Applebot і Applebot-Extended, включно з поясненням семантики токена-перемикача. |
|
Amazon — про Amazonbot
developer.amazon.com/amazonbot |
Опис поведінки, підтримувані директиви. |
|
DuckDuckGo — DuckAssistBot
duckduckgo.com/duckduckgo-help-pages/results/duckassist… |
Опис і термін застосування змін у robots.txt. |
|
ImageSift — про ImagesiftBot
imagesift.com/about |
Джерело правила про відкат до правил Googlebot. |
Стандарти
|
RFC 9309 — Robots Exclusion Protocol
rfc-editor.org/rfc/rfc9309.html |
Нормативні правила вибору групи, зіставлення правил і обробки кодів відповіді. |
|
RFC 8615 — Well-Known Uniform Resource Identifiers
rfc-editor.org/rfc/rfc8615.html |
Альтернатива, яку специфікація llms.txt розглядає й відхиляє. |
|
sitemaps.org — протокол Sitemap
sitemaps.org/protocol.html |
Для порівняння обмежень формату. |
Дослідження та вимірювання
|
Ahrefs — «We Analyzed 137K Sites: 97% of llms.txt Files Never Get Read»
ahrefs.com/blog/llmstxt-study/ |
Louise Linehan, Xibeijia Guan, 15.06.2026. Вибірка — 137 210 доменів, дані за травень 2026. |
|
Otterly.ai — «The llms.txt experiment»
otterly.ai/blog/the-llms-txt-experiment/ |
Thomas Peham, 05.02.2026. 90 днів логів, понад 62 100 візитів AI-ботів. |
|
PPC Land — про дані Originality.ai
ppc.land/llms-txt-adoption-rises-8-8x-but-97-of-files-g… |
Luis Rijo, 02.07.2026. Динаміка поширення llms.txt, llms-full.txt та ai.txt. |
|
Ahrefs — «What Is llms.txt, and Should You Care About It?»
ahrefs.com/blog/what-is-llms-txt/ |
Оглядовий матеріал, 15.06.2026. |
Платформи та інтеграції
|
Mintlify — llms.txt
mintlify.com/docs/ai/llmstxt |
Документація автоматичної генерації. |
|
Mintlify — анонс, 20.11.2024
mintlify.com/blog/simplifying-docs-with-llms-txt |
Tiffany Chen. Початок масового поширення формату. |
|
GitBook — What is llms.txt
gitbook.com/blog/what-is-llms-txt |
Опис реалізації на платформі. |
|
Yoast SEO — llms.txt
yoast.com/features/llms-txt/ |
Функція генерації для WordPress. |
|
AIOSEO — llms.txt
aioseo.com/features/llms-txt/ |
Функція генерації для WordPress. |
|
Wix — про llms.txt
support.wix.com/en/article/understanding-your-sites-llm… |
Автоматична генерація на платформі. |
Галузеві видання (переказ, не першоджерело)
|
Search Engine Journal — про порівняння з мета-тегом keywords
searchenginejournal.com/google-says-llms-txt-comparable… |
Roger Montti, 17.04.2025. Транскрипція коментаря Джона Мюллера на Reddit; оригінал нам звірити не вдалося. |
|
Search Engine Journal — про noindex для llms.txt
searchenginejournal.com/google-says-it-could-make-sense… |
Roger Montti, 21.07.2025. Видання не залишило посилання на оригінальний допис. |
|
Search Engine Land — про Lighthouse і llms.txt
searchengineland.com/google-llms-txt-chrome-lighthouse-… |
Danny Goodwin, 20.05.2026. Про розбіжність позицій усередині Google. |
|
Search Engine Roundtable — Google не підтримує llms.txt
seroundtable.com/google-does-not-endorse-llms-txt-40789… |
Barry Schwartz, 20.01.2026. |
Українські та російськомовні матеріали
|
UAMASTER — LLMS.txt: що це за файл
blog.uamaster.com/shho-take-llms-txt-i-chomu-vin-vazhly… |
Оглядовий матеріал українською, 10.06.2025. |
|
IdeaDigital — llms.txt: чи потрібен він сайту
ideadigital.agency/blog/llmstxt-chi-potriben-vin-vam-i-… |
Огляд із погляду SEO-просування. |
|
Академія SEO — LLMS.txt: що це, приклади, кейси
seo-akademiya.com/ua/baza-znan/shtuchnyi-intelekt-shi/l… |
Матеріал із прикладами впровадження, 17.10.2025. |
|
Rete.js — документація llms.txt українською
retejs.org/uk/docs/llms/ |
Приклад проєкту з українською документацією й власним llms.txt. |
Чого нам не вдалося перевірити
Прозорість щодо меж власної впевненості — частина принципів цього сайту. Ось список того, що ми хотіли б підтвердити, але не змогли:
- Оригінальний тред на Reddit із коментарем Джона Мюллера про порівняння з мета-тегом keywords. Наводимо транскрипцію Search Engine Journal, у якій є авторська елізія.
- Дослівна цитата Гері Іллеса з конференції Search Central Live Deep Dive APAC 2025. Інформація дійшла через переказ у переказі, тому ми не подаємо її як цитату.
- Документація краулерів Bing. Сторінка Bing Webmaster Tools рендериться лише з JavaScript і не віддає даних у серверній відповіді.
- Числова вага аудиту llms.txt у Lighthouse. Google не публікує ваги окремих аудитів цієї категорії.
- Заяви Yandex або Mistral національними мовами. Наш пошук орієнтований на англомовні джерела.
- Первинне джерело Originality.ai щодо динаміки поширення — ми спираємося на переказ PPC Land.