# Чи блокує llms.txt AI-ботів?

> llms.txt не має механізму заборони. Щоб обмежити AI-краулерів, потрібен robots.txt із конкретними user-agent. Перелік токенів і приклади.

Джерело: https://llms.com.ua/faq/chy-blokuye-ai-botiv/ · оновлено 2026-08-12 · llms.com.ua

---

**Коротка відповідь**
Ні. У llms.txt немає жодної директиви заборони — у ньому фізично нічим щось блокувати. Щоб обмежити AI-ботів, потрібен robots.txt із правилами для конкретних user-agent (GPTBot, ClaudeBot, Google-Extended тощо).

## Розгорнута відповідь

Ні, і це не питання інтерпретації. У форматі `llms.txt` **фізично немає синтаксису**,
яким можна було б щось заборонити. Файл складається з чотирьох типів елементів:
- заголовок H1 з назвою;
- блок-цитата з резюме;
- вільний текст без заголовків;
- секції H2 зі списками посилань.

Жодного аналога `Disallow` серед них не існує. Записати заборону нема чим.

**Звідки береться цей міф**Із назви. Файл лежить у корені поруч із `robots.txt`, тому багато хто добудовує аналогію: якщо robots.txt керує роботами, то llms.txt має керувати мовними моделями. Помилка трапляється і в поважних публікаціях: у російськомовних джерелах, які потрапляють у видачу, llms.txt прямо називають «файлом управління доступом для великих мовних моделей». Це неправда.

### Що робити, якщо мета — саме заборонити

Використовувати `robots.txt` із правилами для конкретних токенів. Приклад базової конфігурації:

```
# Тренування моделей
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: Bytespider
Disallow: /

# Токени-перемикачі
User-agent: Google-Extended
Disallow: /

User-agent: Applebot-Extended
Disallow: /
```

### Три речі, які варто знати перед блокуванням

-
**Токени-перемикачі не блокують обхід.** `Google-Extended` і
`Applebot-Extended` не мають власного рядка user-agent. Заборона стосується лише використання вже
зібраних даних для навчання; із пошуку Google чи Apple сайт при цьому не зникає.

-
**Тренування й пошук — різні речі.** Заборона `GPTBot` стосується навчання моделей.
Заборона `OAI-SearchBot` — це виключення сайту з пошуку ChatGPT, тобто відмова від переходів.
Об’єднувати їх одним рішенням «заборонити все AI» зазвичай не варто.

-
**robots.txt виконується добровільно.** Він працює для ботів, які його дотримуються.
Google прямо документує, що фетчери на запит користувача (`Google-Agent`, фетчери NotebookLM)
і `Google-Safety` robots.txt не перевіряють узагалі.

Повний перелік токенів із посиланнями на офіційну документацію власників —
у [довіднику AI-краулерів](https://llms.com.ua/crawlers/). Перевірити, що саме дозволяє ваш поточний файл, можна
[тестером](https://llms.com.ua/robots-tester/): він враховує і токени-перемикачі, і винятки для груп.

**Технічний захист поза robots.txt**Якщо потрібна не декларація, а гарантія, robots.txt недостатньо. Тоді працюють інші інструменти: блокування за IP-діапазонами (OpenAI, Anthropic і Perplexity публікують свої списки у форматі JSON), правила на рівні CDN або WAF, обмеження частоти запитів. Це вже не стандарт, а адміністрування сервера.

[Схоже запитання
Чи потрібен llms.txt моєму сайту?](https://llms.com.ua/faq/chy-potriben-llms-txt/)
[Схоже запитання
Чим llms.txt відрізняється від robots.txt?](https://llms.com.ua/faq/vidminnist-vid-robots-txt/)
[Схоже запитання
Чим llms.txt відрізняється від sitemap.xml?](https://llms.com.ua/faq/vidminnist-vid-sitemap/)

[Усі 15 запитань →](https://llms.com.ua/faq/)