validate_robots
Identify syntax issues, missing sitemap directives, blocked CSS/JS for render bots, and disallowed AI crawlers in robots.txt. Paste the file content for immediate local analysis.
Instructions
Проверить содержимое robots.txt: синтаксис, sitemap-директива, блокировка CSS/JS от рендер-ботов и явные запреты ИИ-краулеров (GPTBot, ClaudeBot и т.д.).
Передайте текст файла — фетч не выполняется, проверка локальная на бэкенде.
Input Schema
| Name | Required | Description | Default |
|---|---|---|---|
| lang | No | Язык сообщений: 'ru' или 'en'. | ru |
| content | Yes | Содержимое файла robots.txt (вставьте текст целиком). |
Output Schema
| Name | Required | Description | Default |
|---|---|---|---|
No arguments | |||