# robots.txt — BODES® STUDIO # Сайт открыт для индексации полностью; главное здесь — строка Sitemap: # по ней поисковик находит список всех страниц сразу, не обходя сайт вслепую. User-agent: * Disallow: # Краулеры ИИ-поисковиков перечислены отдельно и намеренно. Правило здесь # то же самое — «можно всё», — но названный бот читает СВОЙ блок и блок # «*» уже не смотрит. Смысл перечисления в том, чтобы решение было видно # глазами: студия хочет попадать в ответы ChatGPT, Claude, Perplexity # и Gemini, и никто не закроет их случайно, правя звёздочку. # # ⚠️ robots.txt — это ещё не доступ. Если краулера режет Cloudflare # (Security → Bots, «Block AI scrapers» включён по умолчанию на новых # доменах) или упирается rate limit, бот получит 403 или 503, что бы # здесь ни было написано. Проверять так: # curl -sI -A "PerplexityBot/1.0" https://bodesstudio.com/ | head -1 User-agent: OAI-SearchBot Disallow: User-agent: ChatGPT-User Disallow: User-agent: GPTBot Disallow: User-agent: Claude-SearchBot Disallow: User-agent: Claude-User Disallow: User-agent: ClaudeBot Disallow: User-agent: PerplexityBot Disallow: User-agent: Perplexity-User Disallow: User-agent: Google-Extended Disallow: User-agent: Applebot-Extended Disallow: Sitemap: https://bodesstudio.com/sitemap.xml