# Сайт в разработке — индексация полностью закрыта. # # ВАЖНО: Cloudflare (Managed robots.txt / Content Signals) дописывает СВЕРХУ # собственный блок "User-agent: * ... Allow: /". Краулеры объединяют группы # с одинаковым user-agent, и при равной длине правил Allow побеждает Disallow. # Поэтому запрет задан как "Disallow: /*" — правило длиннее, чем "Allow: /", # и по правилу «самый длинный паттерн выигрывает» побеждает запрет. # Правильное решение — выключить Managed robots.txt в панели Cloudflare; # после этого можно вернуть обычный "Disallow: /". # # Снятие запрета при запуске боевого сайта — только по решению владельца. User-agent: * Disallow: /* Disallow: / User-agent: Yandex Disallow: /* Disallow: / User-agent: Googlebot Disallow: /* Disallow: / User-agent: GPTBot Disallow: /* Disallow: / User-agent: ClaudeBot Disallow: /* Disallow: / User-agent: CCBot Disallow: /* Disallow: / User-agent: PerplexityBot Disallow: /* Disallow: /