# RankPurr robots.txt — ПРОД (индексация открыта)
# /spasibo/ намеренно НЕ закрыта здесь: страница отдаёт noindex,
# а Disallow мешал бы краулеру этот noindex увидеть.

User-agent: *
Allow: /

# ИИ-краулерам доступ разрешён явно (именованная группа перекрывает *,
# поэтому правило повторено). Карта фактов для ИИ: /llms.txt
User-agent: GPTBot
User-agent: ChatGPT-User
User-agent: ClaudeBot
User-agent: anthropic-ai
User-agent: PerplexityBot
User-agent: Google-Extended
User-agent: Bingbot
Allow: /

# Clean-param — только Яндекс: отсечь дубли по UTM/clid
Clean-param: utm_source&utm_medium&utm_campaign&utm_term&utm_content
Clean-param: yclid&gclid&_openstat

Sitemap: https://rankpurr.com/sitemap.xml