User-agent: *
Allow: /
Disallow: /lead.php
Disallow: /kp/

# Метки рекламных кампаний. Clean-param, а не Disallow: он склеивает
# адрес с меткой и без неё в один, сохраняя накопленный вес. Disallow
# просто выбросил бы такие адреса из обхода вместе с их ссылками.
Clean-param: utm_source&utm_medium&utm_campaign&utm_term&utm_content&utm_referrer
Clean-param: yclid&gclid&fbclid&ysclid&_openstat&from&search_source

# ИИ-поисковики и ассистенты — разрешены (цитирование в ответах = трафик)
User-agent: GPTBot
Disallow: /kp/
Allow: /
User-agent: OAI-SearchBot
Disallow: /kp/
Allow: /
User-agent: ChatGPT-User
Disallow: /kp/
Allow: /
User-agent: ClaudeBot
Disallow: /kp/
Allow: /
User-agent: Claude-User
Disallow: /kp/
Allow: /
User-agent: PerplexityBot
Disallow: /kp/
Allow: /
User-agent: Perplexity-User
Disallow: /kp/
Allow: /
User-agent: Google-Extended
Disallow: /kp/
Allow: /
User-agent: YandexAdditional
Disallow: /kp/
Allow: /
User-agent: Applebot-Extended
Disallow: /kp/
Allow: /

# SEO-разведботы конкурентов — закрыты (09.09.2026): вытаскивают семантику,
# структуру и ссылки для чужого анализа. Поиску и ИИ-ассистентам не мешает.
User-agent: AhrefsBot
Disallow: /
User-agent: SemrushBot
Disallow: /
User-agent: SerpstatBot
Disallow: /
User-agent: MegaIndex.ru
Disallow: /
User-agent: MegaIndexBot
Disallow: /
User-agent: MJ12bot
Disallow: /
User-agent: DotBot
Disallow: /
User-agent: BLEXBot
Disallow: /
User-agent: DataForSeoBot
Disallow: /
User-agent: LinkpadBot
Disallow: /
User-agent: SEOkicksBot
Disallow: /
User-agent: SiteAnalyzerBot
Disallow: /

Sitemap: https://itc.media/sitemap.xml