User-agent: *
Allow: /$
Allow: /faq
Allow: /contacts
Allow: /legal/
Allow: /static/
Disallow: /app
Disallow: /accounts
Disallow: /oauth
Disallow: /telegram
Disallow: /billing
Disallow: /admin
Disallow: /account
Disallow: /webhooks
Disallow: /login
Disallow: /signup
Disallow: /verify

# поисковые роботы, дающие цитирование в ИИ-ответах
User-agent: Googlebot
Allow: /
User-agent: YandexBot
Allow: /
User-agent: OAI-SearchBot
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: Bingbot
Allow: /

# обучающие краулеры — пускаем, материал публичный
User-agent: GPTBot
Allow: /
User-agent: ClaudeBot
Allow: /
User-agent: Google-Extended
Allow: /

Sitemap: https://kontekstolog.online/sitemap.xml