# robots.txt für kuljkin.de
# KI-Crawler werden explizit zugelassen (mit denselben Pfad-Restrictions wie der Standard-Catch-all).

# OpenAI (ChatGPT-Training und Live-Browsing), Google Gemini, Anthropic Claude,
# Perplexity, Apple Intelligence, Common Crawl
User-agent: GPTBot
User-agent: ChatGPT-User
User-agent: OAI-SearchBot
User-agent: Google-Extended
User-agent: ClaudeBot
User-agent: anthropic-ai
User-agent: Claude-Web
User-agent: PerplexityBot
User-agent: Applebot-Extended
User-agent: CCBot
User-agent: Bytespider
User-agent: meta-externalagent
Allow: /
Disallow: /premium/
Disallow: /carepack/konfigurator/
Disallow: /bewertung/
Disallow: /preview/
Disallow: /styleguide/
Disallow: /DESIGN.md
Disallow: /design-tokens.css

# Standard-Catch-all für alle anderen Crawler (klassische Suchmaschinen, Social-Crawler etc.)
User-agent: *
Allow: /
Disallow: /premium/
Disallow: /carepack/konfigurator/
Disallow: /bewertung/
Disallow: /preview/
Disallow: /styleguide/
Disallow: /DESIGN.md
Disallow: /design-tokens.css

Sitemap: https://www.kuljkin.de/sitemap.xml