# kerngedanken.at
# KI-Crawler sind willkommen. Nicht öffentlich sind nur die Newsletter-PDFs,
# die Abonnenten-Bibliothek und interne Seiten (zusätzlich per X-Robots-Tag
# in public/_headers abgesichert).
# Was die Seite anbietet, in Prosa: https://kerngedanken.at/fuer-ki/

User-agent: *
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# --- Antwortmaschinen: ausdrücklich erlaubt -------------------------------
# Übersicht der Kennungen, damit später niemand raten muss.

# OpenAI: Training, Suchindex, Abruf während einer Unterhaltung
User-agent: GPTBot
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Anthropic (Claude)
User-agent: ClaudeBot
User-agent: Claude-User
User-agent: Claude-SearchBot
User-agent: anthropic-ai
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Perplexity
User-agent: PerplexityBot
User-agent: Perplexity-User
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Google: Gemini und AI Overviews (getrennt von Googlebot steuerbar)
User-agent: Google-Extended
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Apple Intelligence
User-agent: Applebot-Extended
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Microsoft Copilot / Bing (trägt auch die ChatGPT-Suche)
User-agent: Bingbot
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Amazon (Alexa, Rufus)
User-agent: Amazonbot
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# Common Crawl (Datengrundlage vieler Modelle)
User-agent: CCBot
Allow: /
Disallow: /pdf/
Disallow: /bibliothek/
Disallow: /cockpit/
Disallow: /pins/
Disallow: /pins-v2/

# --- Wegweiser ------------------------------------------------------------
Sitemap: https://kerngedanken.at/sitemap-index.xml