# robots.txt — Deutsches Wochenblatt
# Erzeugt von scripts/seiten-bauen.py — nicht von Hand bearbeiten.

User-agent: *
Allow: /

Sitemap: https://deutsches-wochenblatt.de/sitemap.xml

# ---------------------------------------------------------------------------
# Nutzungsvorbehalt nach § 44b Abs. 3 UrhG in maschinenlesbarer Form.
# Text und Data Mining zum Training oder Betrieb von KI-Systemen ist untersagt.
# Ergänzend: /.well-known/tdmrep.json, HTTP-Kopfzeile tdm-reservation: 1
# sowie <meta name="tdm-reservation" content="1"> im Kopf jeder Seite.
# ---------------------------------------------------------------------------

User-agent: GPTBot
Disallow: /

User-agent: OAI-SearchBot
Disallow: /

User-agent: ChatGPT-User
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: anthropic-ai
Disallow: /

User-agent: Claude-Web
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: PerplexityBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: Diffbot
Disallow: /

User-agent: ImagesiftBot
Disallow: /

User-agent: Omgilibot
Disallow: /

User-agent: FacebookBot
Disallow: /