# robots.txt — secolo-trentino.com
# Aggiornato: agosto 2026

# ---------------------------------------------------------------
# 1. Regola generale (motori di ricerca tradizionali)
# ---------------------------------------------------------------
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-json/
Disallow: /xmlrpc.php
Disallow: /?s=
Disallow: /search/
Disallow: /tds-login-register/
Disallow: /tds-checkout/
Disallow: /tds-my-account/
Disallow: /*?replytocom=
Disallow: /*?add-to-cart=
Allow: /wp-content/uploads/

# ---------------------------------------------------------------
# 2. Motori di risposta AI — CONSENTITI
#    Sono i bot che leggono il sito per CITARLO in una risposta.
#    Bloccarli significa sparire da ChatGPT, Perplexity, Claude,
#    Gemini e dalle AI Overviews di Google.
# ---------------------------------------------------------------
User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: Bingbot
Allow: /

# ---------------------------------------------------------------
# 3. Crawler di solo addestramento — SCELTA EDITORIALE
#    Questi raccolgono testo per addestrare i modelli, non per
#    citarti. Molte testate li bloccano per tutelare il copyright.
#    Per CONSENTIRLI: sostituisci "Disallow: /" con "Allow: /".
# ---------------------------------------------------------------
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: Amazonbot
Disallow: /

# ---------------------------------------------------------------
# 4. Sitemap
# ---------------------------------------------------------------
Sitemap: https://secolo-trentino.com/sitemaps.xml
Sitemap: https://secolo-trentino.com/news.xml