# calcio.it — regole per i crawler
# La mappa del sito e' leggibile anche nel browser: /sitemap.xml

User-agent: *
Allow: /
# usi dei contenuti (contentsignals.org): ricerca e risposte delle IA si', addestramento no
Content-Signal: search=yes, ai-input=yes, ai-train=no

# l'API pubblica di lettura resta leggibile: llms.txt la propone come fonte citabile,
# e un crawler che rispetta robots dev'essere in grado di raggiungerla
Allow: /api/v1
# aree tecniche e amministrative: non sono contenuto
Disallow: /admin
Disallow: /superadmin
Disallow: /api/
Disallow: /w/
Disallow: /widget
Disallow: /go/
Disallow: /analytics

Sitemap: https://calcio.it/sitemap.xml
# le notizie delle ultime 48 ore, nel formato di Google News
Sitemap: https://calcio.it/sitemap-notizie.xml