# robots.txt du mirror statique kepiot.fr (servi par Astro, forcé pour TOUS les UA
# via NPM — cf. npm-kepiot-advanced.conf, règle "always-astro").
#
# Politique v2 : on AUTORISE explicitement les bots SEO/LLM (tout l'intérêt du
# mirror). Le robots.txt natif de WP, lui, bannit ces bots (Disallow: / pour GPTBot,
# ClaudeBot, PerplexityBot, CCBot, Google-Extended…) — on ne veut donc PAS le servir
# aux bots.
#
# Sitemap : on pointe le sitemap généré par Astro (sitemap-index.xml), qui liste
# EXACTEMENT les URLs servies par le mirror. Le sitemap Yoast (sitemap_index.xml)
# est sur-inclusif (~2/3 d'URLs pa_*/serie/ressource… non mirrorées → 404 ici).

User-agent: *
Allow: /
Disallow: /wp-json/
Disallow: /wp/wp-admin/
Disallow: /?s=
Disallow: /search/

Sitemap: https://www.kepiot.fr/sitemap-index.xml