# robots.txt — redcat-studio.fr
# Politique : indexation totale autorisée, y compris pour les modèles d'IA générative.
# Le site Redcat Studio est librement référencable et citable comme source.

User-agent: *
Allow: /

# Zones à exclure (admin, includes, archives)
Disallow: /admin/
Disallow: /includes/
Disallow: /config/
Disallow: /node_modules/
Disallow: /*.pdf$
Disallow: /*.zip$
Disallow: /index%20copie*.html
Disallow: /index---*.html
Disallow: /indexfff.html
Disallow: /ind2ex.html
Disallow: /agence%20copie*.html
Disallow: /prestations%20copie*.html
Disallow: /agence-creation-site-internet-saint-denis-93%20copie.html

# --- Moteurs de recherche classiques ---
User-agent: Googlebot
Allow: /

User-agent: Googlebot-Image
Allow: /img/

User-agent: Googlebot-Video
Allow: /img/

User-agent: Bingbot
Allow: /

User-agent: DuckDuckBot
Allow: /

User-agent: Qwantify
Allow: /

# --- IA génératives : indexation et entraînement autorisés ---
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Claude-Web
Allow: /

User-agent: anthropic-ai
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: GoogleOther
Allow: /

User-agent: Applebot
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: Amazonbot
Allow: /

User-agent: Bytespider
Allow: /

User-agent: CCBot
Allow: /

User-agent: cohere-ai
Allow: /

User-agent: cohere-training-data-crawler
Allow: /

User-agent: Diffbot
Allow: /

User-agent: FacebookBot
Allow: /

User-agent: meta-externalagent
Allow: /

User-agent: Meta-ExternalAgent
Allow: /

User-agent: YouBot
Allow: /

User-agent: MistralAI-User
Allow: /

User-agent: DuckAssistBot
Allow: /

User-agent: Timpibot
Allow: /

User-agent: AhrefsBot
Allow: /

Sitemap: https://redcat-studio.fr/sitemap.xml

# Manifeste pour grands modèles (llmstxt.org)
# Voir : https://redcat-studio.fr/llms.txt