Site personnel courcellematthi.eu

2026-08-05 22:40:03 +02:00
commit df12d21165
39 changed files with 4503 additions and 0 deletions
@@ -0,0 +1,50 @@
+# =============================================================================
+# robots.txt — courcellematthi.eu
+# =============================================================================
+# Site personnel entièrement public : rien à masquer, tout à indexer.
+# Un robots.txt permissif mais explicite vaut mieux qu'un fichier absent :
+# il évite les 404 répétées dans les journaux et déclare le sitemap.
+# =============================================================================
+
+# --- Robots d'indexation classiques -----------------------------------------
+User-agent: *
+Allow: /
+
+# --- Robots des moteurs de réponse et agents IA ------------------------------
+# Autorisés explicitement : sur un CV, être cité par un agent conversationnel
+# lors d'une recherche de profil est un bénéfice, pas une fuite.
+# Retirer ces blocs (ou les passer en Disallow) si l'arbitrage change.
+User-agent: GPTBot
+Allow: /
+
+User-agent: OAI-SearchBot
+Allow: /
+
+User-agent: ChatGPT-User
+Allow: /
+
+User-agent: ClaudeBot
+Allow: /
+
+User-agent: Claude-Web
+Allow: /
+
+User-agent: PerplexityBot
+Allow: /
+
+User-agent: Google-Extended
+Allow: /
+
+User-agent: Applebot-Extended
+Allow: /
+
+# --- Aspirateurs de site ----------------------------------------------------
+# Bloqués : consommation de bande passante sans contrepartie.
+User-agent: HTTrack
+Disallow: /
+
+User-agent: WebZIP
+Disallow: /
+
+# --- Plan du site -----------------------------------------------------------
+Sitemap: https://www.courcellematthi.eu/sitemap.xml