# robots.txt — annuaire-traducteur-assermente.fr
# TTI EUROPE SA — mis à jour le 17/10/2026
#
# Politique : ouverture maximale aux moteurs de recherche et aux IA
# (recherche, citation ET entraînement : OAI-SearchBot, ChatGPT-User,
# GPTBot, Claude-SearchBot, Claude-User, ClaudeBot, Google-Extended,
# PerplexityBot, Applebot-Extended, CCBot, Amazonbot, etc.).
# Tous ces robots relèvent de la règle générale en fin de fichier.
#
# Pour revenir à un blocage de l'entraînement IA, rétablir un groupe :
#   User-agent: GPTBot
#   User-agent: ClaudeBot
#   Disallow: /
# (ne PAS y remettre Google-Extended si l'on veut rester cité par Gemini)

# Aspirateurs, scrapers et robots abusifs
User-agent: MJ12bot
User-agent: DotBot
User-agent: BLEXBot
User-agent: DataForSeoBot
User-agent: PetalBot
User-agent: HTTrack
User-agent: Bytespider
Disallow: /

# Tous les autres (moteurs de recherche et IA)
User-agent: *
Disallow: /api/
Disallow: /admin/
Disallow: /download/
Disallow: /export/
Disallow: /private/
Disallow: /*?download=
Disallow: /*?export=
Allow: /llms.txt

Sitemap: https://www.annuaire-traducteur-assermente.fr/sitemap.xml