# Robots d'IA explicitement autorisés sur les pages publiques (tâche A2). # Les Disallow ci-dessous s'appliquent à eux comme à tous les robots : # un groupe User-agent dédié remplace le groupe « * », il doit donc les répéter. User-agent: GPTBot User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: ClaudeBot User-agent: Claude-User User-agent: Claude-SearchBot User-agent: PerplexityBot User-agent: Google-Extended User-agent: MistralAI-User Allow: / Disallow: /admin Disallow: /login Disallow: /auth Disallow: /new Disallow: /notifications Disallow: /mcp Disallow: /poll/ # Robots d'aperçu de liens (cartes X, LinkedIn, Slack, WhatsApp…). Ils # doivent pouvoir lire /poll/ : middleware.ts leur sert l'aperçu Open Graph # du sondage partagé, marqué noindex (rien n'entre dans un index de recherche). # Twitterbot, LinkedInBot et Slackbot respectent robots.txt : sans ce groupe, # Disallow: /poll/ supprimerait les aperçus des liens de sondage. User-agent: Twitterbot User-agent: LinkedInBot User-agent: Slackbot User-agent: Slackbot-LinkExpanding User-agent: facebookexternalhit User-agent: WhatsApp User-agent: Discordbot User-agent: TelegramBot User-agent: Pinterestbot User-agent: redditbot Allow: / Disallow: /admin Disallow: /login Disallow: /auth Disallow: /new Disallow: /notifications Disallow: /mcp User-agent: * Allow: / Disallow: /admin Disallow: /login Disallow: /auth Disallow: /new Disallow: /notifications Disallow: /mcp Disallow: /poll/ Sitemap: https://doodates.com/sitemap.xml