- Robots d'IA sur Netlify - robots.txt, fichier _headers et Edge Function de filtrage
Publier un robots.txt sur Netlify, ajouter X-Robots-Tag avec _headers et filtrer les robots d'IA par User-Agent avec une Edge Function ou l'extension dédiée.
- Robots d'IA sur IIS - robots.txt, URL Rewrite, Request Filtering et restrictions IP
Sur IIS, publier robots.txt, refuser les robots d'entraînement avec une règle URL Rewrite dans web.config et voir les limites des filtres et restrictions IP.
- Robots d'IA avec nginx - robots.txt, blocage par User-Agent, plages IP officielles et débit
Configuration nginx testée pour refuser les robots d'entraînement, laisser passer les vrais robots de recherche IA, limiter leur débit et les journaliser.
- Robots d'IA avec Next.js et Vercel - robots.ts, X-Robots-Tag et pare-feu Vercel
Configurer robots.txt avec app/robots.ts dans Next.js, poser un en-tête X-Robots-Tag et régler le pare-feu Vercel sans bloquer ChatGPT Search ni Perplexity.
- Robots d'IA avec Apache 2.4 - robots.txt, .htaccess, Require not env et plages IP
Refuser les robots d'entraînement avec Apache 2.4 via .htaccess, mod_setenvif ou mod_rewrite, et n'accepter les robots de recherche que depuis leurs plages IP.
- Autoriser ou bloquer les robots d'IA sur WordPress - robots.txt virtuel, fichier physique et filtre PHP
Où modifier robots.txt sur WordPress pour refuser GPTBot ou ClaudeBot sans quitter ChatGPT Search, Claude et Perplexity, fichier, filtre PHP ou extension SEO.
- Autoriser ou bloquer les robots d'IA sur Wix - l'éditeur robots.txt et ses limites
Modifier robots.txt sur Wix pour refuser GPTBot ou ClaudeBot sans bloquer ChatGPT Search, Claude et Perplexity, où trouver l'éditeur et quels pièges éviter.
- Autoriser ou bloquer les robots d'IA sur Webflow - règles robots.txt et sous-domaine webflow.io
Écrire les règles robots.txt de Webflow pour refuser GPTBot ou ClaudeBot sans bloquer ChatGPT, Claude et Perplexity, sans le piège de l'interrupteur AI bots.
- Autoriser ou bloquer les robots d'IA sur Squarespace - ce que fait vraiment la case Crawlers
Squarespace ne laisse pas modifier robots.txt. Ce que bloque la case des robots d'IA, ce qu'elle laisse passer et comment vérifier le fichier réellement servi.
- Autoriser ou bloquer les robots d'IA sur Shopify - personnaliser robots.txt.liquid
Ajouter dans robots.txt.liquid des groupes qui refusent GPTBot ou ClaudeBot et gardent la boutique visible dans ChatGPT, Claude et Perplexity, avec les limites.