meta-externalfetcher
Agent de Meta qui récupère des liens à la demande d'un utilisateur et sert aux fonctions d'IA agentique. Meta indique qu'il peut contourner les règles de robots.txt.
| Éditeur | Meta |
|---|---|
| Rôle | Navigation — Meta AI (requêtes des utilisateurs et agents) |
| Jeton robots.txt | meta-externalfetcher |
| User-Agent | meta-externalfetcher/1.1 |
| Respecte robots.txt | Pas toujours : peut l'ignorer quand un utilisateur déclenche la visite (selon l'éditeur) |
| Plages IP officielles | Non publiées |
| DNS inverse | Non documenté |
| Documentation officielle | https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/ |
Activité réelle de meta-externalfetcher
Aucune visite de meta-externalfetcher enregistrée sur iabig.com sur les 30 derniers jours.
Dernière mise à jour : 2026-10-25 12:07:01 UTC. Voir l’Observatoire
Ce que fait meta-externalfetcher
Meta-ExternalFetcher récupère des liens individuels à la demande d'un utilisateur. Il prend aussi en charge des fonctions de produits comme l'évaluation et l'amélioration des capacités d'IA agentique, y compris l'aide apportée à l'IA pour naviguer sur des sites et accomplir des tâches pour les utilisateurs.
Ce que dit Meta :
- ce robot peut contourner robots.txt, car il effectue des récupérations demandées par l'utilisateur ;
- la chaîne User-Agent publiée est
meta-externalfetcher/1.1, éventuellement suivie d'un lien vers la documentation ; - pour ses autres robots, le blocage se fait avec une règle
Disallowdans robots.txt.
Deux points méritent attention. D'une part, la description ne se limite pas à la récupération d'un lien fourni par un utilisateur : elle mentionne aussi l'évaluation et l'amélioration des capacités agentiques, un usage plus large que la simple réponse à une question. D'autre part, Meta ne publie aucune liste d'adresses IP ni méthode de vérification pour cet agent : il est impossible de distinguer une vraie requête Meta d'une imitation à partir de la seule documentation officielle.
Pour un site qui souhaite refuser ces visites, robots.txt ne suffit donc pas, et un blocage au niveau du serveur ne peut s'appuyer que sur la chaîne User-Agent, qui se falsifie facilement.
Bloquer ou autoriser meta-externalfetcher
Une règle robots.txt peut ne pas être respectée, Meta l'indiquant explicitement. Un blocage par User-Agent au niveau du serveur empêche les fonctions de Meta AI de lire vos pages à la demande des utilisateurs.
Pour le bloquer, ajoutez à votre robots.txt :
User-agent: meta-externalfetcher
Disallow: /Pour l'autoriser explicitement (en recopiant vos éventuelles règles privées) :
User-agent: meta-externalfetcher
Allow: /Un groupe qui nomme meta-externalfetcher remplace pour lui le groupe User-agent: *. Composez un robots.txt complet avec le générateur et vérifiez-le avec le testeur.
Vérifier une visite de meta-externalfetcher
N'importe qui peut écrire « meta-externalfetcher » dans un User-Agent. Collez l'adresse IP et le User-Agent de vos journaux dans le vérificateur d'IP pour savoir si la visite est authentique.
Non confirmé par l'éditeur : Meta ne publie ni plages IP ni méthode de vérification. Les cas où robots.txt est contourné ne sont pas précisés, et rien n'indique officiellement si les contenus récupérés peuvent servir à l'entraînement.
Autres robots de Meta
- meta-externalagent — Entraînement