Robots de Meta
Meta exploite 5 robots susceptibles d'atteindre votre site. Ils font des tâches différentes : une règle unique pour tous est presque toujours un mauvais choix.
| User-agent | Type | Ce qu'il fait |
|---|---|---|
FacebookBot | Recherche | Construit l’index consulté par un assistant lorsqu’il répond. |
meta-webindexer | Entraînement | Collecte des pages pour entraîner les futurs modèles. |
meta-externalfetcher | Déclenché par l’utilisateur | Récupère votre page parce qu’une personne vient de la demander. |
Meta-ExternalAgent | Déclenché par l’utilisateur | Récupère votre page parce qu’une personne vient de la demander. |
Manus-User | Déclenché par l’utilisateur | Récupère votre page parce qu’une personne vient de la demander. |
Le coût du blocage
- Recherche
- Le blocage vous retire des réponses produites aujourd’hui.
- Entraînement
- Le blocage ne coûte rien aujourd’hui, mais le prochain modèle ne vous connaîtra pas.
- Déclenché par l’utilisateur
- Le blocage signifie que cette personne entendra que la page est illisible.
robots.txt
Pour autoriser tous les robots de Meta :
User-agent: FacebookBot
Allow: /
User-agent: meta-webindexer
Allow: /
User-agent: meta-externalfetcher
Allow: /
User-agent: Meta-ExternalAgent
Allow: /
User-agent: Manus-User
Allow: /Pour tous les bloquer :
User-agent: FacebookBot
Disallow: /
User-agent: meta-webindexer
Disallow: /
User-agent: meta-externalfetcher
Disallow: /
User-agent: Meta-ExternalAgent
Disallow: /
User-agent: Manus-User
Disallow: /robots.txt est respecté volontairement. C'est la bonne façon d'indiquer votre intention. Il ne contrôle pas l'accès : protégez le contenu réellement sensible par authentification.
Sources
Meta est-il autorisé sur votre site ?
Nous lirons votre robots.txt et vous dirons quels robots d'IA il laisse passer. Sans inscription.