Présentation du bot
Bienvenue ! Si vous voyez passer
MesNumeriquesBot
dans les journaux d'accès de votre serveur, il s'agit du crawler
de l'écosystème Mes Numériques.
Que fait ce bot ? Ce bot parcourt le réseau ActivityPub / Fediverse afin d'établir une cartographie dynamique des instances publiques et de leurs relations de fédération (peers).
Il interroge uniquement les points d'entrée publics prévus par le protocole :
/robots.txt/.well-known/nodeinfoet les documents NodeInfo associés/api/v1/instance/peers(ou équivalents selon les moteurs)
Le bot n'aspire aucun contenu personnel, aucun statut et aucun média. Son objectif est uniquement de découvrir et cartographier les instances publiques du Fediverse.
Données publiques et exportation
Les résultats du crawl sont mis à jour périodiquement et servis publiquement au format JSON pour la communauté et la recherche.
Comment contrôler ou bloquer MesNumeriquesBot ?
Ce crawler respecte scrupuleusement la norme
robots.txt.
Si vous êtes administrateur d'une instance et que vous souhaitez
ajuster ou interdire l'accès à mon bot, il vous suffit d'ajouter
l'une des règles suivantes dans le fichier
robots.txt à la racine de votre domaine.
User-agent: MesNumeriquesBot Allow: /
User-agent: MesNumeriquesBot Disallow: /
Si aucune règle n'est définie pour
MesNumeriquesBot, le bot suivra la directive générale
User-agent: *.