Documentation du robot
Découvrez WebAtlasBot.
Le robot officiel du moteur de recherche MevaSearch, qui construit une carte d'internet sûre et sans filtre.
Documentation du robot
Le robot officiel du moteur de recherche MevaSearch, qui construit une carte d'internet sûre et sans filtre.
WebAtlasBot s'identifie avec le User-Agent suivant. Nous recommandons de vérifier les requêtes via le DNS inversé.
WebAtlasBot/2.0 (+https://webatlasindex.pl/bot.php)
Le robot minimise la charge serveur. Il respecte les directives robots.txt, honore Crawl-delay, et vérifie les balises noindex/canonical avant d'enregistrer une page.
Le contenu collecté alimente le WebAtlas Index — notre propre base de données utilisée pour la recherche et l'analyse sémantique par MevaSearch.
Bloquez ou limitez WebAtlasBot avec des règles robots.txt standard :
User-agent: WebAtlasBot
Disallow: /private/
Crawl-delay: 5
Le bot respecte aussi la balise meta <meta name="robots" content="noindex">.
WebAtlasBot collecte des données pour le moteur MevaSearch, en se concentrant sur du contenu de haute qualité, éducatif et technique, dans le but de construire une base de connaissances résistante à la manipulation algorithmique.
AdultBot et WebOrbitonBot sont des robots jumeaux du même projet, gérés par la même équipe et soumis aux mêmes standards décrits sur cette page.