Documentation du robot
Si votre site ne doit pas apparaître dans WebAtlas Index, vous pouvez demander vous-même son retrait. Nous vérifions automatiquement chaque demande avant de supprimer quoi que ce soit — rien n'est supprimé sur simple demande.
Ajoutez une balise meta noindex à la page elle-même, ou bloquez exactement ce chemin dans le robots.txt. Soumettez l'URL de la page dans l'outil ci-dessous — dès que l'un des deux est confirmé, elle est retirée automatiquement.
<meta name="robots" content="noindex">Pour retirer tout ce qui se trouve sous un chemin (ex. /blog/), bloquez ce chemin pour WebAtlasBot dans le robots.txt :
User-agent: WebAtlasBot
Disallow: /blog/Pas d'accès au robots.txt ? Soumettez plutôt le chemin dans l'outil ci-dessous. Nous vous fournirons un petit fichier de vérification à déposer à la racine de votre site — une fois trouvé, chaque URL sous ce chemin est retirée et définitivement exclue des futures explorations.
Pour retirer un domaine entier, interdisez tout pour WebAtlasBot dans le robots.txt :
User-agent: WebAtlasBot
Disallow: /Comme ci-dessus — si vous ne pouvez pas modifier le robots.txt, soumettez le domaine dans l'outil ci-dessous et déposez le fichier de vérification généré pour vous.
Les demandes en attente sont revérifiées automatiquement environ une fois par heure. Dès qu'une demande est confirmée, les pages correspondantes sont retirées immédiatement de l'index.
Une fois le retrait confirmé, l'URL, le chemin ou le domaine est définitivement exclu — nos robots ne l'ajouteront plus jamais à l'index, même s'ils le rencontrent de nouveau plus tard.
Documentation du robot
L'outil de retrait fonctionne sur notre infrastructure d'exploration. Choisissez ce que vous voulez retirer, soumettez-le, et suivez les instructions de vérification affichées sur place.