Documentación del rastreador
Conoce a WebAtlasBot.
El rastreador oficial del motor de búsqueda MevaSearch, que construye un mapa de internet seguro y sin filtros.
Documentación del rastreador
El rastreador oficial del motor de búsqueda MevaSearch, que construye un mapa de internet seguro y sin filtros.
WebAtlasBot se identifica con el siguiente User-Agent. Recomendamos verificar las solicitudes mediante DNS inverso.
WebAtlasBot/2.0 (+https://webatlasindex.pl/bot.php)
El rastreador minimiza la carga del servidor. Respeta las directivas de robots.txt, honra Crawl-delay y comprueba las etiquetas noindex/canonical antes de guardar una página.
El contenido recopilado alimenta el WebAtlas Index — nuestra propia base de datos utilizada para la búsqueda y el análisis semántico por MevaSearch.
Bloquea o limita WebAtlasBot con reglas estándar de robots.txt:
User-agent: WebAtlasBot
Disallow: /private/
Crawl-delay: 5
El bot también respeta la etiqueta meta <meta name="robots" content="noindex">.
WebAtlasBot recopila datos para el motor MevaSearch, centrándose en contenido de alta calidad, educativo y técnico, con el objetivo de construir una base de conocimiento resistente a la manipulación algorítmica.
AdultBot y WebOrbitonBot son rastreadores hermanos del mismo proyecto, gestionados por el mismo equipo y sujetos a los mismos estándares descritos en esta página.