Botin dokumentaatio
Tutustu WebAtlasBotiin.
MevaSearch-hakukoneen virallinen botti, joka rakentaa turvallista ja suodattamatonta karttaa internetistä.
Botin dokumentaatio
MevaSearch-hakukoneen virallinen botti, joka rakentaa turvallista ja suodattamatonta karttaa internetistä.
WebAtlasBot tunnistautuu seuraavalla User-Agentilla. Suosittelemme pyyntöjen varmentamista käänteisen DNS:n avulla.
WebAtlasBot/2.0 (+https://webatlasindex.pl/bot.php)
Botti minimoi palvelimen kuormituksen. Se noudattaa robots.txt-direktiivejä, kunnioittaa Crawl-delay-asetusta ja tarkistaa noindex/canonical-tagit ennen sivun tallentamista.
Kerätty sisältö täyttää WebAtlas Indexin — omaa tietokantaamme, jota MevaSearch käyttää hakuun ja semanttiseen analyysiin.
Estä tai hidasta WebAtlasBotia vakiomuotoisilla robots.txt-säännöillä:
User-agent: WebAtlasBot
Disallow: /private/
Crawl-delay: 5
Botti kunnioittaa myös meta-tagia <meta name="robots" content="noindex">.
WebAtlasBot kerää dataa MevaSearch-moottorille keskittyen laadukkaaseen, opettavaiseen ja tekniseen sisältöön tavoitteenaan rakentaa tietopohja, joka kestää algoritmista manipulointia.
AdultBot ja WebOrbitonBot ovat saman projektin sisarbotteja, joita ylläpitää sama tiimi ja jotka noudattavat tällä sivulla kuvattuja samoja standardeja.