クローラードキュメント
インデックスからページを削除する。
サイトがWebAtlas Indexに表示されるべきでない場合、ご自身で削除をリクエストできます。何かを削除する前に、すべてのリクエストを自動的に検証します — リクエストだけで削除されることはありません。
クローラードキュメント
サイトがWebAtlas Indexに表示されるべきでない場合、ご自身で削除をリクエストできます。何かを削除する前に、すべてのリクエストを自動的に検証します — リクエストだけで削除されることはありません。
ページ自体にnoindexメタタグを追加するか、robots.txtでそのパスを正確にブロックしてください。以下のツールでページのURLを送信すると、どちらかが確認され次第、自動的に削除されます。
<meta name="robots" content="noindex">
特定のパス以下のすべて(例:/blog/)を削除するには、robots.txtでWebAtlasBotに対してそのパスをブロックしてください:
User-agent: WebAtlasBot
Disallow: /blog/
robots.txtにアクセスできませんか?代わりに以下のツールでパスを送信してください。サイトのルートにアップロードする小さな確認ファイルをお渡しします — 見つかり次第、そのパス以下のすべてのURLが削除され、今後のクロールから永久に除外されます。
ドメイン全体を削除するには、robots.txtでWebAtlasBotに対してすべてを禁止してください:
User-agent: WebAtlasBot
Disallow: /
上記と同様です — robots.txtを編集できない場合は、以下のツールでドメインを送信し、生成された確認ファイルをアップロードしてください。
保留中のリクエストは、約1時間ごとに自動的に再チェックされます。リクエストが確認され次第、該当するページは即座にインデックスから削除されます。
削除が確認されると、URL、パス、またはドメインは永久に除外されます — 後で再び見つかった場合でも、クローラーが再びインデックスに追加することはありません。
クローラードキュメント
削除ツールは当社のクローラーインフラ上で動作します。削除したいものを選び、送信して、そこに表示される確認手順に従ってください。