爬蟲文件
將您的頁面從索引中移除。
如果您的網站不該出現在 WebAtlas Index 中,您可以自行申請移除。我們會在刪除任何內容之前自動驗證每項申請 — 不會僅因申請就刪除任何內容。
爬蟲文件
如果您的網站不該出現在 WebAtlas Index 中,您可以自行申請移除。我們會在刪除任何內容之前自動驗證每項申請 — 不會僅因申請就刪除任何內容。
在頁面本身加入 noindex meta 標籤,或在 robots.txt 中封鎖該確切路徑。在下方工具中提交頁面網址 — 只要我們確認其中一項,就會自動移除。
<meta name="robots" content="noindex">
若要移除某路徑下的所有內容(例如 /blog/),請在 robots.txt 中為 WebAtlasBot 封鎖該路徑:
User-agent: WebAtlasBot
Disallow: /blog/
無法存取 robots.txt?請改為在下方工具中提交該路徑。我們會提供一個小型驗證檔案,供您上傳至網站根目錄 — 一經找到,該路徑下的所有網址都將被移除,並永久排除於未來的爬取之外。
若要移除整個網域,請在 robots.txt 中為 WebAtlasBot 封鎖所有內容:
User-agent: WebAtlasBot
Disallow: /
如上所述 — 若您無法編輯 robots.txt,請在下方工具中提交該網域,並上傳我們為您產生的驗證檔案。
待處理的申請大約每小時會自動重新檢查一次。一旦申請獲得確認,相符的頁面會立即從索引中移除。
一旦移除獲得確認,該網址、路徑或網域將被永久排除 — 即使日後再次遇到,我們的爬蟲也絕不會將其重新加入索引。
爬蟲文件
移除工具運行於我們的爬蟲基礎設施上。選擇您想移除的內容,提交後依照該處顯示的驗證說明操作即可。