← 全部工具

Robots Meta 標籤產生器

依明確的索引、追蹤、摘要與圖片指令產生指定爬蟲的 robots meta 標籤與 X-Robots-Tag 標頭。

robots-meta-tag-generator本機處理

正在啟用本機工具…

爬蟲指令

啟用的指令

爬蟲需要能存取頁面才能讀到指令。支援的爬蟲名稱、HTML/HTTP 格式及指令依提供者而異。

Google robots meta 指南

標記與標頭輸出

預覽最多 32,000 字元;複製、下載與展開文字均保留完整內容。複製失敗時可選取完整文字。

<meta name="robots" content="index, follow">
展開可選取的完整文字
<meta name="robots" content="index, follow">

如何使用這個工具

選擇目標與指令後,複製或下載 HTML 標籤或 HTTP 標頭。

不適合用在什麼情況

爬蟲對指令的支援各異,包括舊版 noarchive。另行確認部署結果與爬蟲存取狀況。

閱讀實作指南 →