可以讀取已上線的 robots.txt 嗎？
不可以。請貼上要檢查的文字。
工具
Robots.txt / Sitemap 檢查器
檢查貼上的 robots.txt 規則或 sitemap XML，並顯示基本警告。
已識別 Robots.txt Sitemap 指令數量: 1 Disallow 指令數量: 0 - User-agent: * - Allow: / - Sitemap: https://technine.io/sitemap.xml
貼上 robots.txt 或 sitemap XML，即可取得基本指令或網址位置的數量，以及一段可供檢查的節錄。
使用方法
- 把 robots.txt 或 sitemap XML 貼到編輯區。
- 查看偵測到的類型、數量及列出的節錄。
- 完成驗證提示後，可選擇儲存結果。
適用情況
- 審閱 robots 草稿
- 在技術審閱前，計算 Sitemap 及 Disallow 指令。
- 抽查 sitemap 匯出檔
- 查看找到多少個 <loc>，並檢查最前的網址。
此檢查器會做甚麼
- 對 sitemap XML，工具會以簡單文字方式尋找 <loc>，並列出首 20 個。
- 對 robots.txt，工具會計算 Sitemap 及 Disallow 行，並列出首 30 個非空白行。
- 工具不會完整驗證格式、爬取上線網站或判斷可否收錄。
常見問題
會驗證所有 sitemap 規則嗎？
不會。工具只會基本偵測 <loc>。
Disallow 數量可否反映網址是否已收錄？
不可以。是否收錄取決於 robots 規則以外的因素。
文字一定只留在瀏覽器嗎？
如你選擇儲存，完成驗證後，工具會把短報告摘要傳送到網站伺服器；如不儲存，貼上的文字只留在頁面表格。