技術 SEO / robots.txt 分析檢測

robots.txt 分析檢測工具

把 robots.txt 內容貼上，或嘗試讀取網站公開檔案，即可檢查 Google、GPT、Claude 等搜尋與 AI 服務是否能讀取網站，以及 Sitemap 和封鎖規則是否有 SEO 風險。

需要人工判斷？把網站 URL 和檢查結果交給我們，先判斷哪個搜尋入口最值得修。

抓取權限檢查

檢查搜尋引擎與 AI 搜尋是否可以讀取網站

網站 URL想檢查的搜尋服務指定頁面路徑

robots.txt 內容

輸入 robots.txt 後會顯示 Sitemap、搜尋工具規則與指定頁面是否可能被阻擋。

robots.txt 不是用來保證收錄，而是控制搜尋工具是否可以抓取。重要服務頁、分類頁與 blog 文章不應被Disallow 誤傷；Sitemap 入口則能幫 Google、Bing 與 AI 搜尋服務更快發現內容。

如果網站正在做 GEO 或 Agent SEO，建議同時確認 GPTBot、ClaudeBot、Google-Extended、PerplexityBot 等 AI 搜尋服務的存取策略。