llms.txt 檢查工具

一個遠端 MCP 伺服器，用來檢查網站的 AI 友善程度：llms.txt 是否存在與格式、robots.txt 中的 AI 爬蟲規則以及 sitemap，並給出 0–100 分。

可以做什麼

檢查網站的 AI 友善程度：llms.txt 是否存在與格式問題、llms-full.txt、Markdown 頁面、robots.txt 對 AI 爬蟲的設定以及 sitemap，回傳 0–100 分與改善建議（check_llms_txt）。讀取 robots.txt，回報 GPTBot、ChatGPT-User、ClaudeBot、Claude-User、PerplexityBot 等 13 種 AI 爬蟲是被允許還是被封鎖（check_ai_crawler_access）。讀取網站首頁與 sitemap，自動產生 llms.txt 草稿（generate_llms_txt）。驗證給定的 llms.txt 內容是否符合格式：H1、摘要、分區與連結（validate_llms_txt）。

適用情境

當你想了解某個網站是否已為 AI 助理與爬蟲做好準備、檢視或改善其 llms.txt 與 robots.txt 設定，或在發布前起草並驗證 llms.txt 檔案時使用。

執行需求

遠端 streamable HTTP 端點；未宣告任何套件、帳號、API 金鑰或標頭。伺服器會抓取目標網站的頁面、robots.txt 與 sitemap，因此需要能連線到該網站的網路。