Robots Txt Ai Crawler Audit
io.github.jmshinhwa由 GitHub 帳號 jmshinhwa 發布v0.1.3更新於 Oct 25, 2026
Checks robots.txt line by line and says what each AI crawler token actually controls - training, AI
發布方自己的服務：audit.domains - Domain Valuation
概覽
本機 MCP 伺服器，逐行稽核 robots.txt，並說明每個 AI 爬蟲標記實際控制什麼。
- 可以做什麼
- 逐行稽核 robots.txt 檔案，將每條指令與 AI 爬蟲標記比對。
- 說明每個 AI 爬蟲標記實際控制的内容，例如訓練用途與其他 AI 用途。
- 提供稽核結果，讓助理討論哪些爬蟲被允許或被阻擋。
- 適用情境
- 適合在需要了解某網站 robots.txt 是否允許或阻擋 AI 爬蟲時使用，例如發布內容前或檢視爬蟲政策時。
- 執行需求
- 透過 npx 從 npm 套件以本機程序方式在使用者電腦上執行；僅限桌面版，沒有網頁版。未宣告驗證、環境變數或標頭。
安裝
在 SourceWeft 中
- 開啟 儀表板中的 Robots Txt Ai Crawler Audit，將其新增到工作區。
- 為需要使用其工具的對話啟用該服務。
Desktop only，透過 STDIO。 STDIO 服務會啟動本機處理程序，因此需要 SourceWeft 桌面主機。
其他 MCP 客戶端
參照 儲存庫 中的啟動說明。
README
readystack-themes
Made by ReadyStack · free calculators and templates at getreadystack.com VS Code themes by ReadyStack
來源：README.md，提交 ee1c884
工具
0版本歷史
2- v0.1.3最新Sep 19, 2026
- v0.1.1Sep 16, 2026
評分
已滿足適用檢查項的 40%
該評分衡量此收錄條目的完整程度，依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價，也不表示伺服器安全或目前可用：可連通性是帶日期的檢查結果，評分也不包含安裝量或使用者評價。
- 近 30 天內可連通25 分
請保持端點能夠回應 MCP 握手；SourceWeft 每 30 天探測一次。
- 已宣告認證方式10 分
請在註冊中心條目中宣告憑證請求標頭，或保持端點能夠回應探測，以便判定其認證方式。
- 已列出工具15 分
請讓伺服器在無憑證時回應 tools/list，或發布可在沙箱中無憑證啟動的軟體包。
- 描述必需15 分
- 圖示10 分
- 文件15 分
- 授權條款10 分
請在儲存庫或註冊中心條目中宣告授權條款。
其他 Audit 整合
audit.domains - Domain Valuation
domains.audit官方發布者
確定性的網域名稱估值服務：提供公允價值區間、真實可比成交紀錄、可用性查詢，以及經 DNS 驗證的待售網域市場。
Revenue Agent — OpenAPI Audit & Change Detection
news.prh官方發布者
一個遠端 MCP 端點，用於稽核 OpenAPI 規格並偵測 API 變更，每次分析透過 Base 上的 x402 收取 0.10 USDC。
SEO Audit & Broken Link Checker
由 GitHub 帳號 prometheus-maker 發布
由 Apify 託管的 MCP 伺服器，用來稽核網站頁面的 SEO 中繼資料並找出失效連結與圖片，回傳每頁評分。
FinePrint AI Legal Risk & Contract Audit MCP Server
由 GitHub 帳號 RitualDev-Lab 發布
在本機記憶體中執行的合約風險掃描器，為編碼代理評估法律合約、NDA 與租約風險並產生修訂建議。
Mcp Supply Audit
由 GitHub 帳號 kimmawla 發布
把 MCP 伺服器當成供應鏈產物來稽核：登錄檔項目、PyPI/npm 套件、用戶端設定與工具定義，全為唯讀靜態檢查。