Web Hygiene MCP

io.github.Luca-003由 GitHub 帳號 Luca-003 發布v0.2.1更新於 Oct 24, 2026

Live web checks for AI agents: sitemaps, robots.txt, URL status, broken links, feeds, citations.

已驗證Streamable HTTP可網頁執行網頁搜尋與抓取開發者工具

概覽

AI 產生的概覽

遠端 MCP 伺服器，讓助理即時查核網路內容：網站地圖、robots.txt、URL 狀態、失效連結、訂閱來源與引用出處。

可以做什麼
檢視網站的 robots.txt、llms.txt、網站地圖與訂閱來源，列出網站地圖所發布的 URL 及其 lastmod 日期，支援正規表示式篩選，最多 2,000 個。檢查單一 URL 的 HTTP 狀態、完整重新導向鏈、最終 URL、回應時間與內容類型。批次檢查最多 300 個連結的 404、5xx、逾時、SSL 錯誤、重新導向鏈與慢速頁面。探索並讀取 RSS、Atom 與 JSON 訂閱來源，回傳正規化項目、UTC 日期、作者與附件。核驗引用：對每個被引 URL 給出已驗證、不符、找不到、重新導向至首頁、付費牆或封鎖等結果，附真實標題、日期、作者與引文比對證據，並為失效連結提供網際網路檔案館副本。
適用情境
適用於助理在引用連結與出處前確認其確實存在，在引用某網站前了解該網站允許與發布的內容，或檢查文件與網站中的失效及重新導向連結。
執行需求
遠端 Streamable HTTP 端點，無需本機執行環境或安裝套件。需要 Apify API 權杖，透過 Authorization 標頭以 Bearer 方式傳送。需要 Apify 帳號，並需能存取該端點的網路。
安裝前請注意
Authorization 標頭攜帶 Apify API 權杖，屬於機密資訊。工具呼叫按事件計費並計入 Apify 帳號，使用會產生費用；免費帳號僅有有限的每月額度。工具會抓取你指定的第三方網站上的公開頁面與檔案。

安裝

在 SourceWeft 中

  1. 開啟 儀表板中的 Web Hygiene MCP，將其新增到工作區。
  2. 連接 Authorization token 憑證。它們會被私密儲存，絕不會在公開頁面上展示。
  3. 為需要使用其工具的對話啟用該服務。

Web executable，透過 Streamable HTTP。 遠端服務在工作區中設定後即可從網頁執行環境執行。

交給代理程式安裝

把這段提示詞貼上到 Claude Code、Codex、Cursor 等代理程式，或 SourceWeft 對話中。代理程式會讀取該伺服器的安裝指南，先向你展示發布者、端點和登入方式，經你同意後再把它新增到你的客戶端。金鑰不會寫進任何命令。

閱讀 https://sourceweft.com/mcp/io.github.Luca-003%2Fweb-hygiene-mcp/install.md，並按其中說明把這個 MCP 伺服器接入我的客戶端。修改任何設定之前，先告訴我它的發布者、端點和登入方式，等我確認。不要把 API 金鑰寫進命令或我會提交的檔案；問我金鑰應從哪裡取得。

檢視代理程式所依據的安裝指南

其他 MCP 客戶端

把它新增到你客戶端的 mcpServers 設定中。

{
  "mcpServers": {
    "web-hygiene": {
      "type": "http",
      "url": "https://bruco3--web-hygiene-mcp.apify.actor/mcp",
      "headers": {
        "Authorization": "Bearer <YOUR_TOKEN>"
      }
    }
  }
}

README

Web Hygiene MCP

[AllMCPs Verified] · Official MCP Registry: io.github.Luca-003/web-hygiene-mcp

Remote MCP server (Streamable HTTP) that gives AI agents seven tools answering from the live web — never from a cache or the model's memory:

ToolWhat it does
site_overview(site)robots.txt (sitemaps declared, AI crawlers addressed, blanket disallow), llms.txt, sitemaps with URL count sample, feeds
list_site_urls(site_or_sitemap, max_urls, include_regex, exclude_regex)URLs a site publishes in its sitemaps, with lastmod (≤ 2,000)
check_url(url)HTTP status, full redirect chain, final URL, response time, content type
check_links(urls | site_or_sitemap, max_urls, problems_only)Bulk check: 404s, 5xx, timeouts, SSL errors, redirect chains, slow pages (≤ 300)
discover_feeds(site)RSS / Atom / JSON feeds of a website
read_feed(feed_or_site, max_items, include_content)Normalised feed items: title, link, date in UTC, author, summary, enclosures (≤ 100)
verify_citations(text | urls | citations, check_archive, max_citations)Per cited URL: verified / mismatch / not-found / redirected-home / paywalled / blocked …, real title/date/author, quote match evidence, Internet Archive copy for dead links (≤ 50)

Connect

URL:    https://bruco3--web-hygiene-mcp.apify.actor/mcpHeader: Authorization: Bearer <YOUR_APIFY_API_TOKEN>

Claude Desktop / Cursor / any Streamable HTTP client:

json
{  "mcpServers": {    "web-hygiene": {      "url": "https://bruco3--web-hygiene-mcp.apify.actor/mcp",      "headers": { "Authorization": "Bearer YOUR_APIFY_API_TOKEN" }    }  }}

A free Apify account gives you an API token and $5 of monthly credits. Tool calls are billed pay-per-event to your Apify account: a check_url costs a fraction of a cent; verifying the 10 sources of an answer about two cents. No subscription, nothing to run.

Try it — three prompts

  1. "Check the sources in the answer you just gave me: does each link exist, and is the quote really on the page?" → verify_citations
  2. "Before we cite anything from example.com, what does the site publish and allow?" → site_overview
  3. "Check every link in this README and tell me which are broken or redirected." → check_links

Claude Code: ready-made plugin with two skills — /plugin marketplace add Luca-003/web-hygiene-claude-plugin then /plugin install web-hygiene@luca-003 (repo).

Why

Language models are confident about links and sources they have never fetched. These tools let an agent look before it claims: verify a URL exists and where it leads, check robots.txt and llms.txt before quoting a site, read what a site really publishes, confirm a cited page carries the quoted passage.

Details, pricing, issues

Full documentation, pricing table and issue tracker: https://apify.com/bruco3/web-hygiene-mcp

Related Actors for whole-site / whole-document jobs: Sitemap URL Extractor · Broken Link Checker · Feed Monitor · Citation & Link Verifier

Legal

The tools request only public files sites publish for automated readers (sitemaps, feeds, robots.txt, llms.txt) and public pages you name, with a clear User-Agent. No personal data is collected or stored.

This repository holds the registry metadata (server.json) and documentation; the server runs on Apify.

來源：README.md，提交 75d0ca1

工具

0
該伺服器需要 API 金鑰等憑證，因此 SourceWeft 無法在沒有憑證的情況下讀取其工具，也未收錄。

版本歷史

1
  1. v0.2.1最新Sep 21, 2026

評分

已滿足適用檢查項的 75%

該評分衡量此收錄條目的完整程度，依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價，也不表示伺服器安全或目前可用：可連通性是帶日期的檢查結果，評分也不包含安裝量或使用者評價。

  • 近 30 天內可連通必需25 分
  • 已宣告認證方式必需10 分
  • 已列出工具15 分

    請讓伺服器在無憑證時回應 tools/list，或發布可在沙箱中無憑證啟動的軟體包。

  • 描述必需15 分
  • 圖示10 分
  • 文件15 分
  • 授權條款10 分

    請在儲存庫或註冊中心條目中宣告授權條款。