Website to Markdown

io.github.saulius876-lgtmv1.0.0更新于 Oct 9, 2026

Web pages and whole sites to clean Markdown for RAG and AI agents. Crawls links and sitemaps.

已验证Streamable HTTP可网页运行Web Search & ScrapingKnowledge & Memory

概览

AI 生成的概览

抓取网页和整个网站，并将内容转换为干净的 Markdown，供 RAG 和 AI 智能体使用。

功能
这是一个远程 MCP 服务器，可将网页乃至整个网站转换为干净的 Markdown。它会抓取链接和站点地图以收集页面，然后以适合检索增强生成和 AI 智能体的形式返回提取的内容。该服务由 Apify 托管，通过 streamable HTTP 访问。
适用场景
当助手需要获取一个或多个网页、甚至整个网站的可读文本，用于摘要、索引或构建知识库时，可以使用它。它适合需要站点内容但不想自行编写爬虫的 RAG 流程和智能体工作流。
运行要求
需要支持 streamable HTTP 的远程 MCP 客户端，连接到 Apify 托管的端点。需要网络访问。清单中未声明任何软件包、环境变量或请求头。
安装前请注意
该服务器会抓取第三方网页内容，因此被抓取的页面及其网址会经过 Apify 服务。抓取行为可能受目标网站的服务条款、robots 规则和速率限制约束。清单未声明任何凭据，但在依赖它之前，请向提供方确认是否有账号或配额要求。

安装

在 SourceWeft 中

  1. 打开 控制台中的 Website to Markdown，将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Web executable，通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "website-content-crawler": {
      "type": "http",
      "url": "https://mcp.apify.com/?tools=sauliusautomatesit/website-content-crawler-api"
    }
  }
}

工具

0
工具元数据尚未被收录。

版本历史

1
  1. v1.0.0最新Oct 9, 2026