Clearcrawl

io.github.clearcrawl由 GitHub 账号 clearcrawl 发布v0.4.2更新于 Oct 27, 2026

Any URL to clean markdown/JSON; PDF, XLSX, CSV, DOCX to text and tables. Free tier for agents.

已验证Streamable HTTP可网页运行网页搜索与抓取文件与存储

概览

AI 生成的概览

Clearcrawl 把公开网址和 PDF、XLSX、CSV、DOCX 文件转换成干净的 Markdown、结构化 JSON、文本与表格,供助手使用。

可以做什么
  • 抓取公开网址,返回干净的 Markdown 和结构化 JSON,含标题、作者、日期、链接与表格,并去除广告、菜单和页脚。
  • 把通过网址或 base64 提供的 PDF、XLSX/XLS、CSV、DOCX 文件转换为逐页文本、工作表行与记录以及 Markdown 表格。
  • 读取页面时,PDF 网址会自动转换。
适用场景
适合需要从网页和办公文档中取得可读正文或表格数据、又不想自行编写抓取与解析代码的场景,也适合每日免费额度已够用的情况。
运行要求
远程 streamable HTTP 端点,无需安装;另有通过 npx 运行的本地 stdio 模式。免费额度每天 100 次调用,无需注册。付费额度需在 Authorization 头中提供 Bearer API 密钥,密钥在 Stripe 结账后获得。仅支持公开 http(s) 网址,最大 15 MB;闲置后首次调用可能需约一分钟。
安装前请注意
付费使用会产生真实费用:read_url 每次 2 个额度,convert_file 每页或每工作表 3 个额度,额度包 5 美元起。API 密钥属于机密,通过 Authorization 头或 CLEARCRAWL_API_KEY 变量传递。提交的网址和文件会发送给第三方托管服务。不支持 JavaScript 渲染和 OCR,动态页面可能返回不完整内容。

安装

在 SourceWeft 中

  1. 打开 控制台中的 Clearcrawl,将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Web executable,通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体,或 SourceWeft 对话中。智能体会读取该服务器的安装指南,先向你展示发布者、端点和登录方式,经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/io.github.clearcrawl%2Fclearcrawl/install.md,并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前,先告诉我它的发布者、端点和登录方式,等我确认。不要把 API 密钥写进命令或我会提交的文件;问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "clearcrawl": {
      "type": "http",
      "url": "https://agentreader.onrender.com/clearcrawl/mcp"
    }
  }
}

README

Clearcrawl MCP

An MCP server for Clearcrawl, a pay-per-call API built for AI agents:

  • read_url: turns any public URL into clean markdown or structured JSON (title, author, date, text, links, tables). Ads, menus and footers are stripped. PDF URLs are converted automatically.
  • convert_file: turns a PDF, XLSX/XLS/CSV or DOCX (by URL or local path) into text and tables (per-page text, sheet rows and records, markdown tables).

Free tier: 100 calls a day with no signup. Paid: 1 credit = $0.001; read_url costs 2 credits and convert_file costs 3 per page. Credit packs start at $5 for 5,000 credits.

Option 1: remote (no install)

Streamable HTTP endpoint: https://agentreader.onrender.com/clearcrawl/mcp

json
{ "mcpServers": { "clearcrawl": { "url": "https://agentreader.onrender.com/clearcrawl/mcp" } } }

Claude Code: claude mcp add --transport http clearcrawl https://agentreader.onrender.com/clearcrawl/mcp For paid credits, add the header Authorization: Bearer <your key>.

Option 2: local stdio

json
{ "mcpServers": { "clearcrawl": { "command": "npx", "args": ["-y", "github:clearcrawl/clearcrawl-mcp"], "env": { "CLEARCRAWL_API_KEY": "" } } } }

The local mode can also convert files from your disk (convert_file with path).

Getting an API key

POST https://agentreader.onrender.com/v1/credits/checkout {"pack":"ar_pack_5"} returns a Stripe Checkout URL. Once you pay, the success page shows your key. Full docs: https://agentreader.onrender.com/llms.txt

Notes

  • Clearcrawl runs on a free host, so the first call after it has been idle can take about a minute.
  • Limits: public http(s) URLs only, 15 MB max, no JavaScript rendering or OCR yet.

MIT licensed (this client). The Clearcrawl API itself is a hosted service.

More from our studio: VibePicks · LinkPreflight

Pairs well with LinkPreflight, our sister brand: preflight a URL with LinkPreflight, then extract it with Clearcrawl.

来源:README.md,提交 ec3db43

工具

2

read_url

Fetch a URL and return clean markdown plus structured JSON (title, author, links, tables). Cost: 2 credits ($0.002).

输入参数url必填format

convert_file

Convert a PDF, XLSX/CSV, or DOCX (by URL or base64) into text and tables. Cost: 3 credits ($0.003) per page/sheet.

输入参数urlbase64filename

版本历史

1
  1. v0.4.2最新Oct 17, 2026

评分

已满足适用检查项的 100%

该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。

  • 近 30 天内可连通必需25 分
  • 已声明认证方式必需10 分
  • 已列出工具必需15 分
  • 描述必需15 分
  • 图标10 分
  • 文档15 分
  • 许可证10 分