X402 Scraper Api

io.github.ihen404由 GitHub 账号 ihen404 发布v1.0.0更新于 Oct 24, 2026

Programmatic web-scraping MCP server powered by x402 micro-transactions on Base.

发布方自己的服务：Scraper API

已验证Streamable HTTP可网页运行网页搜索与抓取金融

概览

AI 生成的概览

远程 MCP 服务器，可将网页抓取为 Markdown 或 JSON，每次调用通过 Base 上的 USDC 微支付收费。

可以做什么
  • 以快速 DOM 解析把静态 HTML 页面抓取为干净的 Markdown
  • 通过无头浏览器渲染 JavaScript 密集的动态页面
  • 按调用方提供的 JSON Schema 把页面内容解析为结构化数据
  • 从服务端点获取工具定义并查看实时遥测指标
适用场景
当助手需要抓取网页内容（包括 JavaScript 渲染的页面），且你愿意按次用 Base 上的 USDC 付费，而不想自建爬虫或订阅 API 时适用。
运行要求
需要连接提供方 Railway 主机上的远程 MCP 端点（streamable HTTP），未声明 API 密钥。调用按次以 Base Mainnet 上的 USDC 付费，因此需要有钱包并处理 x402 支付。README 的本地示例还设置了 BASE_RPC_URL 环境变量。
安装前请注意
每次抓取都要花钱（按档位约 0.01 至 0.15 USDC），智能体可能自主消费资金。支付需要 Base 钱包并签署 x402 支付挑战。抓取的页面内容会发送给第三方服务处理，README 还提到遥测会记录请求速率、会话和收入。

安装

在 SourceWeft 中

  1. 打开 控制台中的 X402 Scraper Api，将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Web executable，通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体，或 SourceWeft 对话中。智能体会读取该服务器的安装指南，先向你展示发布者、端点和登录方式，经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/io.github.ihen404%2Fx402-scraper-api/install.md，并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前，先告诉我它的发布者、端点和登录方式，等我确认。不要把 API 密钥写进命令或我会提交的文件；问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "x402-scraper-api": {
      "type": "http",
      "url": "https://x402-scraper-api-production-67a4.up.railway.app/mcp"
    }
  }
}

README

🌐 x402 Scraper API

High-Velocity, Multi-Tiered Web Scraping MCP Server monetized via HTTP 402 micro-payments on Base Mainnet. Designed for autonomous agent swarms, research pipelines, and enterprise LLM workflows.

⚡ Quickstart for Developers (Claude Desktop / MCP Clients)

Add this server configuration to your MCP client settings file (e.g., claude_desktop_config.json) to instantly equip your local AI workspace with paid web scraping tools:

json
{  "mcpServers": {    "x402-scraper": {      "command": "npx",      "args": ["-y", "x402-scraper-api"],      "env": {        "BASE_RPC_URL": "https://mainnet.base.org"      }    }  }}

🛠️ Tool Tiers & Pricing

Our scraping infrastructure offers three distinct programmatic tiers tailored for autonomous agents:

Tool NameDescriptionPrice (USDC on Base)
scrape_basicFast DOM parsing & clean Markdown extraction from static HTML.$0.01
scrape_dynamicHeadless browser rendering for JavaScript-heavy, dynamic web apps.$0.05
scrape_structuredScrapes a web page and parses raw content directly into a requested JSON Schema.$0.15

🤖 Autonomous Agent Integration (M2M / x402 Protocol)

Autonomous scout agents and agent swarms can programmatically discover tool definitions via our server card and execute x402 payment challenges on the fly.

Direct Endpoint Usage

  • Base URL: https://x402-scraper-api-production-67a4.up.railway.app
  • MCP Gateway: https://x402-scraper-api-production-67a4.up.railway.app/mcp
  • Server Card: https://x402-scraper-api-production-67a4.up.railway.app/.well-known/mcp/server-card.json
  • Telemetry: https://x402-scraper-api-production-67a4.up.railway.app/telemetry

Sample JavaScript Client Request

Agents can invoke tools using standard JSON-RPC over HTTP:

javascript
const response = await fetch("https://x402-scraper-api-production-67a4.up.railway.app/mcp", {  method: "POST",  headers: { "Content-Type": "application/json" },  body: JSON.stringify({    jsonrpc: "2.0",    method: "tools/call",    params: {      name: "scrape_structured",      arguments: {        url: "https://example.com/target-data",        jsonSchema: { title: "string", price: "number" }      }    },    id: 1  })});
const result = await response.json();console.log(result);

📊 Live Telemetry & Monitoring

Our production infrastructure maintains real-time telemetry tracking request velocity, active sessions, and revenue milestones. Inspect current uptime and metrics programmatically:

bash
curl -s https://x402-scraper-api-production-67a4.up.railway.app/telemetry

🚀 License

MIT © 2026 x402 Scraper API

🤖 Claude Code & AI Agent Quickstart

Give your autonomous agents (Claude Code, ElizaOS, Cursor) native paywall-scraping capabilities using x402 micro-payments on Base or Solana. No API key subscriptions required.

Install via Claude Code

Clone the repository into your local workspace or agent environment:

bash
git clone [https://github.com/your-username/x402-scraper-api.git](https://github.com/your-username/x402-scraper-api.git)

来源：README.md，提交 01d98fd

工具

0
SourceWeft 尚未读取此服务器的工具。

版本历史

1
  1. v1.0.0最新Sep 30, 2026

评分

已满足适用检查项的 85%

该评分衡量此收录条目的完整程度，依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价，也不表示服务器安全或当前可用：可连通性是带日期的检查结果，评分也不包含安装量或用户评价。

  • 近 30 天内可连通必需25 分
  • 已声明认证方式必需10 分
  • 已列出工具必需15 分

    请让服务器在无凭据时响应 tools/list，或发布可在沙箱中无凭据启动的软件包。

  • 描述必需15 分
  • 图标10 分
  • 文档15 分
  • 许可证10 分

其他 Scraper-Api 集成

Scraper API

com.scraper-api官方发布者

Scraper API 提供的远程 MCP 端点，让助手以整洁 JSON 获取社交平台、目录网站和房地产等公开网页数据。

Streamable HTTP可网页运行鉴权
网页搜索与抓取需要凭据Oct 24, 2026

Y Combinator Jobs Scraper & API - Work at a Startup, YC Jobs

由 GitHub 账号 AnshumanAtrey 发布

托管在 Apify 上的 MCP 服务器，让助手按职位、地点、角色、批次、签证、薪资和股权搜索 Y Combinator 创业公司的在招职位。

Streamable HTTP可网页运行鉴权
网页搜索与抓取需要凭据Nov 13, 2026

Wellfound Jobs Scraper & API - AngelList Startup Jobs, Equity

由 GitHub 账号 AnshumanAtrey 发布

抓取 Wellfound（原 AngelList Talent）创业公司职位，按最新优先返回薪资、股权、公司阶段与融资等结构化数据。

Streamable HTTP可网页运行鉴权
网页搜索与抓取需要凭据Nov 13, 2026

Welcome to the Jungle Jobs Scraper & API - Otta, WTTJ, Salary

由 GitHub 账号 AnshumanAtrey 发布

托管在 Apify 上的 MCP 服务器，让助手按职位名称、地点、合同类型、远程政策和薪资搜索 Welcome to the Jungle（原 Otta）的实时招聘信息。

Streamable HTTP可网页运行鉴权
网页搜索与抓取需要凭据Nov 13, 2026

Naukri Jobs Scraper & API - Salary, Experience, Last 24 Hours

由 GitHub 账号 AnshumanAtrey 发布

一个托管在 Apify 上的 MCP 服务器，让助手按职位名称、城市、经验、薪资和发布时间实时搜索 Naukri 职位，并返回结构化职位数据。

Streamable HTTP可网页运行鉴权
网页搜索与抓取需要凭据Nov 12, 2026