X402 Scraper Api

io.github.ihen404由 GitHub 帳號 ihen404 發布v1.0.0更新於 Oct 24, 2026

Programmatic web-scraping MCP server powered by x402 micro-transactions on Base.

發布方自己的服務:Scraper API

已驗證Streamable HTTP可網頁執行網頁搜尋與抓取金融

概覽

AI 產生的概覽

遠端 MCP 伺服器,可將網頁擷取為 Markdown 或 JSON,每次呼叫透過 Base 上的 USDC 微支付收費。

可以做什麼
  • 以快速 DOM 解析將靜態 HTML 頁面擷取為乾淨的 Markdown
  • 透過無頭瀏覽器渲染 JavaScript 密集的動態頁面
  • 依呼叫端提供的 JSON Schema 將頁面內容解析為結構化資料
  • 從服務端點取得工具定義並查看即時遙測指標
適用情境
當助理需要擷取網頁內容(包括 JavaScript 渲染的頁面),且你願意按次以 Base 上的 USDC 付費,而不想自建爬蟲或訂閱 API 時適用。
執行需求
需連線至提供方 Railway 主機上的遠端 MCP 端點(streamable HTTP),未宣告 API 金鑰。呼叫按次以 Base Mainnet 上的 USDC 付費,因此需要錢包並處理 x402 支付。README 的本地範例另設定了 BASE_RPC_URL 環境變數。
安裝前請注意
每次擷取都要付費(依方案約 0.01 至 0.15 USDC),代理可能自主花費資金。支付需要 Base 錢包並簽署 x402 支付挑戰。擷取的頁面內容會傳送給第三方服務處理,README 也提到遙測會記錄請求速率、工作階段與收入。

安裝

在 SourceWeft 中

  1. 開啟 儀表板中的 X402 Scraper Api,將其新增到工作區。
  2. 為需要使用其工具的對話啟用該服務。

Web executable,透過 Streamable HTTP。 遠端服務在工作區中設定後即可從網頁執行環境執行。

交給代理程式安裝

把這段提示詞貼上到 Claude Code、Codex、Cursor 等代理程式,或 SourceWeft 對話中。代理程式會讀取該伺服器的安裝指南,先向你展示發布者、端點和登入方式,經你同意後再把它新增到你的客戶端。金鑰不會寫進任何命令。

閱讀 https://sourceweft.com/mcp/io.github.ihen404%2Fx402-scraper-api/install.md,並按其中說明把這個 MCP 伺服器接入我的客戶端。修改任何設定之前,先告訴我它的發布者、端點和登入方式,等我確認。不要把 API 金鑰寫進命令或我會提交的檔案;問我金鑰應從哪裡取得。

檢視代理程式所依據的安裝指南

其他 MCP 客戶端

把它新增到你客戶端的 mcpServers 設定中。

{
  "mcpServers": {
    "x402-scraper-api": {
      "type": "http",
      "url": "https://x402-scraper-api-production-67a4.up.railway.app/mcp"
    }
  }
}

README

🌐 x402 Scraper API

High-Velocity, Multi-Tiered Web Scraping MCP Server monetized via HTTP 402 micro-payments on Base Mainnet. Designed for autonomous agent swarms, research pipelines, and enterprise LLM workflows.


⚡ Quickstart for Developers (Claude Desktop / MCP Clients)

Add this server configuration to your MCP client settings file (e.g., claude_desktop_config.json) to instantly equip your local AI workspace with paid web scraping tools:

json
{  "mcpServers": {    "x402-scraper": {      "command": "npx",      "args": ["-y", "x402-scraper-api"],      "env": {        "BASE_RPC_URL": "https://mainnet.base.org"      }    }  }}

🛠️ Tool Tiers & Pricing

Our scraping infrastructure offers three distinct programmatic tiers tailored for autonomous agents:

Tool NameDescriptionPrice (USDC on Base)
scrape_basicFast DOM parsing & clean Markdown extraction from static HTML.$0.01
scrape_dynamicHeadless browser rendering for JavaScript-heavy, dynamic web apps.$0.05
scrape_structuredScrapes a web page and parses raw content directly into a requested JSON Schema.$0.15

🤖 Autonomous Agent Integration (M2M / x402 Protocol)

Autonomous scout agents and agent swarms can programmatically discover tool definitions via our server card and execute x402 payment challenges on the fly.

Direct Endpoint Usage

  • Base URL: https://x402-scraper-api-production-67a4.up.railway.app
  • MCP Gateway: https://x402-scraper-api-production-67a4.up.railway.app/mcp
  • Server Card: https://x402-scraper-api-production-67a4.up.railway.app/.well-known/mcp/server-card.json
  • Telemetry: https://x402-scraper-api-production-67a4.up.railway.app/telemetry

Sample JavaScript Client Request

Agents can invoke tools using standard JSON-RPC over HTTP:

javascript
const response = await fetch("https://x402-scraper-api-production-67a4.up.railway.app/mcp", {  method: "POST",  headers: { "Content-Type": "application/json" },  body: JSON.stringify({    jsonrpc: "2.0",    method: "tools/call",    params: {      name: "scrape_structured",      arguments: {        url: "https://example.com/target-data",        jsonSchema: { title: "string", price: "number" }      }    },    id: 1  })});
const result = await response.json();console.log(result);

📊 Live Telemetry & Monitoring

Our production infrastructure maintains real-time telemetry tracking request velocity, active sessions, and revenue milestones. Inspect current uptime and metrics programmatically:

bash
curl -s https://x402-scraper-api-production-67a4.up.railway.app/telemetry

🚀 License

MIT © 2026 x402 Scraper API

🤖 Claude Code & AI Agent Quickstart

Give your autonomous agents (Claude Code, ElizaOS, Cursor) native paywall-scraping capabilities using x402 micro-payments on Base or Solana. No API key subscriptions required.

Install via Claude Code

Clone the repository into your local workspace or agent environment:

bash
git clone [https://github.com/your-username/x402-scraper-api.git](https://github.com/your-username/x402-scraper-api.git)

來源:README.md,提交 01d98fd

工具

0
SourceWeft 尚未讀取此伺服器的工具。

版本歷史

1
  1. v1.0.0最新Sep 30, 2026

評分

已滿足適用檢查項的 85%

該評分衡量此收錄條目的完整程度,依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價,也不表示伺服器安全或目前可用:可連通性是帶日期的檢查結果,評分也不包含安裝量或使用者評價。

  • 近 30 天內可連通必需25 分
  • 已宣告認證方式必需10 分
  • 已列出工具必需15 分

    請讓伺服器在無憑證時回應 tools/list,或發布可在沙箱中無憑證啟動的軟體包。

  • 描述必需15 分
  • 圖示10 分
  • 文件15 分
  • 授權條款10 分

其他 Scraper-Api 整合

Scraper API

com.scraper-api官方發布者

Scraper API 提供的遠端 MCP 端點,讓助理以乾淨的 JSON 取得社群平台、目錄網站與房地產等公開網頁資料。

Streamable HTTP可網頁執行驗證方式
網頁搜尋與抓取需要憑證Oct 24, 2026

Y Combinator Jobs Scraper & API - Work at a Startup, YC Jobs

由 GitHub 帳號 AnshumanAtrey 發布

託管於 Apify 的 MCP 伺服器,讓助理依職稱、地點、角色、批次、簽證、薪資與股權搜尋 Y Combinator 新創公司的開放職缺。

Streamable HTTP可網頁執行驗證方式
網頁搜尋與抓取需要憑證Nov 13, 2026

Wellfound Jobs Scraper & API - AngelList Startup Jobs, Equity

由 GitHub 帳號 AnshumanAtrey 發布

擷取 Wellfound(原 AngelList Talent)新創職缺,依最新優先回傳薪資、股權、公司階段與募資等結構化資料。

Streamable HTTP可網頁執行驗證方式
網頁搜尋與抓取需要憑證Nov 13, 2026

Welcome to the Jungle Jobs Scraper & API - Otta, WTTJ, Salary

由 GitHub 帳號 AnshumanAtrey 發布

託管在 Apify 上的 MCP 伺服器,讓助理依職稱、地點、合約類型、遠端政策與薪資搜尋 Welcome to the Jungle(原 Otta)的即時職缺。

Streamable HTTP可網頁執行驗證方式
網頁搜尋與抓取需要憑證Nov 13, 2026

Naukri Jobs Scraper & API - Salary, Experience, Last 24 Hours

由 GitHub 帳號 AnshumanAtrey 發布

一個託管在 Apify 上的 MCP 伺服器,讓助理依職稱、城市、經驗、薪資與張貼時間即時搜尋 Naukri 職缺,並回傳結構化職缺資料。

Streamable HTTP可網頁執行驗證方式
網頁搜尋與抓取需要憑證Nov 12, 2026