Web Scraper

io.github.DataLeadsPRO由 GitHub 帳號 DataLeadsPRO 發布v1.0.1更新於 Oct 24, 2026

Fetch, crawl, and browse protected pages with anti-bot handling - renders in a real browser and

已驗證Streamable HTTP可網頁執行網頁搜尋與抓取瀏覽器自動化

概覽

AI 產生的概覽

遠端網頁擷取服務，讓助理抓取、爬取與瀏覽具反爬蟲保護的頁面並處理驗證碼，回傳乾淨的 JSON 或 markdown。

可以做什麼
  • 擷取單一頁面並回傳乾淨的 JSON 或 markdown
  • 依網站爬取多個頁面
  • 在真實瀏覽器中渲染並瀏覽具反爬蟲處理的頁面
  • 處理受保護頁面上的驗證碼
適用情境
適合需要從會阻擋一般請求的網站（例如房源或列表頁）取得內容，又不想自行維護代理與擷取基礎設施的情境。
執行需求
遠端 Streamable HTTP 端點；需要 DataLeads 用戶端金鑰（clientKey），免費方案為每月 500 次請求。Docker 的 stdio 方式需要 DATALEADS_API_KEY。需要能連線至服務商的網路。
安裝前請注意
clientKey 是付費服務的憑證，用量依方案計費，大量爬取會消耗額度或產生費用。請求會經過第三方服務，該服務可看到你提交的網址；驗證碼破解與反爬蟲繞過可能與目標網站條款衝突。

安裝

在 SourceWeft 中

  1. 開啟 儀表板中的 Web Scraper，將其新增到工作區。
  2. 為需要使用其工具的對話啟用該服務。

Web executable，透過 Streamable HTTP。 遠端服務在工作區中設定後即可從網頁執行環境執行。

交給代理程式安裝

把這段提示詞貼上到 Claude Code、Codex、Cursor 等代理程式，或 SourceWeft 對話中。代理程式會讀取該伺服器的安裝指南，先向你展示發布者、端點和登入方式，經你同意後再把它新增到你的客戶端。金鑰不會寫進任何命令。

閱讀 https://sourceweft.com/mcp/io.github.DataLeadsPRO%2Fweb-scraper/install.md，並按其中說明把這個 MCP 伺服器接入我的客戶端。修改任何設定之前，先告訴我它的發布者、端點和登入方式，等我確認。不要把 API 金鑰寫進命令或我會提交的檔案；問我金鑰應從哪裡取得。

檢視代理程式所依據的安裝指南

其他 MCP 客戶端

把它新增到你客戶端的 mcpServers 設定中。

{
  "mcpServers": {
    "web-scraper": {
      "type": "http",
      "url": "https://data.dataleads.pro/mcp/web-scraper"
    }
  }
}

README

Web Scraper API (Anti-Bot)

Fetch, crawl, and browse protected pages with anti-bot handling - renders in a real browser and returns clean JSON or markdown.

Part of the DataLeads API suite (Data category). Requests render in a real browser with anti-bot handling and protected-page support built in - no proxies to manage, no infrastructure to run.

Endpoints

MethodPathDescription
POST/fetchV1 Fetch
POST/web/crawlV1 Web Crawl
POST/browseV1 Browse
POST/captcha/solveV1 Captcha Solve

Quick start

bash
curl -X POST https://data.dataleads.pro/v1/fetch \  -H 'Content-Type: application/json' \  -d '{"clientKey": "YOUR_CLIENT_KEY", "url": "https://www.zillow.com/homes/Austin,-TX_rb/"}'

Replace YOUR_CLIENT_KEY with your key. Get one at https://data.dataleads.pro - free tier included.

MCP server

  • Remote (Streamable HTTP): https://data.dataleads.pro/mcp/web-scraper
  • Stdio (Docker): docker run -e DATALEADS_API_KEY=yourkey ghcr.io/dataleads/web-scraper-mcp:latest

Pricing

TierPriceRequests
Free$0500/mo
Starter$9/mo5,000
Pro$29/mo25,000
Business$99/mo100,000
Enterprisecustomcustom

Full plan details at https://data.dataleads.pro.

License

MIT - see LICENSE.

來源：README.md，提交 43f34fe

工具

4

fetch

V1 Fetch

輸入參數urlmaxTimeout

web_crawl

V1 Web Crawl

輸入參數urlmax_pagesmaxTimeout

browse

V1 Browse

輸入參數urlwaitMsactionsfullPage

captcha_solve

V1 Captcha Solve

輸入參數urlsiteKeycaptchaType

版本歷史

1
  1. v1.0.1最新Sep 17, 2026

評分

已滿足適用檢查項的 90%

該評分衡量此收錄條目的完整程度，依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價，也不表示伺服器安全或目前可用：可連通性是帶日期的檢查結果，評分也不包含安裝量或使用者評價。

  • 近 30 天內可連通必需25 分
  • 已宣告認證方式必需10 分
  • 已列出工具必需15 分
  • 描述必需15 分
  • 圖示10 分
  • 文件15 分
  • 授權條款10 分

    請在儲存庫或註冊中心條目中宣告授權條款。