搜尋引擎與 AI 爬蟲工具箱

dev.workers.panda198271.tw-search-seo由 tw-search-seo.panda198271.workers.dev 發布官方發布者v1.0.0更新於 Oct 24, 2026

檢查網站爬蟲設定、驗證爬蟲 IP、IndexNow 提交與 YouTube SEO 檢查。

已驗證Streamable HTTP可網頁執行網頁搜尋與抓取開發者工具

概覽

AI 產生的概覽

一個遠端工具箱,協助助理稽核網站的爬蟲與 SEO 設定、產生搜尋與中繼資料標記,並透過 IndexNow 提交網址。

可以做什麼
它提供 14 個 SEO 與爬蟲工具。助理可以為 Google、Bing、Yahoo 奇摩、百度和 YouTube 產生進階搜尋網址,對照各搜尋引擎對搜尋指令的支援情況,並依 RFC 9309 產生或測試 robots.txt。它可以檢查網站的 robots.txt、Sitemap 和 llms.txt 是否封鎖了搜尋與 AI 爬蟲,列出爬蟲 User-Agent 名單,並驗證某個 IP 是否真的來自 Googlebot、GPTBot 等爬蟲。它還能預覽搜尋結果標題與描述、產生 meta 標籤與 JSON-LD、檢查 YouTube 章節與標籤上限、透過 IndexNow 提交網址、回報搜尋引擎市佔率,並評估網頁被 AI 答案引擎引用的準備度。
適用情境
適合稽核或改善網站的搜尋能見度與 AI 爬蟲可存取性、判斷爬蟲是被正常封鎖還是被冒充,或為網頁準備收錄與答案引擎引用。也適合草擬 meta 標籤、robots.txt 規則和 YouTube 中繼資料。
執行需求
遠端 streamable HTTP 端點,不需安裝套件。未宣告驗證、環境變數或請求標頭。IndexNow 提交需要網站上已放置金鑰檔。部分工具依賴官方爬蟲 IP 清單和 StatCounter 等外部資料,因此需要網路存取。
安裝前請注意
indexnow_submit 會通知搜尋引擎網址已更新,屬於影響線上網站的外部操作;它需要網站上的金鑰檔,最多接受 100 個網址。verify_crawler_ip 依賴官方 IP 清單與反向 DNS 查詢。其他工具只產生或檢查內容,但部署前應複核產生的 robots.txt 與 meta 標籤。

安裝

在 SourceWeft 中

  1. 開啟 儀表板中的 搜尋引擎與 AI 爬蟲工具箱,將其新增到工作區。
  2. 為需要使用其工具的對話啟用該服務。

Web executable,透過 Streamable HTTP。 遠端服務在工作區中設定後即可從網頁執行環境執行。

交給代理程式安裝

把這段提示詞貼上到 Claude Code、Codex、Cursor 等代理程式,或 SourceWeft 對話中。代理程式會讀取該伺服器的安裝指南,先向你展示發布者、端點和登入方式,經你同意後再把它新增到你的客戶端。金鑰不會寫進任何命令。

閱讀 https://sourceweft.com/mcp/dev.workers.panda198271.tw-search-seo%2Fsearch-seo/install.md,並按其中說明把這個 MCP 伺服器接入我的客戶端。修改任何設定之前,先告訴我它的發布者、端點和登入方式,等我確認。不要把 API 金鑰寫進命令或我會提交的檔案;問我金鑰應從哪裡取得。

檢視代理程式所依據的安裝指南

其他 MCP 客戶端

把它新增到你客戶端的 mcpServers 設定中。

{
  "mcpServers": {
    "ai": {
      "type": "http",
      "url": "https://tw-search-seo.panda198271.workers.dev/mcp"
    }
  }
}

工具

14

build_search_urls

一次產生 Google、Bing、Yahoo 奇摩、百度、YouTube 的進階搜尋網址(關鍵字、完全符合、排除字、限定網站、檔案類型、時間)。

輸入參數q必填sitetimeexactexcludefiletype

search_operators

搜尋指令(site:、filetype:、intitle:、before: 等)在 Google、Bing、Yahoo、百度的支援對照與已失效指令。

輸入參數engine

generate_robots_txt

產生 robots.txt:allow_all、block_training(封鎖 AI 訓練保留搜尋)、block_all_ai、block_all,可加不抓路徑與 Sitemap。

輸入參數modesitemapdisallow

test_robots_txt

依 RFC 9309 測試某個 User-Agent 能否抓取某路徑。

輸入參數pathrobots必填user_agent必填

check_site_crawlers

檢查網站的 robots.txt、Sitemap、llms.txt,以及 Googlebot、bingbot、GPTBot、ClaudeBot、PerplexityBot 等是否被封鎖,附改善建議。

輸入參數url必填

ai_crawler_list

AI 與搜尋引擎爬蟲 User-Agent 名單:業者、用途、是否遵守 robots.txt、官方 IP 清單。

輸入參數type

verify_crawler_ip

驗證 IP 是否真的來自 Googlebot、bingbot、GPTBot、ClaudeBot、PerplexityBot、Applebot、Baiduspider 等(官方 IP 清單+反查 DNS)。

輸入參數ip必填bot

serp_preview

預覽 Google 搜尋結果標題與描述,估算中文像素寬度與截斷位置。

輸入參數urltitle必填description

generate_meta_tags

產生 title、description、canonical、Open Graph、Twitter 卡片與 JSON-LD。

輸入參數urltypeimagetitle必填site_namedescription

youtube_seo_check

檢查 YouTube 章節時間碼(0:00 起、至少 3 段、每段 10 秒)與標題、說明、標籤、主題標籤數量上限。

輸入參數tagstitlechaptersdurationdescription

indexnow_submit

用 IndexNow 通知 Bing、Yandex、Naver 等搜尋引擎網址已更新(需先在網站放金鑰檔,最多 100 個網址)。

輸入參數key必填host必填urls必填keyLocation

search_engine_market_share

台灣與全球搜尋引擎市佔率(Google、Bing、Yahoo、百度等,StatCounter 最新月份)。

無需輸入參數。

search_submit_guide

如何讓 Google、Bing、Yahoo、百度、YouTube、AI 搜尋收錄網站:工具、步驟與 API。

無需輸入參數。

geo_citation_audit

AEO/GEO 引用準備度健檢:檢查網頁能否被 ChatGPT、Perplexity、Google AI 摘要等答案引擎引用(爬蟲可讀、開頭直接回答、問句標題、表格、外部與權威來源、更新日期、JSON-LD citation、llms.txt、Markdown 版、Content-Digest),給分數與優先修正清單。

輸入參數url必填

版本歷史

1
  1. v1.0.0最新Sep 27, 2026

評分

已滿足適用檢查項的 83%

該評分衡量此收錄條目的完整程度,依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價,也不表示伺服器安全或目前可用:可連通性是帶日期的檢查結果,評分也不包含安裝量或使用者評價。

  • 近 30 天內可連通必需25 分
  • 已宣告認證方式必需10 分
  • 已列出工具必需15 分
  • 描述必需15 分
  • 圖示10 分
  • 文件15 分

    請宣告包含 README 的 GitHub 儲存庫,或在 OAuth 受保護資源後設資料中提供 resource_documentation。

  • 授權條款不適用

    託管服務按其提供方的條款使用,因此這裡不要求授權條款。此檢查項不計入百分比。