GoldenPipe

io.github.benseverndev-oss由 GitHub 账号 benseverndev-oss 发布v1.5.0更新于 Oct 24, 2026

One command to validate, transform, and deduplicate — chain GoldenCheck + Flow + Match.

已验证Streamable HTTP可网页运行数据库数据与分析

概览

AI 生成的概览

GoldenPipe 编排数据质量流水线——剖析、修复并去重记录——并以 MCP 服务器形式提供,可远程托管或本地运行。

可以做什么
  • 列出流水线各阶段并解释其配置
  • 校验流水线配置的接线是否正确
  • 对数据集运行完整的检查-转换-匹配流水线,返回质量问题、修复内容、去重后的记录簇以及每项决策的理由
  • 在未发现质量问题时跳过转换,或在检测到敏感字段时改用隐私保护匹配
适用场景
适合需要清洗、标准化并去重表格记录(如客户或联系人名单)的场景,并希望了解每项流水线决策的原因,而无需手动串联 Golden Suite 的三个工具。
运行要求
可使用托管的远程端点,或在本地安装带 mcp 扩展的 goldenpipe Python 包并用 mcp-serve 命令启动(uvx/pip)。未声明任何认证、环境变量或请求头。
安装前请注意
流水线会读取数据集,并可写出黄金记录等输出文件;请确认数据处理位置,因为托管端点会把数据发送到第三方服务器。README 说明仓库已迁移并归档,托管端点可能发生变化。

安装

在 SourceWeft 中

  1. 打开 控制台中的 GoldenPipe,将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Web executable,通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体,或 SourceWeft 对话中。智能体会读取该服务器的安装指南,先向你展示发布者、端点和登录方式,经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/io.github.benseverndev-oss%2Fgoldenpipe/install.md,并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前,先告诉我它的发布者、端点和登录方式,等我确认。不要把 API 密钥写进命令或我会提交的文件;问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "goldenpipe": {
      "type": "http",
      "url": "https://goldenpipe-mcp-production.up.railway.app/mcp/"
    }
  }
}

README

Moved. This repo has moved into the benzsevern/goldenmatch monorepo at packages/python/goldenpipe/. This repo is archived; new development happens in the monorepo.

GoldenPipe

Golden Suite orchestrator -- Check quality, fix issues, deduplicate records. One command. Built by Ben Severn.

[PyPI] [CI] [codecov] [Downloads] [Python 3.11+] [License: MIT] [Docs] [DQBench Pipeline] [Open In Colab]

What It Does

Raw Data  | GoldenCheck   -- profile & discover quality issues  | GoldenFlow    -- fix issues, standardize, reshape  | GoldenMatch   -- deduplicate, match, create golden records  vGolden Records

GoldenPipe orchestrates the full pipeline with adaptive logic:

  • Skips transformation if no quality issues found
  • Routes to privacy-preserving matching if sensitive fields detected
  • Reports reasoning for every decision

Install

bash
pip install goldenpipe

Quick Start

python
import goldenpipe as gp
result = gp.run("customers.csv")
print(result.status)        # "success"print(result.check)         # Quality findingsprint(result.transform)     # What was fixedprint(result.match)         # Deduplicated clustersprint(result.reasoning)     # Why each decision was made

CLI

bash
goldenpipe run customers.csv                # Full pipelinegoldenpipe run customers.csv --verbose      # Show reasoninggoldenpipe run customers.csv --skip-flow    # Check + Match onlygoldenpipe run customers.csv --strategy pprl  # Force privacy modegoldenpipe run customers.csv -o golden.csv  # Save golden records

Remote MCP Server

GoldenPipe is available as a hosted MCP server on Smithery — connect from any MCP client without installing anything.

Claude Desktop / Claude Code:

json
{  "mcpServers": {    "goldenpipe": {      "url": "https://goldenpipe-mcp-production.up.railway.app/mcp/"    }  }}

Local server:

bash
pip install goldenpipe[mcp]goldenpipe mcp-serve

4 tools available: list pipeline stages, validate wiring, run full check-transform-match pipeline, explain configs.

Part of the Golden Suite

ToolPurposeInstall
GoldenCheckValidate & profile data qualitypip install goldencheck
GoldenFlowTransform & standardize datapip install goldenflow
GoldenMatchDeduplicate & match recordspip install goldenmatch
GoldenPipeOrchestrate the full pipelinepip install goldenpipe

Author

Ben Severn

License

MIT

来源:README.md,提交 f9d2a6d

工具

0
SourceWeft 尚未读取此服务器的工具。

版本历史

1
  1. v1.5.0最新Sep 16, 2026

评分

已满足适用检查项的 85%

该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。

  • 近 30 天内可连通必需25 分
  • 已声明认证方式必需10 分
  • 已列出工具必需15 分

    请让服务器在无凭据时响应 tools/list,或发布可在沙箱中无凭据启动的软件包。

  • 描述必需15 分
  • 图标10 分
  • 文档15 分
  • 许可证10 分