EvalGate

io.github.evalgate由 GitHub 账号 evalgate 发布v1.0.0更新于 Oct 26, 2026

Create and run AI evaluations, record traces, and inspect results with scoped organization access.

发布方自己的服务：EvalGate

已验证Streamable HTTP可网页运行数据与分析 AI 与机器学习

服务详情

标识符: io.github.evalgate/evalgate
传输: Streamable HTTP
运行时: Web executable
信任: Verified
发布于: Oct 18, 2026

安全提示

MCP 服务会接收对话中的工具调用请求，并可能执行外部操作。启用前请先了解该服务能做什么，并只授予它所需的权限。

注册中心已验证此条目所属的 GitHub 账号 evalgate。这并不表明该账号就是产品方。

SourceWeft 的检查只涵盖条目是否完整、端点是否响应；不审查服务器的代码，也不审查其工具的行为。

在 README 中添加徽章

向读者展示该 MCP 服务已收录于 SourceWeft，徽章链接到本页。

[![Listed on SourceWeft](https://sourceweft.com/badge/mcp/io.github.evalgate%2Fevalgate.svg)](https://sourceweft.com/mcp/io.github.evalgate%2Fevalgate?utm_source=readme&utm_medium=badge)

概览

AI 生成的概览

EvalGate 远程 MCP 服务器，让助手查看组织的 AI 评测、运行记录、基线与连接器健康状态。

可以做什么: 查看已认证组织中的项目、评测与项目密钥，并获取连接仓库、评测或追踪来源的非变更式下一步计划。
以稳定游标列出评测与评测运行，并附带回归信号。
依据状态、失败用例元数据与证据血缘解释某次运行，并展示已发布基线锚点及其血缘。
搜索已发布的 OpenAPI 操作目录以获取帮助。
查看连接器就绪报告、工作区连接元数据、连接器定义与已安装设置路径、已配置的账户根，以及带可见资源版本的连接引用。
适用场景: 当你使用 EvalGate 做评测，希望助手在对话中汇总运行结果、排查失败与回归、核对基线，或查看连接器与连接配置时适用。
运行要求: 远程 streamable HTTP 端点（evalgate.com），无需本地安装包。需要 EvalGate 组织 API 密钥，通过 Authorization 请求头以 bearer 方式发送。

安装前请注意

该 API 密钥是组织凭据，经 Authorization 请求头发送，应限制权限范围并避免写入共享日志。工具被描述为只读且不修改数据，但会把项目密钥、连接详情、账户根等组织元数据暴露给助手及其模型提供方。

安装

在 SourceWeft 中

打开控制台中的 EvalGate，将其添加到工作区。
连接 Authorization token 凭据。它们会被私密存储，绝不会在公开页面上展示。
为需要使用其工具的对话启用该服务。

Web executable，通过 Streamable HTTP。远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体，或 SourceWeft 对话中。智能体会读取该服务器的安装指南，先向你展示发布者、端点和登录方式，经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/io.github.evalgate%2Fevalgate/install.md，并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前，先告诉我它的发布者、端点和登录方式，等我确认。不要把 API 密钥写进命令或我会提交的文件；问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "evalgate": {
      "type": "http",
      "url": "https://www.evalgate.com/api/mcp",
      "headers": {
        "Authorization": "Bearer <YOUR_TOKEN>"
      }
    }
  }
}

工具

project.inspect

Inspect the evaluations and project keys available in the authenticated organization.

输入参数projectKey

project.plan

Return a non-mutating next-step plan for connecting a repository, evaluation, or trace source.

输入参数target

evaluations.list

List evaluations with a stable cursor for the organization.

输入参数limitcursorstatus

runs.list

List evaluation runs with stable cursors and regression signals.

输入参数limitcursorstatusevaluationId必填

run.explain

Explain a run using its status, failed-case metadata, and evidence-lineage summary.

输入参数runId必填

baseline.lineage

Show the published baseline anchor and its evidence lineage.

输入参数evaluationId必填

docs.search

Search the published OpenAPI operation catalog for relevant help.

输入参数limitquery必填

connector.health

Show the latest connector-readiness reports for the organization.

输入参数connectorKey

connections.list

List current workspace connection metadata, with source restrictions, freshness and bounded continuation. Does not reveal secrets or grant source access.

输入参数qlimitcursorsource