EvalGate

com.evalgate由 evalgate.com 发布官方发布者v1.0.0更新于 Nov 5, 2026

Run AI evaluations, record agent traces and gate releases on evidence, with scoped org access.

已验证Streamable HTTP可网页运行开发者工具AI 与机器学习

概览

AI 生成的概览

EvalGate 是一个远程 MCP 服务器,让助手在已认证的组织内查看 AI 评测项目、运行记录、基线与连接器健康状态。

可以做什么
  • 查看组织内的评测、项目密钥与连接器定义,包括已安装的配置路径与账户根。
  • 列出评测与评测运行,支持稳定游标与回归信号。
  • 依据状态、失败用例元数据与证据血缘解释某次运行,并展示已发布的基线锚点。
  • 查看连接器就绪报告,以及工作区连接元数据、引用与当前可见的资源版本。
  • 检索已发布的 OpenAPI 操作目录获取帮助,并获得连接仓库、评测或追踪来源的非变更式下一步计划。
适用场景
适合需要读取并解释 AI 评测结果、回归与基线,或检查连接器与追踪来源是否就绪而不做任何改动的场景。适用于已使用 EvalGate 进行评测与发布门禁的团队。
运行要求
需要 EvalGate 站点上的远程 streamable HTTP 端点;未声明任何软件包、环境变量或请求头。访问按已认证组织进行范围过滤,因此需要具备相应权限范围的 EvalGate 账户。
安装前请注意
服务器说明工具按范围过滤,evaluations_create、test_cases_add、runs_start、traces_create 等写入工具需要匹配的写入范围,并经过与 REST API 相同的配额、锁与审计检查;审批与基线接受是独立操作。所列工具以读取为主,但连接元数据与血缘信息会暴露给助手。

安装

在 SourceWeft 中

  1. 打开 控制台中的 EvalGate,将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Web executable,通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体,或 SourceWeft 对话中。智能体会读取该服务器的安装指南,先向你展示发布者、端点和登录方式,经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/com.evalgate%2Fevalgate/install.md,并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前,先告诉我它的发布者、端点和登录方式,等我确认。不要把 API 密钥写进命令或我会提交的文件;问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。

{
  "mcpServers": {
    "evalgate": {
      "type": "http",
      "url": "https://www.evalgate.com/api/mcp"
    }
  }
}

工具

12

project_inspect

Inspect the evaluations and project keys available in the authenticated organization.

输入参数projectKey

project_plan

Return a non-mutating next-step plan for connecting a repository, evaluation, or trace source.

输入参数target

evaluations_list

List evaluations with a stable cursor for the organization.

输入参数limitcursorstatus

runs_list

List evaluation runs with stable cursors and regression signals.

输入参数limitcursorstatusevaluationId必填

run_explain

Explain a run using its status, failed-case metadata, and evidence-lineage summary.

输入参数runId必填

baseline_lineage

Show the published baseline anchor and its evidence lineage.

输入参数evaluationId必填

connector_health

Show the latest connector-readiness reports for the organization.

输入参数connectorKey

connections_list

List current workspace connection metadata, with source restrictions, freshness and bounded continuation. Does not reveal secrets or grant source access.

输入参数qlimitcursorsource

connections_catalog

Inspect all connector definitions and exact installed setup paths. Unavailable blueprints and live verification are separate facts.

无需输入参数。

connections_roots

Page independent configured account roots using current administrator authority. Does not list secrets or imply verified connector availability.

输入参数qlimitcursor

connections_graph

Read canonical connection references and currently visible exact resource revisions. No source access grant or execution.

输入参数id必填

版本历史

1
  1. v1.0.0最新Nov 5, 2026

评分

已满足适用检查项的 83%

该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。

  • 近 30 天内可连通必需25 分
  • 已声明认证方式必需10 分
  • 已列出工具必需15 分
  • 描述必需15 分
  • 图标10 分
  • 文档15 分

    请声明包含 README 的 GitHub 仓库,或在 OAuth 受保护资源元数据中提供 resource_documentation。

  • 许可证不适用

    托管服务按其提供方的条款使用,因此这里不要求许可证。此检查项不计入百分比。

其他 Evalgate 集成