
Evalgate
io.github.ipezygj由 GitHub 账号 ipezygj 发布v0.4.1更新于 Oct 24, 2026
Statistical checks an agent runs before trusting an AI eval number (is #1 real, judge bias, more).
发布方自己的服务:EvalGate
概览
一个本地 MCP 服务器,在助手采信 AI 评测分数之前对其做统计检验。
- 可以做什么
- 对 AI 评测数字运行统计检验,例如排名第一的结果是否真实、评审模型是否存在偏差,然后再让助手依赖该分数。它是本地、仅限桌面运行的进程,清单中未列出任何工具,因此具体操作在此无从得知。它的用途是为评测比较增加审慎核查,而不是运行或托管评测本身。
- 适用场景
- 当助手需要解读或比较 AI 基准与评测分数,并希望对所报告的排名或提升是否具有意义做统计合理性检查时使用。它适合分析评测结果,而非执行评测本身。
- 运行要求
- 作为本地进程在用户机器上运行,通过 stdio 从 PyPI 包 eval-integrity 安装。仅限桌面,不支持网页执行。未声明认证、环境变量或请求头。
安装
在 SourceWeft 中
- 打开 控制台中的 Evalgate,将其添加到工作区。
- 为需要使用其工具的对话启用该服务。
Desktop only,通过 STDIO。 STDIO 服务会启动本地进程,因此需要 SourceWeft 桌面宿主。
其他 MCP 客户端
参照 仓库 中的启动说明。
README
该仓库没有 README。
工具
0版本历史
1- v0.4.1最新Sep 16, 2026
评分
已满足适用检查项的 25%
该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。
- 近 30 天内可连通25 分
请保持端点能够响应 MCP 握手;SourceWeft 每 30 天探测一次。
- 已声明认证方式10 分
请在注册中心条目中声明凭据请求头,或保持端点能够响应探测,以便判定其认证方式。
- 已列出工具15 分
请让服务器在无凭据时响应 tools/list,或发布可在沙箱中无凭据启动的软件包。
- 描述必需15 分
- 图标10 分
- 文档15 分
请声明包含 README 的 GitHub 仓库,或在 OAuth 受保护资源元数据中提供 resource_documentation。
- 许可证10 分
请在仓库或注册中心条目中声明许可证。
其他 Evalgate 集成
EvalGate
com.evalgate官方发布者
EvalGate 是一个远程 MCP 服务器,让助手在已认证的组织内查看 AI 评测项目、运行记录、基线与连接器健康状态。
EvalGate Docs
com.evalgate官方发布者
只读的远程 MCP 服务器,让助手列出、搜索并阅读 EvalGate 已发布的文档页面。

EvalGate
由 GitHub 账号 evalgate 发布
EvalGate 远程 MCP 服务器,让助手查看组织的 AI 评测、运行记录、基线与连接器健康状态。