Qc Validator

io.github.mdfifty50-boop由 GitHub 账号 mdfifty50-boop 发布v0.1.3更新于 Oct 24, 2026

Output quality control and validation for AI agents

已验证STDIO仅桌面AI 与机器学习

概览

AI 生成的概览

针对 AI 代理输出做质量检查的本地 MCP 服务器,可评分、检测幻觉风险并检查范围合规。

可以做什么
按可配置条件(长度上限、必需关键词、禁用模式、事实主张密度)为代理输出评分并列出问题与建议。评估幻觉风险:有来源文本时逐句比对依据,没有来源时标出数字、日期与网址密集的输出。按范围契约检查输出是否符合允许与禁止主题、字数上限与必需章节。记录每次验证结果,并按代理分析通过率、平均分数、常见问题与趋势。生成跨所有代理的质量总览报告,并提供仪表板资源。
适用场景
当你希望对代理产出的内容加一层自动检查,例如限制长度、要求关键词、排除禁用词、检查是否有来源依据,或统计各代理的通过率与常见问题时使用。
运行要求
需在本机以 Node.js 运行,通过 npx 启动 npm 包 qc-validator-mcp,并以 stdio 连接;无需额外配置、账号或 API 密钥。仅支持桌面环境。
安装前请注意
验证结果与统计保存在内存中,重启即丢失,不适合作为长期审计记录。工具会接收代理输出与可能的来源文本,请确认内容不含不应外泄的机密数据。

安装

在 SourceWeft 中

  1. 打开 控制台中的 Qc Validator,将其添加到工作区。
  2. 为需要使用其工具的对话启用该服务。

Desktop only,通过 STDIO。 STDIO 服务会启动本地进程,因此需要 SourceWeft 桌面宿主。

其他 MCP 客户端

参照 仓库 中的启动说明。

README

qc-validator-mcp

Runtime quality validation for AI agent outputs. Detect hallucinations, enforce scope compliance, and score output quality — all via MCP.

Install

bash
npx qc-validator-mcp

Claude Desktop

json
{  "mcpServers": {    "qc-validator": {      "command": "npx",      "args": ["qc-validator-mcp"]    }  }}

Tools

validate_output

Score agent output against configurable criteria: length limits, required keywords, forbidden patterns, and factual claim density.

Params: output, task_description, criteria { max_length, required_keywords[], forbidden_patterns[], factual_claims_count }Returns: { pass, score, issues[], recommendation }

check_hallucination_risk

Estimate hallucination likelihood. With source text, checks sentence-level grounding. Without source, flags outputs dense with specific numbers, dates, and URLs.

Params: output, source_text (optional), claim_count (default 5)Returns: { risk_level, unsupported_claims[], confidence, suggestion }

check_scope_compliance

Validate output against a scope contract — allowed/forbidden topics, word limits, required sections.

Params: output, scope { allowed_topics[], forbidden_topics[], max_words, required_sections[] }Returns: { compliant, violations[], scope_utilization_percent }

log_validation

Store validation results for per-agent trending.

Params: agent_id, output_hash, score, pass, issues_countReturns: { logged, agent_id, total_validations }

get_failure_patterns

Analyze common failure modes for a specific agent.

Params: agent_idReturns: { total_validations, pass_rate, avg_score, most_common_issues[], trend }

generate_quality_report

Quality dashboard across all validated agents — no parameters required.

Returns: { total_agents, overall_pass_rate, agents[], worst_performers[], best_performers[], recommendations[] }

Resource

  • qc://dashboard — Quality metrics for all validated agents

Architecture

  • Pure Node.js ES modules
  • In-memory Maps (no external dependencies)
  • stdio transport via @modelcontextprotocol/sdk
  • Zero configuration required

License

MIT

来源:README.md,提交 fac0ca0

工具

0
SourceWeft 尚未在沙箱中启动过该软件包,因此其工具未知。

版本历史

1
  1. v0.1.3最新Sep 16, 2026

评分

已满足适用检查项的 40%

该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。

  • 近 30 天内可连通25 分

    请保持端点能够响应 MCP 握手;SourceWeft 每 30 天探测一次。

  • 已声明认证方式10 分

    请在注册中心条目中声明凭据请求头,或保持端点能够响应探测,以便判定其认证方式。

  • 已列出工具15 分

    请让服务器在无凭据时响应 tools/list,或发布可在沙箱中无凭据启动的软件包。

  • 描述必需15 分
  • 图标10 分
  • 文档15 分
  • 许可证10 分

    请在仓库或注册中心条目中声明许可证。