Assessment Intelligence

ai.saifs由 saifs.ai 发布官方发布者v1.0.1更新于 Oct 30, 2026

Analyse tests for item quality, true ability, reliability and learner mastery.

发布方自己的服务:Customer Intelligence & Segmentation

已验证Streamable HTTP可网页运行数据与分析AI 与机器学习

概览

AI 生成的概览

远程 MCP 服务器,对测评作答数据做心理测量分析,让助手获得题目 IRT 参数、能力估计、信度与掌握度追踪。

可以做什么
  • 分析题目与测验:逐题 IRT 难度、区分度与猜测参数,标记问题题目,并解释题目好坏的原因
  • 估计每位学生的真实能力(θ),与测验难度分离,并给出 Cronbach's alpha 与题目-总分相关
  • 从题库中为计算机自适应测验挑选下一道最优题目
  • 用贝叶斯知识追踪评估技能掌握度,并标记轨迹预示失败的学员
适用场景
当你已有测验或答题数据,希望助手评估题目质量、把学生能力与测验难度分开、检查信度、选择自适应下一题,或依据学习历史追踪掌握度时适用。
运行要求
远程 Streamable HTTP 端点,无需安装。需通过 OAuth 2.1 登录(PKCE 与动态客户端注册),客户端首次使用时会打开登录页面。适用于支持 OAuth 的客户端,如 VS Code/GitHub Copilot、Claude 和 Claude Code。
安装前请注意
需要通过 OAuth 登录服务提供方。测评作答数据(含每位学员的作答与技能历史)会发送到远程提供方进行分析;用于学生数据前请确认这符合相关规定。

安装

在 SourceWeft 中

  1. 打开 控制台中的 Assessment Intelligence,将其添加到工作区。
  2. 连接 所需的 凭据。它们会被私密存储,绝不会在公开页面上展示。
  3. 为需要使用其工具的对话启用该服务。

Web executable,通过 Streamable HTTP。 远程服务在工作区中配置后即可从网页运行时运行。

交给智能体安装

把这段提示词粘贴到 Claude Code、Codex、Cursor 等智能体,或 SourceWeft 对话中。智能体会读取该服务器的安装指南,先向你展示发布者、端点和登录方式,经你同意后再把它添加到你的客户端。密钥不会写进任何命令。

阅读 https://sourceweft.com/mcp/ai.saifs%2Fassessment-intelligence/install.md,并按其中说明把这个 MCP 服务器接入我的客户端。修改任何配置之前,先告诉我它的发布者、端点和登录方式,等我确认。不要把 API 密钥写进命令或我会提交的文件;问我密钥应从哪里获取。

查看智能体所依据的安装指南

其他 MCP 客户端

把它添加到你客户端的 mcpServers 配置中。 客户端会在首次连接时完成 OAuth 登录。

{
  "mcpServers": {
    "assessment-intelligence": {
      "type": "http",
      "url": "https://assessment-intelligence-mcp.saifs.ai/mcp"
    }
  }
}

README

Assessment Intelligence

Psychometric analysis over assessment response data: Item Response Theory for item difficulty / discrimination / guessing, true ability (θ) separate from test difficulty, Cronbach’s alpha reliability, computerized adaptive next-item selection, and Bayesian Knowledge Tracing of skill mastery. Flags items that measure the wrong thing and learners whose trajectory predicts failure.

Registry nameai.saifs/assessment-intelligence
Endpointhttps://assessment-intelligence-mcp.saifs.ai/mcp
TransportStreamable HTTP (remote, nothing to install)
AuthOAuth 2.1 — PKCE (S256) and dynamic client registration; your client opens a sign-in page on first use
PublisherSAIFS AI

Install

VS Code / GitHub Copilot

Add to .vscode/mcp.json (workspace) or your user mcp.json:

json
{  "servers": {    "saifs-assessment-intelligence": {      "type": "http",      "url": "https://assessment-intelligence-mcp.saifs.ai/mcp"    }  }}

Then start the server from the MCP view and sign in when prompted.

Claude (claude.ai, Desktop)

Settings → Connectors → Add custom connector, and paste:

https://assessment-intelligence-mcp.saifs.ai/mcp

Claude Code

bash
claude mcp add --transport http saifs-assessment-intelligence https://assessment-intelligence-mcp.saifs.ai/mcp

Any other MCP client

Point it at https://assessment-intelligence-mcp.saifs.ai/mcp using the Streamable HTTP transport. The server returns 401 with a WWW-Authenticate: Bearer … resource_metadata=… challenge, so OAuth-aware clients sign in automatically.

Tools

ToolWhat it does
analyze_assessmentPer-item IRT parameters (difficulty, discrimination, guessing) and flags for bad items.
estimate_abilityEach student’s true ability (θ), separate from how hard the test was.
assessment_reliabilityCronbach’s alpha and item-total correlations.
adaptive_next_itemOptimal next question from an item bank given current ability (CAT).
track_masteryBayesian Knowledge Tracing: P(mastered) per skill over a learning history.
flag_at_risk_learnersStudents whose mastery / ability trajectory predicts failure — framed as support, not ranking.
explain_itemWhy an item is good or bad, with its fitted parameters.

Example prompts

  • “Here’s this mock’s response matrix. Which questions have negative discrimination and should be dropped?”
  • “Estimate each student’s true ability on this test, not just their raw percentage.”
  • “From this skill history, who is at risk of failing, and what has each person actually mastered?”

Support

来源:servers/assessment-intelligence/README.md,提交 f5c0037

工具

0
该服务器需要登录,因此 SourceWeft 无法在没有账号的情况下读取其工具,也未收录。已连接账号所能看到的内容可能因账号及其权限而异。

版本历史

2
  1. v1.0.1最新Oct 29, 2026
  2. v1.0.0Oct 22, 2026

评分

已满足适用检查项的 85%

该评分衡量此收录条目的完整程度,依据注册中心条目、端点与公开来源计算得出。它不是对服务器本身的评价,也不表示服务器安全或当前可用:可连通性是带日期的检查结果,评分也不包含安装量或用户评价。

  • 近 30 天内可连通必需25 分
  • 已声明认证方式必需10 分
  • 已列出工具15 分

    请让服务器在无凭据时响应 tools/list,或发布可在沙箱中无凭据启动的软件包。

  • 描述必需15 分
  • 图标10 分
  • 文档15 分
  • 许可证10 分

其他 Saifs 集成