Computer Use

io.github.domdomegg由 GitHub 帳號 domdomegg 發布v1.8.0更新於 Oct 24, 2026

Control your computer with screenshots, mouse, and keyboard automation.

概覽

AI 產生的概覽

一個本機 MCP 伺服器,讓 AI 助理透過螢幕截圖、滑鼠與鍵盤自動化來控制你的桌面。

可以做什麼
擷取螢幕截圖,查看目前桌面狀態與畫面上的視窗。移動滑鼠、點擊,並輸入文字或送出鍵盤快速鍵來操作應用程式。採用類似 computer use 的工作流程,並傾向使用鍵盤快速鍵而非依座標點擊。可與 Claude Code、Claude Desktop、Cursor、Cline、VS Code 等常見 MCP 用戶端搭配使用。
適用情境
當你希望助理在你自己的機器上操作桌面應用程式時使用,例如變更設定或完成只能透過圖形介面完成的任務。適合有人監督或在沙箱環境中使用,不適合無人看管執行。
執行需求
以本機程序在使用者機器上執行,可透過 npx 從 npm 套件安裝,或使用 mcpb 套件。僅支援桌面端,沒有網頁版。未宣告驗證、環境變數或標頭。建議使用擅長 computer use 的模型,並採用 720p 這類常見的小解析度以獲得更好效果。
安裝前請注意
此伺服器讓模型完全控制你的電腦,因此失誤或提示注入可能造成實際損害。README 建議密切監督,並考慮在沙箱使用者帳戶中執行。點擊與按鍵等操作會變更機器上的資料與設定。

安裝

在 SourceWeft 中

  1. 開啟 儀表板中的 Computer Use,將其新增到工作區。
  2. 為需要使用其工具的對話啟用該服務。

Desktop only,透過 STDIO。 STDIO 服務會啟動本機處理程序,因此需要 SourceWeft 桌面主機。

其他 MCP 客戶端

參照 儲存庫 中的啟動說明。

README

computer-use-mcp

💻 A Model Context Protocol server for Claude to control your computer. This is very similar to computer use, but easy to set up and use locally.

Here's Claude Haiku 4.5 changing my desktop background (4x speed):

https://github.com/user-attachments/assets/cd0bc190-52c4-49db-b3bc-4b8a74544789

[!WARNING] At time of writing, models make frequent mistakes and are vulnerable to prompt injections. As this MCP server gives the model complete control of your computer, this could do a lot of damage. You should therefore treat this like giving a hyperactive toddler access to your computer - you probably want to supervise it closely, and consider only doing this in a sandboxed user account.

Installation

Follow the instructions on install-mcp, which generates the right config for your MCP client (Claude Code, Claude Desktop, Cursor, Cline, VS Code, and more).

Tips

This should just work out of the box.

However, to get best results:

  • Use a model good at computer use - I recommend the latest Claude models.
  • Use a small, common resolution - 720p works particularly well. On macOS, you can use displayoverride-mac to do this. If you can't use a different resolution, try zooming in to active windows.
  • Install and enable the Rango browser extension. This enables keyboard navigation for websites, which is far more reliable than Claude trying to click coordinates. You can bump up the font size setting in Rango to make the hints more visible.

How it works

We implement a near identical computer use tool to Anthropic's official computer use guide, with some more nudging to prefer keyboard shortcuts.

This talks to your computer using nut.js

Contributing

Pull requests are welcomed on GitHub! To get started:

  1. Install Git and Node.js
  2. Clone the repository
  3. Install dependencies with npm install
  4. Run npm run test to run tests
  5. Build with npm run build

Releases

Versions follow the semantic versioning spec.

To release:

  1. Use npm version <major | minor | patch> to bump the version
  2. Run git push --follow-tags to push with tags
  3. Wait for GitHub Actions to publish to the NPM registry.

來源:README.md,提交 0c9d517

工具

0
SourceWeft 尚未在沙箱中啟動過該軟體包,因此其工具未知。

版本歷史

1
  1. v1.8.0最新Sep 16, 2026

評分

已滿足適用檢查項的 50%

該評分衡量此收錄條目的完整程度,依據註冊中心條目、端點與公開來源計算得出。它不是對伺服器本身的評價,也不表示伺服器安全或目前可用:可連通性是帶日期的檢查結果,評分也不包含安裝量或使用者評價。

  • 近 30 天內可連通25 分

    請保持端點能夠回應 MCP 握手;SourceWeft 每 30 天探測一次。

  • 已宣告認證方式10 分

    請在註冊中心條目中宣告憑證請求標頭,或保持端點能夠回應探測,以便判定其認證方式。

  • 已列出工具15 分

    請讓伺服器在無憑證時回應 tools/list,或發布可在沙箱中無憑證啟動的軟體包。

  • 描述必需15 分
  • 圖示10 分
  • 文件15 分
  • 授權條款10 分