这个工具能够控制你的电脑,支持openclaw安装哦

TuriX-CUA 是一款能够像人类一样直接操作计算机桌面的开源计算机使用代理（CUA），通过视觉感知与自然语言规划，实现无 API 依赖的跨应用自动化。

项目简介

在自动化领域，传统的 RPA（机器人流程自动化）往往受限于脆弱的 UI 路径选择器，而 API 自动化则受限于目标应用是否开放接口。TurixAI/TuriX-CUA 提供了一种全新的范式：计算机使用代理 (Computer-use Agent)。

TuriX 允许 AI 模型直接“观察”屏幕截图，并像人类用户一样操作鼠标和键盘。它在内部 OSWorld 风格的测试集中表现优异（通过率超过 68%），且完全开源、对个人及研究用途免费。该项目不仅支持多模型架构（如 Qwen3-VL、Claude、Ollama 等），还引入了“技能（Skills）”系统，使 AI 能够处理复杂的跨应用逻辑。

核心功能

TuriX-CUA 的设计核心在于将视觉推理与动作执行深度耦合，其核心特性包括：

• 原生视觉感知
  基于先进的视觉语言模型（如 Qwen3-VL），无需 UI 元素标签或 API 接入，直接通过屏幕图像识别交互组件。
• 多模型架构支持
  支持通过 config.json 灵活切换底层大模型。兼容 OpenAI、Claude (通过 MCP)、Ollama 以及本地部署的模型。
• 任务规划与重规划 (Replanning)
  具备先进的任务规划能力。当 UI 发生变化或执行遇到阻碍时，代理能够自动调整策略，而不是简单报错。
• 技能（Skills）系统
  支持 Markdown 格式的技能剧本，允许开发者为特定领域（如 GitHub 操作、浏览器搜索）定义可重用的操作指南。
• 跨平台兼容性
  全面支持 macOS 15+（特别是 Apple Silicon 架构）和 Windows 10/11。
• 内存压缩技术
  内置可恢复的内存压缩机制，确保在执行长序列自动化任务时依然能保持上下文的连贯性。

快速开始

TuriX-CUA 建议在 Python 3.12 环境下运行，并需要赋予终端相应的系统权限。

1. 克隆仓库与环境准备

# 克隆项目git clone https://github.com/TurixAI/TuriX-CUA.gitcd TuriX-CUA# 创建并激活 Python 3.12 环境 (推荐使用 conda)conda create -n turix_env python=3.12conda activate turix_env# 安装依赖pip install -r requirements.txt

2. 系统权限配置

• macOS
  需在 系统设置 -> 隐私与安全性 -> 辅助功能中添加你的终端（如 Terminal 或 iTerm2）和 Python 解释器。
• Windows
  建议切换至 multi-agent-windows 分支以获取最佳兼容性支持。

3. 配置与运行

修改根目录下的 config.json填入你的模型 API Key 或配置本地模型地址。

# 运行 TuriX 代理python main.py

应用场景

作为一名资深工程师，你可以将 TuriX-CUA 部署于以下场景：

• 全自动市场调研
  让 AI 自动打开浏览器搜索竞品信息，并将数据提取到本地 Excel 表格或 Google Sheets 中。
• 无 API 系统的自动化
  针对那些没有开放 API 的陈旧桌面软件（Legacy Systems），通过 UI 操作实现数据录入与提取。
• UI/UX 自动化测试
  通过自然语言描述测试用例，让 AI 自动执行点击、输入并验证界面反馈。
• 复杂工作流串联
  例如“从邮件中下载发票 -> 识别内容 -> 打开财务软件 -> 填入报销信息”。

https://clawhub.ai/Tongyu-Yan/turix-cua

最后

TuriX-CUA 代表了 AI Agent 从“对话框”向“操作系统”迈进的关键一步。它不只是一个自动化脚本，而是一个具备感知和决策能力的数字员工。对于希望在现有桌面环境中引入 AI 生产力的开发者来说，TuriX 提供了一个高性能且低成本的开源起点。

• GitHub 项目地址
  https://github.com/TurixAI/TuriX-CUA

看开心了，点一下，关注一下微信公众号:开源github甄选