mac_computer_use

人类计算机使用（用于MAC）

拟人化计算机的使用是一种β人类功能，它可以使用Ubuntu运行Docker Image并控制它。该叉子使您可以在MACOS上本地运行它，从而通过本机MacOS命令和实用程序提供直接的系统控制。

警告

这有明显的风险。人类代理可以控制Mac上的所有内容。请小心。 Anthropic的新Claude 3.5 SONNET模型拒绝做不安全的事情，例如购买物品或下载非法内容。

特征

• 本机MacOS GUI互动（无需Docker）
• 使用本机MacOS命令屏幕捕获
• 键盘和鼠标通过Cliclick控制
• 多个LLM提供商支持（拟人，基岩，顶点）
• 基于简化的接口
• 自动屏幕分辨率缩放
• 文件系统互动和编辑功能

先决条件

• Macos Sonoma 15.7或以后
• Python 3.12+
• Homebrew（用于安装其他依赖项）
• Cliclick（ brew install cliclick ） - 鼠标和键盘控制所需

设置说明

1. 克隆存储库并导航到它：

git clone https://github.com/deedy/mac_computer_use.git
cd mac_computer_use

2. 创建并激活虚拟环境：

python3.12 -m venv venv
source venv/bin/activate

3. 运行设置脚本：

chmod +x setup.sh
./setup.sh

4. 安装Python要求：

pip install -r requirements.txt

运行演示

设置您的环境和人类API密钥

1. 在.env文件中添加：

 API_PROVIDER=anthropic
ANTHROPIC_API_KEY=<key>
WIDTH=800
HEIGHT=600
DISPLAY_NUM=1

设置屏幕尺寸（建议：保持XGA/WXGA分辨率），然后从拟人控制台中放入钥匙。

2. 启动简化应用程序：

streamlit run streamlit.py

该界面将在http：// localhost：8501中找到

屏幕尺寸注意事项

我们建议使用其中一种解决方案以进行最佳性能：

• XGA：1024x768（4：3）
• WXGA：1280x800（16:10）
• FWXGA：1366x768（〜16：9）

更高的分辨率将自动扩展到这些目标，以优化模型性能。您可以使用环境变量设置分辨率：

 export WIDTH=1024
export HEIGHT=768
streamlit run streamlit.py

重要的

此参考实现中使用的Beta API可能会发生变化。有关最新信息，请参阅API发行说明。