mac_computer_use

人類計算機使用（用於MAC）

擬人化計算機的使用是一種β人類功能，它可以使用Ubuntu運行Docker Image並控制它。該叉子使您可以在MACOS上本地運行它，從而通過本機MacOS命令和實用程序提供直接的系統控制。

警告

這有明顯的風險。人類代理可以控制Mac上的所有內容。請小心。 Anthropic的新Claude 3.5 SONNET模型拒絕做不安全的事情，例如購買物品或下載非法內容。

特徵

• 本機MacOS GUI互動（無需Docker）
• 使用本機MacOS命令屏幕捕獲
• 鍵盤和鼠標通過Cliclick控制
• 多個LLM提供商支持（擬人，基岩，頂點）
• 基於簡化的接口
• 自動屏幕分辨率縮放
• 文件系統互動和編輯功能

先決條件

• Macos Sonoma 15.7或以後
• Python 3.12+
• Homebrew（用於安裝其他依賴項）
• Cliclick（ brew install cliclick ） - 鼠標和鍵盤控制所需

設置說明

1. 克隆存儲庫並導航到它：

git clone https://github.com/deedy/mac_computer_use.git
cd mac_computer_use

2. 創建並激活虛擬環境：

python3.12 -m venv venv
source venv/bin/activate

3. 運行設置腳本：

chmod +x setup.sh
./setup.sh

4. 安裝Python要求：

pip install -r requirements.txt

運行演示

設置您的環境和人類API密鑰

1. 在.env文件中添加：

 API_PROVIDER=anthropic
ANTHROPIC_API_KEY=<key>
WIDTH=800
HEIGHT=600
DISPLAY_NUM=1

設置屏幕尺寸（建議：保持XGA/WXGA分辨率），然後從擬人控制台中放入鑰匙。

2. 啟動簡化應用程序：

streamlit run streamlit.py

該界面將在http：// localhost：8501中找到

屏幕尺寸注意事項

我們建議使用其中一種解決方案以進行最佳性能：

• XGA：1024x768（4：3）
• WXGA：1280x800（16:10）
• FWXGA：1366x768（〜16：9）

更高的分辨率將自動擴展到這些目標，以優化模型性能。您可以使用環境變量設置分辨率：

 export WIDTH=1024
export HEIGHT=768
streamlit run streamlit.py

重要的

此參考實現中使用的Beta API可能會發生變化。有關最新信息，請參閱API發行說明。