mac_computer_use

人為的コンピューターの使用（Mac用）

人類のコンピューターの使用は、ubuntuを使用してDocker画像を実行して制御するベータ人類の機能です。このフォークを使用すると、MACOSでネイティブに実行でき、ネイティブMacOSコマンドとユーティリティを通じて直接システム制御を提供できます。

注意

これには明らかなリスクがあります。人類は、Mac上のすべてを制御できます。注意してください。 Anthropicの新しいClaude 3.5 Sonnetモデルは、購入アイテムの購入や違法なコンテンツのダウンロードなどの安全でないことを拒否します。

特徴

• ネイティブMACOS GUI相互作用（Dockerは不要）
• ネイティブMacOSコマンドを使用したスクリーンキャプチャ
• クリクリックによるキーボードとマウスの制御
• 複数のLLMプロバイダーサポート（人類、岩盤、頂点）
• 流線ベースのインターフェイス
• 自動画面解像度のスケーリング
• ファイルシステムの相互作用と編集機能

前提条件

• Macos Sonoma 15.7以降
• Python 3.12+
• HomeBrew（追加の依存関係をインストールするため）
• cliclick（ brew install cliclick ） - マウスとキーボードコントロールに必要

セットアップ手順

1. リポジトリをクローンしてナビゲートします。

git clone https://github.com/deedy/mac_computer_use.git
cd mac_computer_use

2. 仮想環境を作成してアクティブ化します。

python3.12 -m venv venv
source venv/bin/activate

3. セットアップスクリプトを実行します。

chmod +x setup.sh
./setup.sh

4. Python要件のインストール：

pip install -r requirements.txt

デモを実行します

環境と人類のAPIキーをセットアップします

1. .envファイルに追加：

 API_PROVIDER=anthropic
ANTHROPIC_API_KEY=<key>
WIDTH=800
HEIGHT=600
DISPLAY_NUM=1

画面寸法（推奨：XGA/WXGA解像度内にとどまる）を設定し、人類のコンソールからキーを入れます。

2. Rimelitアプリを開始します：

streamlit run streamlit.py

インターフェイスはhttp：// localhost：8501で利用できます

画面サイズの考慮事項

最適なパフォーマンスのために、これらの解像度のいずれかを使用することをお勧めします。

• XGA：1024x768（4：3）
• WXGA：1280x800（16:10）
• FWXGA：1366x768（〜16：9）

高解像度は、モデルのパフォーマンスを最適化するために、これらのターゲットに自動的にスケーリングされます。環境変数を使用して解像度を設定できます。

 export WIDTH=1024
export HEIGHT=768
streamlit run streamlit.py

重要

この参照実装で使用されるベータAPIは、変更される可能性があります。最新情報については、APIリリースノートを参照してください。