toolbox macos

@iter-ai/toolbox-macos

toolbox-macos adalah paket minimal yang memungkinkan OpenAI GPT berinteraksi dengan aplikasi macOS seperti iMessage, email, atau kalender melalui tindakan Pintasan.

• Integrasi Sederhana : Penyiapan mudah dengan server lokal dan skema GPT API.
• Berfokus pada Privasi : Berjalan secara lokal untuk menjaga keamanan data Anda.
• Serbaguna : memberikan akses ke 128 API dari Pintasan Apple.

Untuk demo lihat: https://x.com/LinzhiQ/status/1729555314217734240?s=20

Tweet2.mov

tweet.mov

Menjalankan Kotak Alat macOS

Di mesin macOS dengan Node.js terinstal, jalankan:

git clone https://github.com/iter-ai/toolbox-macos.git
npm install
npm run dev

Perintah tersebut akan memulai Terowongan Cloudflare untuk memungkinkan GPT terhubung ke mesin Anda.

Arsitektur agen

toolbox-macos dirancang dengan mempertimbangkan dukungan GPT khusus. Meskipun GPT khusus menyediakan antarmuka yang fleksibel, GPT ini memiliki batasan seperti desain agen tunggal, batas karakter untuk deskripsi skema, dll.

GPT khusus kami dirancang untuk melakukan lima langkah berikut:

1. listTools ( /list ): menyediakan daftar nama tindakan yang tersedia untuk model
2. selectTools ( /schema ): memberikan detail skema untuk tindakan input
3. submitPlan ( /plan ): titik akhir ini menerima rencana dari model dalam teks biasa dan selalu mengembalikan kesuksesan. Tujuan dari titik akhir ini adalah untuk menyembunyikan rencana dari pengguna.
4. submitCritique ( /critique ): sama halnya, titik akhir ini menerima kritik terhadap rencana dan selalu mengembalikan kesuksesan. Sekali lagi, titik akhir tiruan ini menyembunyikan kritik dari pengguna.
5. runTool ( /run ): titik akhir ini menjalankan tindakan yang diputuskan oleh GPT dengan parameter yang diberikan.

Desain hierarki /list dan /schema memungkinkan toolbox-macos mendukung lebih dari seratus tindakan pada satu GPT. Model dapat secara dinamis melakukan kueri dan memutuskan tindakan mana yang harus diambil. /plan dan /critique mengabstraksi langkah-langkah Rantai Pemikiran dan Kritik Diri dari pengguna. Pengguna cukup fokus pada percakapan dengan model.

Anda memeriksa perintah sistem (di cli/src/index.tsx ) untuk detail selengkapnya tentang cara kami menginstruksikan agen untuk memanfaatkan titik akhir ini. Ada beberapa pertimbangan ketika merancang arsitektur agen:

• Memberikan informasi kepada pengguna mencakup zona waktu dan nama
• Menjelaskan kebiasaan spesifik tentang Pintasan Apple, seperti format zona waktu dan cara menemukan pengidentifikasi tertentu
• Menginstruksikan model untuk mengikuti lima langkah di atas
• Menginstruksikan model tentang beberapa pola interaksi, seperti kapan harus meminta klarifikasi dan konfirmasi

Pintasan Apple

Lihat integrasi/pintasan/README