Computer Control API
Kontrol jarak jauh komputer terdaftar — antri perintah, ambil tangkapan layar, jalankan skrip pada mesin remote.
Computer Control API
Computer Control API memungkinkan Anda mengendalikan komputer terdaftar dari
jarak jauh. Sebuah agen kecil (screen-remote-agent) berjalan di mesin target,
melakukan polling untuk perintah, mengeksekusinya, dan mengirimkan hasil
kembali. Ini memungkinkan otomasi GUI berbasis LLM.
Arsitektur
┌─────────────┐ queue cmd ┌──────────┐ poll ┌─────────────────┐
│ LLM Agent │ ───────────▶ │ Synapse │ ◀───── │ screen-remote │
│ (user-side) │ │ Server │ ──────▶│ (on target PC) │
└─────────────┘ └──────────┘ result └─────────────────┘
▲
│
┌─────────────┐
│ Human UI │
│ (browser) │
└─────────────┘Endpoint Sisi Pengguna (Mind Key atau JWT)
GET /computers/list
Mendaftar semua komputer terdaftar.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/listGET /computers/:id
Mengambil detail satu komputer.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001POST /computers/install-code
Membuat kode instalasi untuk mendaftarkan komputer baru.
curl -X POST https://synapse.schaefer.zone/computers/install-code \
-H "Authorization: Bearer YOUR_MIND_KEY" \
-H "Content-Type: application/json" \
-d '{"computer_name": "office-mac"}'Respons: { "install_code": "ic_xyz789", "expires_at": "..." }
POST /computers/:id/commands
Mengantri perintah untuk dijalankan oleh agen remote.
curl -X POST https://synapse.schaefer.zone/computers/comp_001/commands \
-H "Authorization: Bearer YOUR_MIND_KEY" \
-H "Content-Type: application/json" \
-d '{
"type": "screenshot",
"payload": {}
}'Respons: { "command_id": "cmd_001", "status": "queued" }
GET /computers/:id/command (via query)
Mengantri perintah melalui GET (untuk kasus sederhana).
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
"https://synapse.schaefer.zone/computers/comp_001/command?type=screenshot"GET /computers/:id/commands
Mendaftar perintah terbaru untuk sebuah komputer.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
"https://synapse.schaefer.zone/computers/comp_001/commands?limit=50"GET /computers/:id/commands/:cid
Mengambil status + hasil perintah tertentu.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/commands/cmd_001GET /computers/:id/screenshot
One-shot: mengantri perintah tangkapan layar dan menunggu hingga 30 detik untuk hasilnya.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/screenshot > screenshot.pngPOST /computers/:id/disable
Menonaktifkan komputer (mencabut tokennya, menyimpan catatan untuk audit).
curl -X POST -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/disableDELETE /computers/:id
Menghapus komputer secara permanen.
curl -X DELETE -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001Endpoint Sisi Agen (Computer Token)
Endpoint ini digunakan oleh screen-remote-agent yang berjalan di mesin target.
Endpoint menggunakan Computer Token (dikembalikan oleh /computers/register),
bukan Mind Key.
POST /computers/register
Menukar kode instalasi dan mendapatkan Computer Token.
curl -X POST https://synapse.schaefer.zone/computers/register \
-H "Content-Type: application/json" \
-d '{
"code": "ic_xyz789",
"computer_name": "office-mac",
"platform": "darwin",
"platform_release": "14.5.0",
"python": "3.12.4"
}'Respons: { "computer_id": "comp_001", "computer_token": "ct_..." }
GET /computers/me/poll
Long-poll untuk perintah baru. Agen memanggil ini dalam loop.
curl -H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \
"https://synapse.schaefer.zone/computers/me/poll?wait=30"Mengembalikan langsung jika ada perintah tertunda, atau setelah wait detik jika tidak ada.
POST /computers/me/commands/:cid/result
Mengirim hasil eksekusi perintah.
curl -X POST https://synapse.schaefer.zone/computers/me/commands/cmd_001/result \
-H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \
-H "Content-Type: application/json" \
-d '{
"status": "done",
"result": { "screenshot_b64": "iVBORw0KG..." }
}'Tipe Perintah
| Tipe | Payload | Deskripsi |
|---|---|---|
screenshot |
{} |
Menangkap layar sebagai PNG (base64) |
click |
{x, y} |
Mengklik pada koordinat |
move |
{x, y} |
Memindahkan mouse ke koordinat |
type |
{text} |
Mengetik teks pada kursor |
key |
{keys: ["Ctrl","c"]} |
Menekan kombinasi tombol |
scroll |
{deltaX, deltaY} |
Scroll wheel |
drag |
{fromX, fromY, toX, toY} |
Drag and drop |
Pola Umum: Otomasi GUI Berbasis LLM
# LLM agent workflow
1. List computers: GET /computers/list
2. Take screenshot: GET /computers/:id/screenshot
3. Analyze screenshot (vision model)
4. Queue click: POST /computers/:id/commands {type:"click", payload:{x,y}}
5. Wait for result: GET /computers/:id/commands/:cid
6. Take new screenshot to verify
7. Repeat until task doneLangkah Berikutnya
- Browser Proxy — layanan terpisah untuk otomasi browser
- Panduan Self-Hosted Agents