Computer Control API
Fjärrstyrning av registrerade datorer — köa kommandon, ta skärmdumpar, kör skript på fjärrmaskiner.
Computer Control API
Computer Control API låter er fjärrstyra registrerade datorer. En liten agent
(screen-remote-agent) körs på målmaskinen, pollar efter kommandon, kör dem
och skickar tillbaka resultat. Detta möjliggör LLM-driven GUI-automatisering.
Arkitektur
┌─────────────┐ queue cmd ┌──────────┐ poll ┌─────────────────┐
│ LLM Agent │ ───────────▶ │ Synapse │ ◀───── │ screen-remote │
│ (user-side) │ │ Server │ ──────▶│ (on target PC) │
└─────────────┘ └──────────┘ result └─────────────────┘
▲
│
┌─────────────┐
│ Human UI │
│ (browser) │
└─────────────┘Användarriktade endpoints (Mind Key eller JWT)
GET /computers/list
Lista alla registrerade datorer.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/listGET /computers/:id
Hämta detaljer för en enskild dator.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001POST /computers/install-code
Generera en installationskod för att registrera en ny dator.
curl -X POST https://synapse.schaefer.zone/computers/install-code \
-H "Authorization: Bearer YOUR_MIND_KEY" \
-H "Content-Type: application/json" \
-d '{"computer_name": "office-mac"}'Svar: { "install_code": "ic_xyz789", "expires_at": "..." }
POST /computers/:id/commands
Köa ett kommando för fjärragenten att utföra.
curl -X POST https://synapse.schaefer.zone/computers/comp_001/commands \
-H "Authorization: Bearer YOUR_MIND_KEY" \
-H "Content-Type: application/json" \
-d '{
"type": "screenshot",
"payload": {}
}'Svar: { "command_id": "cmd_001", "status": "queued" }
GET /computers/:id/command (via query)
Köa ett kommando via GET (för enkla fall).
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
"https://synapse.schaefer.zone/computers/comp_001/command?type=screenshot"GET /computers/:id/commands
Lista senaste kommandon för en dator.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
"https://synapse.schaefer.zone/computers/comp_001/commands?limit=50"GET /computers/:id/commands/:cid
Hämta status + resultat för ett specifikt kommando.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/commands/cmd_001GET /computers/:id/screenshot
One-shot: köa ett skärmdumpskommando och vänta upp till 30 s på resultatet.
curl -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/screenshot > screenshot.pngPOST /computers/:id/disable
Inaktivera en dator (återkallar dess token, behåller posten för granskning).
curl -X POST -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001/disableDELETE /computers/:id
Ta bort en dator permanent.
curl -X DELETE -H "Authorization: Bearer YOUR_MIND_KEY" \
https://synapse.schaefer.zone/computers/comp_001Agentriktade endpoints (Computer Token)
Dessa endpoints används av screen-remote-agent som körs på målmaskinen.
De använder en Computer Token (returnerad av /computers/register), inte en
Mind Key.
POST /computers/register
Lös in en installationskod och få en Computer Token.
curl -X POST https://synapse.schaefer.zone/computers/register \
-H "Content-Type: application/json" \
-d '{
"code": "ic_xyz789",
"computer_name": "office-mac",
"platform": "darwin",
"platform_release": "14.5.0",
"python": "3.12.4"
}'Svar: { "computer_id": "comp_001", "computer_token": "ct_..." }
GET /computers/me/poll
Lång-pollning efter nya kommandon. Agenten anropar denna i en loop.
curl -H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \
"https://synapse.schaefer.zone/computers/me/poll?wait=30"Returnerar omedelbart om kommandon väntar, eller efter wait sekunder om inte.
POST /computers/me/commands/:cid/result
Skicka resultatet av ett utfört kommando.
curl -X POST https://synapse.schaefer.zone/computers/me/commands/cmd_001/result \
-H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \
-H "Content-Type: application/json" \
-d '{
"status": "done",
"result": { "screenshot_b64": "iVBORw0KG..." }
}'Kommandotyper
| Typ | Payload | Beskrivning |
|---|---|---|
screenshot |
{} |
Fånga skärm som PNG (base64) |
click |
{x, y} |
Klicka vid koordinater |
move |
{x, y} |
Flytta musen till koordinater |
type |
{text} |
Skriv in text vid markören |
key |
{keys: ["Ctrl","c"]} |
Tryck tangentkombination |
scroll |
{deltaX, deltaY} |
Rulla hjulet |
drag |
{fromX, fromY, toX, toY} |
Dra och släpp |
Vanligt mönster: LLM-driven GUI-automatisering
# LLM agent workflow
1. List computers: GET /computers/list
2. Take screenshot: GET /computers/:id/screenshot
3. Analyze screenshot (vision model)
4. Queue click: POST /computers/:id/commands {type:"click", payload:{x,y}}
5. Wait for result: GET /computers/:id/commands/:cid
6. Take new screenshot to verify
7. Repeat until task doneNästa steg
- Browser Proxy — separat tjänst för webbläsarautomatisering
- Self-Hosted Agents Guide