Computer use

Computer use is een vaardigheid waarmee een AI het scherm ziet en bedient zoals een mens: het klikt op knoppen, vult velden in en scrolt door een website of programma, in plaats van alleen een antwoord in tekst terug te geven. Stel dat je tegen een AI-assistent zegt "boek deze vlucht op de site van de maatschappij": met computer use opent de AI zelf de browser, vult de datums in, vergelijkt de prijzen en rondt de boeking af, terwijl jij meekijkt.

Hoe het werkt

Het model krijgt steeds een schermafbeelding (screenshot) van de huidige staat van het scherm te zien. Op basis daarvan bepaalt het de volgende actie: "klik op coördinaat x,y", "typ deze tekst in dit veld" of "scroll naar beneden". Na elke actie maakt het systeem een nieuwe screenshot, en het model kijkt opnieuw wat er veranderd is voordat het de volgende stap zet. Dat maakt het trager en duurder dan een AI die direct met een programmeer-interface (een API) praat, maar het werkt ook op websites en apps die geen eigen koppeling aanbieden.

Wie het al aanbiedt

Begin 2026 bouwden de grote aanbieders dit razendsnel uit. Anthropic noemt het Computer Use en heeft het ingebouwd in Claude Code en in de Chrome-browserextensie van Claude. Google lanceerde een vergelijkbare functie in Gemini, en Microsoft bouwde het als computer-using agents in Copilot Studio, zodat een AI met bestaande bedrijfssoftware kan werken zonder dat er een losse API-koppeling nodig is. OpenAI noemt zijn variant Operator.

Waarom het nu overal opduikt

Veel bedrijfssoftware, vooral oudere interne systemen, heeft geen moderne API. Vroeger kon een AI zo'n systeem dan simpelweg niet aanraken. Met computer use kan de AI inloggen en werken via hetzelfde scherm dat een medewerker ook gebruikt: een boeking invoeren, een formulier afhandelen, gegevens overtypen tussen twee systemen. Dat maakt automatisering mogelijk op plekken waar het bouwen van een eigen koppeling te duur of technisch niet haalbaar is.

Risico's en grenzen

Computer use is krachtiger maar ook onvoorspelbaarder dan een API-koppeling: een verkeerd geïnterpreteerde knop kan de verkeerde actie uitvoeren, zoals een bestelling bevestigen of een bestand verwijderen. Daarom bouwen aanbieders bevestigingsstappen in voor onomkeerbare acties (betalen, versturen, verwijderen) en beperken ze wat de AI zonder toestemming mag doen. Het is ook gevoelig voor prompt-injectie: verborgen instructies op een webpagina kunnen de AI misleiden tot acties die de gebruiker niet bedoelde. Zie de Agent-pagina voor meer over die risico's.