Copilot-agents van Microsoft kunnen nu zelf software bedienen

Microsoft heeft ‘computer use’ beschikbaar gemaakt in Copilot Studio. Met deze functie bedienen agents zelfstandig software, precies zoals een mens dat zou doen. Ze kijken naar het scherm, klikken op knoppen, typen tekst in en vullen formulieren in.

Geen koppeling nodig

Tot nu toe hadden agents een directe API-verbinding nodig om met een systeem te werken. Computer use omzeilt dat. De agent werkt met wat hij ziet op het scherm, niet met wat er technisch onder zit. Dat maakt het mogelijk om ook verouderde software, webapplicaties of systemen zonder API te automatiseren. Als een mens ermee kan werken, kan de agent het ook.

Dit opent een deur voor taken die nu nog volledig handmatig gaan. Gegevens overtypen van het ene systeem naar het andere, bestellingen invoeren in een oud ERP-pakket, facturen verwerken via een webformulier. Het zijn taken die vaak veel tijd kosten en weinig waarde toevoegen voor de mensen die ze uitvoeren.

Hoe gebruik je het?

In Copilot Studio voeg je computer use toe als tool aan een bestaande agent. Je beschrijft in gewone taal wat de agent moet doen, inclusief de URL’s of applicatienamen die hij nodig heeft. De agent combineert die instructies met wat hij op het scherm ziet en voert de stappen uit.

Microsoft ondersteunt twee modellen voor de uitvoering. Via OpenAI het Computer-Using Agent-model, en via Anthropic Claude Sonnet 4.5 of het experimentele Claude Sonnet 4.6 en Opus 4.6. De standaardmodellen kosten vijf Copilot Credits per stap, het premiummodel vijftien.

Goedkeuringen en een logboek

Voor organisaties die controle willen houden op wat agents doen, zijn er twee ingebouwde mechanismen. Je kunt goedkeuringsmomenten instellen voor stappen die je niet volledig wilt automatiseren. En alle handelingen worden bijgehouden in een logboek.

Daarnaast kun je het toegangsbereik van de agent beperken. Standaard mag hij met alle websites en applicaties werken, maar je kunt een lijst opgeven van specifieke domeinen of programma’s waarbinnen hij mag opereren. Buiten die lijst kan hij wel kijken, maar niet handelen.

Voor wie is dit relevant?

Computer use is waardevol in teams waar nu veel tijd gaat naar handmatige gegevensinvoer of het coördineren van informatie tussen systemen. Sales-teams die accountgegevens bijhouden in meerdere tools, administratie die facturen verwerkt, klantenservice die bestellingen opzoekt in een legacy-systeem. De agent neemt de uitvoering over en vraagt alleen om input op de momenten die je zelf aanwijst.

Het is geen kant-en-klare oplossing die je aanzet en vergeet. Goede instructies zijn bepalend voor hoe betrouwbaar de agent werkt. Microsoft raadt aan om per stap te beschrijven wat de agent moet doen, inclusief exacte URL’s, knoppen en formuliervelden. Hoe concreter de instructies, hoe minder fouten.

Maak iedere week een sprong vooruit in je marketing AI transformatie

Elke vrijdag brengen wij je de meest actuele inzichten, nieuws en praktijkvoorbeelden over de impact van AI in de marketingwereld. Of je nu je marketing efficiency wilt verbeteren, klantbetrokkenheid wilt verhogen, je marketingstrategie wilt aanscherpen of je bedrijf digitaal wilt transformeren. ‘Marketing AI Friday’ is jouw wekelijkse gids.

Meld je gratis aan voor Marketing AI Friday.