Ga naar hoofdinhoud

OpenAI's Operator: voorbeelden, use cases, concurrentie & meer

Lees alles over OpenAI Operator, een AI-agent op basis van het nieuwe Computer-Using Agent (CUA)-model, die websites kan navigeren en zelfstandig taken uitvoert.
Alex Olteanu
Josef Waples
Alex Olteanu, Josef Waples

Maak je gratis account aan

Oefen en volg je voortgang.

Ga verder met GoogleDoor verder te gaan, accepteer je ons Gebruiksvoorwaarden, onze Privacybeleid en dat je gegevens in de VS worden opgeslagen.

OpenAI kondigde onlangs Operator aan, een AI-agent die is ontworpen om webgebaseerde taken zelfstandig af te handelen. Het kan taken uitvoeren zoals een tafel reserveren of online winkelen, waardoor digitale interacties voor alledaagse klusjes eenvoudiger worden.

Toch denken wij dat het potentieel verder gaat dan gemak: het kan mensen zonder computerervaring in staat stellen om moeiteloos taken te voltooien, zoals formulieren invullen of door complexe websites navigeren.

Bovendien zou het, met verdere integratie van spraakopdrachten, een toegankelijkere oplossing kunnen bieden voor mensen met een beperking, zoals personen met een visuele beperking.

Operator betreedt een concurrerend speelveld met onder meer Anthropic’s computer-use-mogelijkheden en Google’s Project Mariner. Een verschil is dat de tools van Anthropic (vooralsnog) programmeerkennis vereisen, terwijl Operator gebruikers instructies in gewone taal laat geven, wat de drempel verlaagt.

In deze blog leggen we uit wat Operator is, verkennen we de onderliggende technologie (CUA), schetsen we de toepassingen en beperkingen, en plaatsen we het binnen de bredere context van AI-agents. We maakten ook deze video van één minuut voor een snel overzicht:

Wat is Operator?

Operator is OpenAI’s eerste AI-agent, ontworpen om zelfstandig taken op het web uit te voeren. Een AI-agent is een systeem dat instructies kan aannemen, erover kan redeneren en acties kan uitvoeren zonder constante menselijke supervisie.

In tegenstelling tot traditionele automatiseringstools die leunen op vooraf gedefinieerde API’s of starre workflows, interacteert Operator rechtstreeks met websites en bootst het menselijke handelingen na, zoals klikken, typen en scrollen. Het primaire doel is digitale taken te vereenvoudigen die anders handmatig werk of technische kennis vereisen.

Daardoor is het geschikt voor alledaagse activiteiten zoals reserveringen beheren of formulieren invullen, maar ook voor complexere, meerstapsworkflows. Hier is een voorbeeld van het gebruik van Operator:

Bron: OpenAI

Operator gebruikt een virtuele browser om websites te navigeren. Deze virtuele omgeving stelt het in staat om te interacteren met grafische gebruikersinterfaces (GUI’s) zoals een menselijke gebruiker dat zou doen. In plaats van dat websites speciale API’s nodig hebben, interpreteert Operator de visuele lay-out van een webpagina, klikt op knoppen, typt in velden en scrolt door content.

Operator vertrouwt op instructies in gewone taal om te begrijpen wat gebruikers nodig hebben. Zodra de taak is gedefinieerd, verwerkt het de instructies, splitst ze op in uitvoerbare stappen en voert ze uit, terwijl het feedback geeft aan de gebruiker. Operator kan ook om verduidelijking of bevestiging vragen bij cruciale acties, zoals het indienen van een formulier of het afronden van een betaling, zodat je meer controle houdt over het resultaat.

Wat is de Computer-Using Agent (CUA)?

De Computer-Using Agent (CUA) is de kerntechnologie achter Operator. Door de visiecapaciteiten van GPT-4o te combineren met geavanceerd redeneren via reinforcement learning, is CUA getraind om te interacteren met grafische gebruikersinterfaces—de knoppen, menu’s en tekstvelden die mensen op een scherm zien.

Perceptie

CUA begint met het verwerken van ruwe pixeldata uit schermafbeeldingen. Het gebruikt deze visuele informatie om belangrijke interface-elementen te identificeren, zoals knoppen, invoervelden en navigatiemenu’s.

Bron: OpenAI

Redeneren

Zodra de visuele data zijn geanalyseerd, past CUA keten-van-gedachte-redeneren toe om zijn acties te plannen. Door huidige en eerdere screenshots te combineren, evalueert het zijn observaties, breekt het taken op in kleinere stappen en past het zich dynamisch aan uitdagingen aan. Als er bijvoorbeeld tijdens een taak een pop-up verschijnt (zoals de advertentie in het bovenstaande voorbeeld), kan CUA zijn aanpak aanpassen en een manier vinden om door te gaan—net als een menselijke gebruiker.

Actie

CUA gebruikt virtuele muis- en toetsenbordinvoer om acties uit te voeren zoals klikken, typen, scrollen en formulieren verzenden. Dankzij deze functionaliteit kan het taken autonoom uitvoeren, of het nu gaat om het kiezen van een item uit een dropdownmenu of het doorlopen van een meerstapsformulier.

Voor kritieke acties—zoals betalingen uitvoeren of inloggen op accounts—vraagt CUA om bevestiging van de gebruiker voordat het doorgaat, zodat je de controle houdt over gevoelige handelingen.

CUA-benchmarks

CUA heeft state-of-the-art (SOTA)-prestaties behaald op verschillende benchmarks:

BenchmarktypeBenchmarkComputergebruik (universele interface)Webbrowsing-agentsMens
  OpenAI CUAVorige SOTAVorige SOTA 
ComputergebruikOSWorld38,1%22,0% 72,4%
BrowsergebruikWebArena58,1%36,2%57,1%78,2%
WebVoyager87,0%56,0%87,0% 

 Bron: OpenAI

Laten we bekijken wat elk van deze drie benchmarks doet:

  • OSWorld (38,1%): Beoordeelt de vaardigheid om taken uit te voeren in volledige besturingssystemen zoals Ubuntu, Windows en macOS. Hoewel CUA beter presteert dan eerdere modellen, ligt het slagingspercentage nog onder de menselijke benchmark van 72,4%.
  • WebArena (58,1%): Evalueert de prestaties bij het navigeren door gesimuleerde websites, waaronder e-commerce en sociale platforms. Hoewel het eerdere modellen overtreft, is er nog ruimte voor verbetering bij complexe, meerstapsinteracties.
  • WebVoyager (87%): Meet de effectiviteit op live websites zoals Amazon, GitHub en Google Maps. CUA presteert hier sterk, aangezien de taken doorgaans eenvoudiger en gestructureerder zijn dan in WebArena.

De onderstaande grafiek toont de prestaties van OpenAI’s CUA vergeleken met Claude 3.5 Sonnet op de OSWorld-benchmark. De x-as geeft het maximale aantal stappen voor het voltooien van een taak weer, terwijl de y-as het slagingspercentage toont. CUA verbetert gestaag naarmate meer stappen zijn toegestaan en overtreft eerdere state-of-the-artmodellen.

Grafiek die OpenAI’s CUA en Claude 3.5 Sonnet vergelijkt op de OSWorld-benchmark

Bron: OpenAI

Toegang krijgen tot Operator

Operator is momenteel in de Verenigde Staten beschikbaar als onderdeel van een onderzoekspreview voor Pro-gebruikers van ChatGPT. Hiervoor heb je een actief Pro-abonnement nodig. Je kunt naar operator.chatgpt.com gaan om Operator te gebruiken.

Voor nu is Operator beperkt tot Pro-gebruikers, maar OpenAI is van plan om de toegang in de komende maanden uit te breiden naar Plus-gebruikers. Met deze gefaseerde uitrol kan OpenAI feedback verzamelen en het systeem verbeteren voordat het voor een breder publiek beschikbaar komt.

Hoewel Operator zich bij de eerste lancering richt op gebruikers in de VS, heeft OpenAI aangegeven dat beschikbaarheid in Europa en andere regio’s langer zal duren vanwege regelgevende uitdagingen. Gebruikers in deze regio’s zullen moeten wachten op toekomstige updates terwijl OpenAI deze complexiteit doorloopt.

UI-bericht dat aangeeft dat Operator niet beschikbaar is in Europa

Vooruitkijkend is OpenAI ook van plan om de onderliggende technologie achter Operator, CUA, via een API beschikbaar te maken. Zo kunnen ontwikkelaars hun eigen AI-aangedreven agents voor maatwerktoepassingen bouwen.

Toepassingen van Operator

De demo’s van Operator—zoals een tafel reserveren of online winkelen—zijn functioneel, maar naar onze mening niet bijzonder praktisch. Vaak is het sneller en eenvoudiger om deze taken handmatig te doen dan tijd te besteden aan het bewaken van de uitvoering door een AI.

Het potentieel van Operator wordt duidelijker als je verder kijkt dan deze voorbeelden en focust op toegankelijkheid of institutionele ondersteuning.

Toepassingen van Operator

Toegankelijkheid

Een van de gebieden waar Operator het meeste kan betekenen, is toegankelijkheid. Voor mensen met beperkte computerervaring, zoals ouderen of nieuwkomers in technologie, kan Operator als gids fungeren en helpen bij complexe online taken zonder dat voorafgaande expertise nodig is.

Stel je voor dat dit wordt gecombineerd met spraakopdrachten—gebruikers hoeven dan niet eens een prompt te typen, waardoor de tool nog intuïtiever wordt.

Ook kan Operator mensen met een beperking, zoals mensen met een visuele beperking, helpen om te interacteren met websites die anders mogelijk niet toegankelijk zijn, zeker in combinatie met audiofeedback of screenreader-ondersteuning.

Institutionele ondersteuning

Operator heeft sterk potentieel in overheids- en institutionele omgevingen. Het kan burgers helpen bij het invullen van complexe formulieren voor taken zoals visumaanvragen, belastingaangiften of toegang tot sociale voorzieningen. Dit vermindert de afhankelijkheid van hulp op locatie en verbetert de processen voor zowel gebruikers als instellingen.

In het onderwijs kan Operator online aanmeldingssystemen, beursaanvragen en onderzoekstaken vereenvoudigen, zodat studenten of mensen met beperkte digitale vaardigheden deze processen effectiever kunnen doorlopen.

Kleine bedrijven en professionele taken

Op de werkvloer kan Operator waardevol zijn voor kleine bedrijven door repetitieve webtaken te automatiseren, zoals voorraadbeheer, online bestellingen verwerken of feedback van klanten verzamelen. Voor professionals kan het saaie workflows afhandelen, zoals informatie verzamelen uit meerdere bronnen of formulieren invullen, zodat er meer tijd overblijft voor strategisch werk.

Zorg en non-profits

Zorginstellingen en non-profits kunnen aanzienlijk profiteren van Operator. Klinieken kunnen het inzetten om patiënten te helpen bij het invullen van online inschrijfformulieren of het vinden van bronnen, zonder uitgebreide inzet van personeel.

Non-profits die actief zijn in regio’s met lage digitale geletterdheid kunnen Operator inzetten om kwetsbare groepen te helpen bij essentiële online systemen, zodat technologische drempels geen toegang tot cruciale diensten beperken.

Concurrentie van AI-agents

OpenAI’s Operator betreedt het domein van AI-agents naast de computer-use-mogelijkheden van Anthropic en Google’s Project Mariner.

Anthropic’s computer use

Anthropic’s computer use, aangedreven door het Claude 3.5 Sonnet-model, laat de AI interacteren met desktopomgevingen door menselijke handelingen te simuleren, zoals klikken, typen en navigeren. Momenteel vereist deze functie enige technische kennis om via de API in te richten en effectief te gebruiken, wat de toegankelijkheid voor niet-technische gebruikers beperkt.

Daarentegen neemt de interface in gewone taal van Operator de noodzaak voor programmeerkennis weg, waardoor het gebruiksvriendelijker is voor een breder publiek. Anthropic zal echter vrijwel zeker werken aan vereenvoudiging van zijn tools om directer te concurreren met het toegankelijke ontwerp van Operator.

Google’s Project Mariner

Project Mariner, ontwikkeld door Google’s DeepMind, is een experimentele agent die is ontworpen om zelfstandig te navigeren en te interacteren met webpagina’s. Hoewel nog in de onderzoeksfase, wordt Mariner getest met een kleine groep gebruikers, en de inbedding in Google’s ecosysteem suggereert dat het kan uitblinken in workflows met Gmail, Google Docs en andere Google-diensten.

Conclusie

Operator is OpenAI’s eerste stap in het concurrerende veld van AI-agents, met een unieke aanpak dankzij de interface in gewone taal en het universele, browsergebaseerde ontwerp. Hoewel tools zoals Anthropic’s computer use en Google’s Project Mariner hun eigen sterke punten hebben, onderscheidt Operator zich voorlopig door de focus op toegankelijkheid.

We zijn ook benieuwd of andere spelers, zoals DeepSeek of Meta, zich in de strijd mengen. 2025 zou de verwachtingen weleens kunnen waarmaken en het jaar van agentische AI kunnen worden.

Veelgestelde vragen

Kan OpenAI Operator meer dan één taak tegelijk aan?

Ja, Operator is ontworpen om meerdere taken tegelijkertijd te beheren. Je kunt voor elke taak een apart gesprek voeren en Operator voert deze parallel uit. Zo kan Operator bijvoorbeeld boodschappen bestellen via Instacart terwijl er ook een boeking wordt gemaakt op Booking.com.

Is OpenAI Operator een AI-agent?

Ja, OpenAI Operator is een AI-agent die zelfstandig taken voor je uitvoert. Het interageert met websites door te navigeren, te klikken en formulieren in te vullen, zodat je activiteiten kunt automatiseren. Lees meer over AI-agents in onze blogpost: AI-agents begrijpen: de toekomst van autonome systemen.

Hoe werkt Operator?

Aangedreven door het Computer-Using Agent (CUA)-model interageert Operator met webpagina’s door schermafbeeldingen te bekijken en muis- en toetsenbordacties uit te voeren. Het kan zichzelf corrigeren of om hulp van de gebruiker vragen wanneer dat nodig is.

Wie kan Operator nu gebruiken en hoe kunnen ze starten?

Operator is beschikbaar voor Pro-gebruikers in de VS. Als je een Pro-abonnement hebt, kun je naar operator.chatgpt.com gaan om te beginnen. Beschrijf een taak en Operator handelt het af.

Wat zijn de huidige beperkingen van Operator?

Omdat Operator nog een onderzoekspreview is, kan het moeite hebben met complexe taken zoals het maken van diavoorstellingen of het beheren van agenda’s.

Komt Operator beschikbaar op mobiele apparaten?

Er is nog geen bevestiging over mobiele ondersteuning voor Operator, maar de mogelijkheid om met webinterfaces te interageren zou het in de toekomst, naarmate de technologie zich ontwikkelt, geschikt kunnen maken voor mobiele platforms.

Hoe verhoudt Operator zich tot spraakassistenten zoals Siri of Google Assistant?

Operator richt zich op webgebaseerde taken en directe interactie met websites, terwijl traditionele spraakassistenten doorgaans leunen op vooraf gedefinieerde app-integraties of API’s. Operator’s vermogen om menselijke acties zoals klikken en scrollen na te bootsen, maakt het veelzijdiger voor complexe online taken.

Kan Operator omgaan met websites die CAPTCHA of geavanceerde beveiligingsfuncties gebruiken?

Voor taken die CAPTCHA’s of gevoelige logins omvatten, is Operator momenteel afhankelijk van invoer van de gebruiker. Het omzeilt deze systemen niet automatisch, maar kan de workflow vervolgen zodra zulke barrières zijn weggenomen.

Alex Olteanu

Auteur

Alex Olteanu

Ik ben redacteur en schrijver van AI-blogs, tutorials en nieuws, en zorg ervoor dat alles past binnen een sterke contentstrategie en SEO-best practices. Ik heb datascience-cursussen geschreven over Python, statistiek, kansrekening en datavisualisatie. Ook heb ik een bekroonde roman gepubliceerd en besteed ik mijn vrije tijd aan scenarioschrijven en filmregie.

Josef Waples

Auteur

Josef Waples

Ik ben een schrijver en editor op het gebied van data science en heb bijgedragen aan onderzoeksartikelen in wetenschappelijke tijdschriften. Ik ben vooral geïnteresseerd in lineaire algebra, statistiek, R en dergelijke. Ik speel ook best wat schaak! 

Onderwerpen

Gerelateerd