Home Nieuws OpenAI werkt de Codex desktop-app drastisch bij om alle andere apps op...

OpenAI werkt de Codex desktop-app drastisch bij om alle andere apps op uw computer te gebruiken, afbeeldingen te genereren en webpagina’s te bekijken

5
0
OpenAI werkt de Codex desktop-app drastisch bij om alle andere apps op uw computer te gebruiken, afbeeldingen te genereren en webpagina’s te bekijken

Bevestigend dat het 3 miljoen wekelijkse ontwikkelaars heeft bereikt, OpenAI is zijn Codex-ontwikkelaarsomgeving massaal aan het updaten via zijn Mac- en Windows-desktop-apps vandaag om het dichter bij de “Super App” te brengen waarvan het bedrijf heeft bevestigd dat het ernaar streeft.

Vóór vandaag was Codex in de eerste plaats een omgeving waarin de onderliggende taalmodellen van OpenAI konden worden gebruikt voor het schrijven, bewerken, debuggen en verzenden van software zoals aangegeven door de gebruiker.

Nu heeft Codex toegang tot alle andere apps op uw computer, kan relevante informatie daaruit aan u worden getoond wanneer u daarom wordt gevraagd of proactief, actie ondernemen zoals aangegeven in de genoemde applicaties, en, in het geval van Mac-gebruikers, dit zelfs doen terwijl u uw computer handmatig blijft gebruiken terwijl uw agenten op de achtergrond werken.

Andrew Ambrosino, een technisch medewerker van OpenAI bij het Codex-team, beschreef de verandering duidelijk in een persconferentie onder embargo die ik gisteren virtueel bijwoonde: “Codex kan daadwerkelijk op apps klikken, apps starten en in apps typen. Dit werkt met alle apps op uw computer.”

Codex op desktop krijgt verder een eigen ingebouwde webbrowser, waarmee gebruikers een voorbeeld van hun front-end-ontwikkeling kunnen bekijken, en een direct geïntegreerde pijplijn naar OpenAI’s krachtige AI-beeldgeneratiemodel gpt-image-1.5, waardoor gebruikers beelden voor hun projecten kunnen genereren – alles van websites tot presentaties tot volledig speelbare pc-games met honderden items – allemaal in dezelfde stijl.

Zoals Thibault “Tibo” Sottiaux, hoofd van Codex bij OpenAI, zei tijdens de briefing: “Het gaat niet alleen om de groei. Het plaatst een zeer capabele agent in de handen van bouwers, en nu zien we dat we kunnen uitbreiden en veel meer werk kunnen doen, volledig via uw computer.”

Op de vraag waarom OpenAI dit allemaal nastreefde in Codex, en niet in de meer herkenbare vlaggenschip-app ChatGPT, zei Sottiaux tegen VentureBeat: “Codex is onze krachtigste agent. Het werkte al op je computer, en dus breiden we de mogelijkheden daar uit. Het voelde heel natuurlijk. We zullen het op een gegeven moment logisch maken.”

De update komt omdat rivaliserende Anthropic eerder vergelijkbare gebruiksscenario’s heeft aangespannen met de lancering van zijn Claude Cowerk en opnieuw ontworpen Claude Code desktop-app-weergavenallemaal beschikbaar in de Claude desktop-app voor Mac en Windows. Maar Claude staat geen gelijktijdig gebruik van de app-cursor op de achtergrond vanuit de desktop-app toe in alle apps van een gebruiker, zoals Codex dat doet.

Meerdere agentcomputers gebruiken workflows op de achtergrond op macOS

De belangrijkste technologische sprong in deze release is ‘Computergebruik’, voorlopig beperkt tot macOS-gebruikers.

Met deze functie kan Codex de traditionele chatbotcontainer doorbreken en alle applicaties op een machine bekijken, klikken en typen.

Cruciaal is dat dit op de achtergrond gebeurt. “Het kan apps op je computer op de achtergrond gebruiken, in plaats van je hele computer over te nemen”, legt Caffrey Lynch van OpenAI’s productcommunicatie voor ontwikkelaars uit.

Dit maakt ‘multi-agent’-workflows mogelijk waarbij Codex een frontend-wijziging test of een JIRA-ticket beoordeelt terwijl de ontwikkelaar in een andere applicatie blijft werken.

Voor Windows-gebruikers blijft de belangrijkste Codex-desktopapp beschikbaar en ondersteund – net als het ophalen van informatie uit die apps om naar de gebruiker in Codex te komen – hoewel deze de achtergrondinteractie op cursorniveau mist die beschikbaar was op de Mac bij de lancering.

Een one-stop-shop voor end-to-end softwareontwikkeling

Naast het bedienen van het besturingssysteem, verdubbelt OpenAI de “Software Development Lifecycle” (SDLC). De Codex-app functioneert nu meer als een uniforme werkruimte en ondersteunt alles, van GitHub PR-beoordelingen tot het beheren van externe infrastructuur.

“De eenvoudigste manier om over deze release na te denken, is door Codex en de app te leren werken op een veel groter oppervlak”, zegt Andrew Ambrosino, hoofd van de ontwikkeling van Codex-apps. Deze oppervlakte omvat nu:

  • Geïntegreerde browser: Met een in-app-browser kunnen ontwikkelaars frontend-ontwerpen herhalen door rechtstreeks commentaar te geven op DOM-elementen, waardoor nauwkeurige instructies worden gegeven die de agent moet volgen.

  • Visuele primitieven: Door gpt-image-1.5 te integreren, kan Codex nu afbeeldingen voor mockups en game-items rechtstreeks binnen de ontwikkelingsworkflow genereren en herhalen.

  • Uitgebreide zijbalk: de app bevat nu rijke voorbeelden van niet-codebestanden zoals pdf’s, spreadsheets en diapresentaties, naast een overzichtsvenster waarin u de plannen en bronnen van agenten kunt volgen.

  • Terminal en SSH: De update voegt ondersteuning toe voor meerdere terminaltabbladen en een alfafunctie voor verbinding met externe devboxes via SSH.

Om deze uiteenlopende taken met elkaar te verbinden, brengt OpenAI meer dan 90 nieuwe plug-ins uit. Met deze connectoren, waaronder CircleCI, GitLab en Microsoft Suite, kan de agent context verzamelen en actie ondernemen in de hele toolketen die een ontwikkelaar dagelijks gebruikt.

In een demovideo die tijdens de briefing werd getoond, presenteerde OpenAI een voorbeeld waarin de gebruiker in het Codex-prompt-invoerveld typte: “Kun je Slack, Gmail, Google Agenda en Notion controleren en me vertellen wat mijn aandacht nodig heeft?” laat zien hoe Codex nu door meerdere apps kan scannen en in één prompt informatie uit al deze apps kan verzamelen, en naar boven kan halen wat voor de gebruiker het belangrijkst is.

“Je kunt ze @ vermelden als je wilt dat Codex een specifieke app gebruikt, en als dat niet het geval is, kan Codex ontdekken welke apps hij moet gebruiken”, aldus Ambrosino.

De ‘hartslag’ van productiviteit

Een van de subtielere maar krachtigere verschuivingen is de introductie van persistente keuzevrijheid. Via ‘Heartbeat Automations’ kan Codex nu toekomstig werk voor zichzelf plannen en ‘wakker worden’ om taken op de lange termijn voort te zetten.

Hierdoor kunnen teams agenten instellen die Slack-kanalen of Notion-documenten monitoren en proactief documentatie bijwerken of PR’s binnenhalen.

Dit wordt ondersteund door een nieuwe “Geheugen”-functie, momenteel in preview. Dankzij het geheugen kan Codex persoonlijke voorkeuren, eerdere correcties en verzamelde informatie onthouden, waardoor er bij elke nieuwe sessie minder uitgebreide aangepaste instructies nodig zijn.

“Naarmate je Codex gebruikt, wordt Codex ook beter in het proactief zijn”, aldus Sottiaux.

Deze proactiviteit manifesteert zich in een ‘dagelijkse korte’-stijlfunctie waarbij de app suggereert hoe u de dag kunt beginnen door open Google Doc-opmerkingen of relevante Slack-context te identificeren.

Het is qua geest en praktijk vergelijkbaar met het nieuwe “Routines” -functie gelanceerd door Anthropic voor zijn Claude Code-product eerder deze week.

Licenties, prijzen en beschikbaarheid

OpenAI is onlangs overgestapt op een flexibeler prijsmodel voor teams, inclusief een abonnement van $ 100 en pay-as-you-go-opties om tegemoet te komen aan het toegenomen gebruik van autonome agenten. Voor individuele gebruikers worden deze updates vandaag uitgerold naar degenen die zijn ingelogd bij de Codex desktop-app met ChatGPT.

Terwijl de De Codex-desktopapp is beschikbaar op zowel macOS als Windowsis de uitrol van specifieke functies gelaagd:

  • Achtergrondcomputergebruik: macOS alleen bij het opstarten.

  • Personalisatie (geheugen/suggesties): Binnenkort beschikbaar voor Enterprise-, Edu-, EU- en Britse gebruikers.

  • Kernupdates voor de levenscyclus van softwareontwikkeling: Vanaf vandaag beschikbaar voor alle desktop-app-gebruikers.

De visie: van ontwikkelaarstool tot Super App voor iedereen

Op de vraag of deze functies de basis vormen van een AI-“Super-app”, bevestigde Sottiaux de strategie: “We bouwen de Super-app in de open lucht en ontwikkelen deze uit de Codex-app”.

Het doel is om de realiteit aan te pakken dat ontwikkelaars het grootste deel van hun tijd besteden aan coördinatie en het verzamelen van context in plaats van aan het schrijven van code.

Door Codex dichter bij het besturingssysteem en het bredere ecosysteem van ontwikkelaarstools te brengen, positioneert OpenAI het als het centrale zenuwstelsel voor moderne softwareontwikkeling.

“Onze missie is ervoor te zorgen dat AGI de hele mensheid ten goede komt”, aldus het bedrijf in zijn officiële aankondiging. “Dat betekent dat we de kloof moeten verkleinen tussen wat mensen zich kunnen voorstellen en wat ze daadwerkelijk kunnen bouwen.”

Nieuwsbron

LAAT EEN REACTIE ACHTER

Vul alstublieft uw commentaar in!
Vul hier uw naam in