OpenAI ha rilasciato un importante aggiornamento per Codex, aggiungendo funzionalità come l'utilizzo del computer in background, un browser in-app, generazione di immagini, memoria, automazioni ampliate e oltre 90 nuovi plugin.

L'aggiornamento è attualmente in fase di distribuzione agli utenti dell'app desktop Codex che hanno effettuato l'accesso a ChatGPT su macOS. Si prevede che l'utilizzo del computer e le opzioni di personalizzazione per gli account aziendali e educativi saranno disponibili a breve per gli utenti dell'UE e del Regno Unito.

Utilizzo del Computer Codex su Mac e Browser Integrato

Codex ha ora la capacità di eseguire applicazioni su un Mac vedendo, cliccando e scrivendo con il proprio cursore, senza necessità di integrazione API. Più agenti possono lavorare simultaneamente senza interrompere il lavoro in corso dell'utente. OpenAI afferma che questa funzionalità è utile per testare modifiche front-end, valutare applicazioni e lavorare con strumenti che non offrono API.

L'app Codex ora include un browser integrato che consente agli utenti di commentare direttamente sulle pagine web e di fornire istruzioni precise all'agente. Attualmente, questo strumento è progettato per lo sviluppo front-end e di giochi in rete locale. OpenAI ha anche annunciato che prevede di espandere il controllo del browser oltre le sole applicazioni web locali nel tempo.

Nuovi Strumenti di Immagine, Memoria e Potenzialità di Automazione

Codex ha ora la capacità di generare e migliorare immagini utilizzando gpt-image-1.5, con integrazione di screenshot e codice. Questa funzionalità può essere utilizzata per creare immagini concettuali di prodotto, progettare bozze front-end e sviluppare asset di gioco all'interno dello stesso flusso di lavoro.

Un'anteprima della memoria aiuta Codex a ricordare il contesto da sessioni precedenti; include preferenze personali, correzioni e informazioni significative che richiedono tempo per essere raccolte. L'obiettivo della memoria è consentire una configurazione più rapida di compiti ripetitivi e migliorare la qualità dell'output senza richiedere istruzioni dettagliate.

Le automazioni sono state ampliate e consentono il riutilizzo di conversazioni esistenti. Codex ora può pianificare autonomamente lavori futuri e riavviare automaticamente compiti prolungati, anche per più giorni o settimane.

Secondo OpenAI, i team utilizzano le automazioni per gestire richieste di prelievo aperte, monitorare compiti e tracciare attività tramite Slack, Gmail e Notion. Inoltre, Codex ora offre proattivamente suggerimenti di lavoro basati sul contesto del progetto, sui plugin collegati e sulla memoria. Questo include l'identificazione di commenti aperti in Google Docs, il recupero di informazioni pertinenti da strumenti collegati e la fornitura di un elenco di azioni prioritarie.

Miglioramenti del Flusso di Lavoro per Sviluppatori e Oltre 90 Plugin Codex

L'app ora consente agli utenti di rispondere direttamente ai commenti delle revisioni di GitHub, eseguire più schede del terminale contemporaneamente e connettersi a devbox remoti tramite SSH nella versione alfa. I file, i PDF, i fogli di calcolo, le presentazioni e i documenti possono essere aperti direttamente dal menu laterale con anteprime dettagliate. Un nuovo pannello di riepilogo fornisce una panoramica dei piani, delle risorse e dei documenti dell'agente.

Oltre 90 nuovi plugin sono stati aggiunti e il supporto per abilità, integrazioni di applicazioni e server MCP è stato ampliato. Tra i nuovi plugin ci sono Atlassian Rovo per la gestione di Jira, CircleCI, CodeRabbit, GitLab Issues, Microsoft Suite, Neon di Databricks, Remotion, Render e Superpowers.