Agenti AI per il Codice: Solo 1 Task su 4 Completo

Agenti AI per il codice: solo 1 modifica su 4 esce completa

I migliori agenti AI per il codice, messi alla prova su richieste reali di modifica a web app esistenti, portano a termine senza lacune appena il 26,4% dei compiti. Per una PMI veneta che pensa di far aggiornare il sito a un agente AI invece che a un professionista, il dato suggerisce che la rifinitura resti spesso a carico di una persona.

Secondo The Decoder, che riprende lo studio su arXiv di ricercatori di Alibaba e di alcune università asiatiche, il test si chiama Co-Design Bench. Include 273 compiti ricavati da sessioni di programmazione reali, con 2.331 criteri di accettazione nascosti in totale. Il modello migliore, GPT-6 Astra, soddisfa in media circa il 70% dei requisiti di un compito, ma li soddisfa tutti solo nel 26,4% dei casi.

Cosa significa per le PMI del Veneto

La differenza tra "quasi fatto" e "fatto" è quella che costa tempo. Secondo The Decoder, nella maggior parte dei casi l’agente svolge gran parte del lavoro ma lascia almeno un dettaglio incompiuto, quindi chi usa questi strumenti deve quasi sempre rifinire a mano. Per un negozio di Treviso con un catalogo online, un dettaglio incompiuto può essere un prezzo non aggiornato in una pagina o un modulo d’ordine che non invia più l’email.

Va letto con cautela. Gli autori hanno scelto di proposito richieste che avevano già messo in difficoltà gli agenti, per esempio dove l’utente aveva dovuto riformulare più volte o annullare le modifiche. Il risultato non è quindi una media di tutti i lavori di manutenzione di un sito. Inoltre ogni compito prevede una sola richiesta fissa, senza domande di chiarimento né correzioni in corso d’opera, e i giudici AI possono sbagliare, come ricorda la stessa fonte.

Un altro dato riguarda la scelta dello strumento. Secondo la fonte, lo stesso modello, Qwen3.8-27B, ha ottenuto 75% oppure 56% sulle revisioni più grandi a seconda dell’ambiente in cui girava l’agente. Gli autori raccomandano di riportare sempre insieme modello e ambiente di lavoro; per chi sceglie uno strumento, The Decoder ne ricava che vanno testati in coppia. Per un imprenditore di Vicenza significa che "usiamo l’AI X" non basta come garanzia di qualità: chiedi a chi gestisce il tuo sito con quale strumento lavora e come controlla il risultato.

Sintesi ikwaba dai dati dello studio.

Come usare gli agenti AI per il codice nella tua attività

1. Usali per modifiche piccole e verificabili: affida all’agente un testo da cambiare o un piccolo ritocco di layout, poi controlla la pagina nel browser prima di pubblicare, sia da computer sia da smartphone.
2. Prepara una checklist di controllo: prima di ogni modifica elenca cosa deve funzionare ancora, come modulo contatti, carrello, prezzi e link. È lo stesso principio dei criteri di accettazione usati nello studio e serve a scoprire il dettaglio rimasto a metà.
3. Tieni una versione di backup: salva il sito prima di far lavorare l’agente, così puoi tornare indietro se qualcosa si rompe. Per modifiche che toccano più parti insieme, come grafica, funzioni e contenuti, la fonte indica che le prestazioni calano, quindi in quei casi servono più controlli.

Se vuoi sfruttare l’AI senza rischiare il sito, ikwaba può verificare il lavoro e gestire le modifiche più delicate. Trovi un quadro generale nella nostra pagina intelligenza artificiale per le aziende e una guida su agenti AI in azienda e come scegliere il modello.

Domande Frequenti