Squadre di agenti IA: costi fino a 5 volte più alti, qualità quasi uguale
Far lavorare più agenti di intelligenza artificiale in squadra può costare fino a cinque volte di più rispetto a un singolo agente, senza produrre risultati migliori. Lo sostiene un nuovo studio della società di valutazione Vals AI.
- Le squadre di agenti sono costate da 1,8 a 5,1 volte più dei singoli agenti.
- Solo uno su quattro confronti ha mostrato un miglioramento significativo.
- Anche nei test di Anthropic i guadagni calano all'aumentare degli agenti.
Il test su GPT-6 Sol e Claude Opus 5.5
Vals AI è una società che si occupa di eval, cioè di prove standardizzate per misurare le prestazioni dei modelli di intelligenza artificiale. Ha messo alla prova due sistemi di punta, GPT-6 Sol e Claude Opus 5.5, sul banco di prova chiamato Vibe Code Bench, dedicato alla scrittura di codice. Ogni modello è stato valutato da solo e in squadra, con due livelli di sforzo di ragionamento: medio e massimo.
Il risultato: le squadre di agenti sono costate da 1,8 a 5,1 volte più dei singoli agenti. Su quattro confronti, uno solo ha mostrato un miglioramento statisticamente significativo, cioè non attribuibile al caso: GPT-6 Sol con ragionamento medio, dove la squadra ha ottenuto 7,3 punti in più. Al massimo livello di ragionamento, invece, lavorare in gruppo non ha dato alcun vantaggio reale né a Sol né a Opus 5.5.
Anche Anthropic, nei propri test interni su Opus 5.5, ha osservato che i guadagni di qualità si assottigliano man mano che si aggiungono agenti: passare da dieci a cento agenti ha alzato i punteggi solo di poco dopo 24 ore. Nei test ProgramBench, l'aumento di velocità si è pagato con un consumo di token molto più alto. I token sono le unità in cui i modelli scompongono il testo, e sono anche l'unità di misura della fattura.
Perché conta
Negli ultimi mesi gli sciami di agenti, cioè decine o centinaia di programmi autonomi che si dividono un compito, sono stati presentati come la prossima frontiera dell'automazione. Lo studio suggerisce che in molti casi si tratti soprattutto di spesa aggiuntiva.
Per un'azienda italiana che sta sperimentando assistenti IA per lo sviluppo software o per l'analisi dei dati, la lezione pratica è semplice: prima di moltiplicare gli agenti conviene verificare se un singolo modello, usato al massimo delle sue capacità di ragionamento, non basti già. La differenza, sulla bolletta mensile, può essere di diverse volte.
