Who Takes the Lead? Model Ability and Task-Conditioned Collaboration with Humans
Pubblicata su AIChronos il · fonte del · Weien Li, Haochen Liu, Zeyu Li, Rui Song, Zixuan Dong, Ye Yuan (New Ground AI)
Lo studio esamina come gli agenti basati su modelli linguistici allocano il lavoro in collaborazione con esseri umani quando le condizioni di vantaggio cambiano. Gli autori introducono un 'shared-control maze' per misurare se l'autonomia dell'agente deriva da una divisione del lavoro corretta o dal fallimento della collaborazione. I risultati mostrano che i modelli ad alte prestazioni (GPT-5.6-Sol, Command-A+, Qwen3.8-27B) coinvolgono il partner umano solo quando questi possiede un vantaggio di percorso chiaro, mentre l'agente agisce autonomamente altrimenti. Al contrario, modelli con capacità solitarie inferiori come Command-R non mostrano questa selettività e delegano meno efficacemente.
- La semplice frequenza dell'intervento umano non è sufficiente a distinguere tra una collaborazione efficace e un fallimento dell'agente.
- I modelli con forte capacità solitaria (solo-capable) adottano uno schema di 'route-conditioned collaboration', intervenendo autonomamente quando il vantaggio del percorso umano nullo o delegando all'uomo solo se ha un vantaggio significativo.
- Il tasso di coinvolgimento umano varia drasticamente in base al contesto: circa l'80% delle decisioni iniziali vengono delegate quando la rotta umana è più breve, altrimenti quasi zero.
- Command-R, pur essendo meno capace autonomamente, non dimostra questa adattabilità contestuale e delega il lavoro in modo indiscriminato o inefficace rispetto ai modelli migliori.
- L'uso di un ambiente controllato con avatars condivisi permette di isolare la variabile del vantaggio umano mantenendo costanti le condizioni del task.
Perché conta. Per gli sviluppatori che progettano agenti AI locali o sistemi collaborativi, questo paper evidenzia l'importanza cruciale della selettività nel delegare compiti: un agente intelligente non deve solo essere capace autonomamente, ma sapere quando è strategicamente vantaggioso coinvolgere un operatore umano.
Vai alla fonte originale ↗ arXiv ↗
Scheda generata automaticamente da un modello AI locale a partire dalla fonte originale: può contenere imprecisioni.