Wizard: Manipulate Any World in Real Time via Agentic Control
Pubblicata su AIChronos il · fonte del · Yuzhe Wu, Zijun Lin, Yeying Jin (Tencent)
Wizard è un modello di mondo per giochi basato su agenti che permette il controllo preciso e in tempo reale dei movimenti dei personaggi attraverso rappresentazioni strutturate come scheletri e geometria. Il framework decoppia la logica del gioco dalla generazione visiva, utilizzando meccanismi di mascheramento adattivo per migliorare l'allineamento tra i segnali di condizionamento e le generazioni video. Questo approccio consente una generalizzazione zero-shot su scene, personaggi ed azioni non visti durante l'addestramento, superando i limiti dei metodi esistenti che supportano solo impostazioni semplici.
- Utilizzo di rappresentazioni strutturate (scheletro e geometria) come proxy intermedi per condizionare un modello di generazione video.
- Implementazione di un meccanismo di mascheramento adattivo per ottimizzare l'allineamento tra segnali di input e output visivi.
- Capacità zero-shot che permette al sistema di generalizzarsi su ambienti, personaggi ed azioni mai visti prima.
- Mantenimento esplicito dello stato del gioco all'interno dell'architettura agentic per garantire coerenza meccanica durante la simulazione in tempo reale.
- Abilitazione della creazione guidata dal giocatore con controllo fine-grained sui movimenti dei personaggi preservando la qualità visiva.
Perché conta. È rilevante perché dimostra come integrare modelli di mondo video e framework agentic possa permettere a sviluppatori di creare mondi virtuali dinamici in tempo reale senza dover programmare manualmente ogni logica fisica o interazione.
Vai alla fonte originale ↗ arXiv ↗
Scheda generata automaticamente da un modello AI locale a partire dalla fonte originale: può contenere imprecisioni.