Concetto · 2 novità
Multi-turn dialogue
Pagina pubblicata il · ultima novità il
Cronologia
- YANAMI: A Large-Scale Multimodal Dataset and Benchmark for Multiturn Stateful InteractionPer gli sviluppatori di agenti AI, YANAMI offre un standard per valutare la coerenza a lungo termine necessaria in applicazioni reali come assistenti visivi o editor intelligenti. È fondamentale per chi lavora su LLM locali e multimodali che necessitano di gestire contesti complessi senza perdere informazioni tra i turni del dialogo.
- PROBE: Learning to Audit Policy Compliance in Tool-Using LLM AgentsÈ rilevante per uno sviluppatore che lavora con LLM e agenti, poiché offre una soluzione scalabile per l'audit automatico delle politiche, complementando i benchmark di capacità e sicurezza.