Il tuo agente ha superato il compito. Lo farà di nuovo?

La ricerca di IBM, pubblicata su Hugging Face, evidenzia un problema di consistenza negli agenti AI: anche se un agente ha un'alta percentuale di successo medio, la sua capacità di replicare il successo su tutte le ripetizioni dello stesso compito è significativamente inferiore. Viene introdotto un nuovo strumento diagnostico, il Consistency Analyzer, e un tipo di 'consistency guidelines' all'interno di ALTK-Evolve per migliorare l'affidabilità degli agenti. Questo approccio mira a ridurre il divario di consistenza senza compromettere l'accuratezza media, identificando i punti decisionali critici dove l'agente potrebbe deviare.