Retour au feed
arXiv cs.AI·

Dissecting model behavior through agent trajectories

Signal
75
Hype
15
En 3 lignesÉtude de l'alignement harness-modèle via 138k trajectoires d'agents. Les auteurs introduisent Simple Strands Agent (SSA), un harness générique testant Claude, Gemini, GPT, Grok, Qwen sur SWE-Pro, SWE-Verified et Terminal-Bench-2. Au-delà des scores pass@1, l'analyse révèle des différences comportementales fines : fréquence d'édition, activité de test, transitions de phase.
Lire la source
Ton avis ?
Agents IABenchmarksGénération de codeClaudeGPT

Résumé généré par Claude — vérifié par l'humain