Retour au feed
arXiv cs.CL·

LoSoNA: A Benchmark for Local Social Norm Adaptation in Group Conversations

Signal
72
Hype
18
En 3 lignesLoSoNA est un benchmark évaluant la capacité des LLM à reconnaître et adapter les normes sociales locales dans les conversations de groupe. Huit modèles testés sous quatre conditions de prompting : Gemini 3.1 Pro atteint 84,2%, Claude Fable 5 81,6%. Le prompting explicite aide inégalement.
Lire la source
Ton avis ?
BenchmarksClaudeGeminiAgents IAÉvaluations

Résumé généré par Claude — vérifié par l'humain