VAMPS: Visual-Assisted Mathematical Problem Solving Benchmark

En 3 lignesVAMPS est un benchmark de 1 168 questions multimodales bilingues testant la capacité des modèles de langage multimodaux à résoudre des problèmes mathématiques en utilisant des graphiques. Les résultats montrent que la résolution analytique directe surpasse l'utilisation d'outils de visualisation, même quand le graphique est la stratégie naturelle.

Résumé généré par Claude — vérifié par l'humain