MUSCAT: MUltilingual, SCientific ConversATion Benchmark

En 3 lignesMUSCAT est un benchmark multilingue pour évaluer les systèmes de reconnaissance vocale (ASR) sur des conversations scientifiques bilingues avec code-switching. Le dataset contient des discussions entre plusieurs locuteurs parlant différentes langues et propose un cadre d'évaluation au-delà du WER. Les résultats montrent que les systèmes ASR actuels peinent sur ces défis.

Résumé généré par Claude — vérifié par l'humain