SynIB: Informational Bottleneck for Maximizing Synergy in Multimodal Learning
Signal
72
Hype
28
En 3 lignesSynIB, une nouvelle fonction objectif basée sur la théorie de l'information, maximise la synergie multimodale en pénalisant la confiance du modèle quand une modalité est masquée. Validé sur XOR synthétique et cinq benchmarks réels (MultiBench, Hateful Memes, CREMA-D), SynIB améliore la précision sur exemples synergiques de jusqu'à 7,8% et la précision globale de 3,8%.Lire la source
Ton avis ?
Résumé généré par Claude — vérifié par l'humain