Vision-OPD: Learning to See Fine Details for Multimodal LLMs via On-Policy Self-Distillation

En 3 lignesVision-OPD propose une auto-distillation régionale-globale pour améliorer la compréhension visuelle fine des MLLMs. Le framework transfère la perception privilégiée du modèle sur des crops centrés sur les preuves vers sa politique pleine image, via minimisation de divergence KL entre distributions de tokens. Résultats compétitifs sur benchmarks de compréhension visuelle fine sans modèles externes ni labels.

Résumé généré par Claude — vérifié par l'humain