Refining and Reusing Annotation Guidelines for LLM Annotation
Signal
72
Hype
18
En 3 lignesLes LLM peinent à respecter les conventions spécialisées des benchmarks de référence. Les auteurs proposent un cadre itératif de modération qui réutilise et affine les directives d'annotation pour aligner les modèles. Tests sur trois tâches de NER biomédicales (NCBI Disease, BC5CDR, BioRED) avec GPT, Gemini, DeepSeek confirment l'efficacité de l'intégration de directives et des modèles optimisés pour le raisonnement.Lire la source
Ton avis ?
Résumé généré par Claude — vérifié par l'humain