Want Better Synthetic Data? Steer It: Activation Steering for Low-Resource Language Generation

En 3 lignesActivation steering améliore la génération de données synthétiques pour les langues peu dotées. Deux stratégies testées : Language Steering (identité linguistique) et Quality Steering (bien-formedness). Évaluation sur 4 LLMs open-source, 11 langues, tâches de classification. Steering sur couches précoces augmente la diversité et la performance aval.

Résumé généré par Claude — vérifié par l'humain