SANA: What Matters for QA Agents over Massive Data Lakes?

En 3 lignesSANA est un framework d'ablation diagnostique pour évaluer les agents QA sur des data lakes massifs. Il décompose les défaillances end-to-end en quatre composants : recherche, planification, analyse de données et politique d'action. Testé sur LakeQA et KramaBench, il révèle que l'analyse de données est le goulot d'étranglement principal, tandis que la recherche limite surtout les grands data lakes.

Résumé généré par Claude — vérifié par l'humain