Retour au feed
arXiv cs.CL·

FAB-Bench: A Framework for Adaptive RAG Benchmarking in Semiconductor Manufacturing

Signal
78
Hype
15
En 3 lignesFAB-Bench est un framework de benchmarking adaptatif pour évaluer les systèmes RAG en fabrication semiconducteurs. Il définit 6 métriques diagnostiques (précision factuelle, utilisation contextuelle, complétude, pertinence de retrieval, profondeur technique, cohérence du raisonnement) sur des fenêtres de contexte 4K-32K tokens. Benchmark de 200 paires query-answer testé sur 4 LLMs et 4 frameworks RAG.
Lire la source
Ton avis ?
RAGBenchmarksÉvaluations

Résumé généré par Claude — vérifié par l'humain