Does Engram Do Memory Retrieval in Autoregressive Image Generation?
Signal
72
Hype
15
En 3 lignesUn module Engram (mémoire associative O(1) par hash) injecté dans des Transformers pour la génération d'images autorégressives sur ImageNet 256×256 n'améliore pas la qualité (FID) malgré des gains FLOP. Les expériences (gate-clamp, donor-probe, table gelée) révèlent que le module fonctionne comme un chemin résiduel architectural gated, non comme un mécanisme de récupération adressée par contenu.Lire la source
Ton avis ?
Résumé généré par Claude — vérifié par l'humain