SAM in Tensor-Modellen: Norm‑Dynamik enthüllt – DAS verbessert Leistung
Die Optimierungsmethode Sharpness‑Aware Minimization (SAM) hat sich als wirkungsvolle Technik zur Verbesserung der Generalisierung in überparametrisierten Modellen etabliert. Bisher wurde ihr implizites Regularisierungspotenzial jedoch hauptsächlich in einfachen, skalierungsinvarianten Modellen untersucht, während die Wirkung in komplexeren, tensorisierten Strukturen noch wenig beleuchtet wurde.
