Suche

Finde Modelle, Firmen und Themen

Suche im News-Archiv nach Themen, die du dauerhaft verfolgen willst.

Ergebnisse für “Verlustlandscape”
Forschung

Neuer Optimizer-Adapter führt zu 2,5 % mehr Genauigkeit bei großem Batch-Training In einer kürzlich veröffentlichten Studie auf arXiv wird ein neuer Ansatz vorgestellt, der die Suche nach besseren lokalen Minima in tiefen neuronalen Netzen revolutioniert. Der Adapter „E“ erweitert bestehende, gradientenbasierte Optimierer, sodass sie nach Erreichen eines lokalen Minimums weiter entlang von Tälern im Verlustlandscape wandern. Dadurch steigt die Wahrscheinlichkeit, ein flacheres und niedrigeres Minimum zu f

arXiv – cs.LG