Neues Quantisierungskonzept: Soft Quantization komprimiert neuronale Netze
In einer kürzlich veröffentlichten Studie auf arXiv wird ein innovatives Quantisierungskonzept namens Soft Quantization vorgestellt. Das Verfahren nutzt kurzreichweitige, anziehende Kopplungen zwischen den Gewichten eines neuronalen Netzwerks während des Trainings, um die Gewichtsverteilung schnell zu diskretisieren.