Forschung
MELINOE: Durch Feintuning werden MoE-Modelle speichereffizienter
Die neue Methode MELINOE nutzt Feintuning, um Mixture-of-Experts (MoE)-Modelle deutlich speichereffizienter zu machen. MoE-Architekturen re…
arXiv – cs.LG