NanoNet: Effizientes Lernen mit wenig Labels für leichte Textanalyse
Die neue Methode NanoNet eröffnet einen vielversprechenden Ansatz für die Textanalyse mit minimalem Aufwand an gelabelten Daten. Durch die Kombination von Online-Knowledge-Distillation und gegenseitigem Lernregulierung schafft das System mehrere kompakte Modelle, die gleichzeitig voneinander profitieren.