Tencent startet LFM4Ads: Vollständige Transfer-Framework für Werbeanzeigen

arXiv – cs.LG Original ≈1 Min. Lesezeit
Anzeige

Die Online-Werbung erlebt einen Quantensprung: Tencent hat das neue LFM4Ads-System vorgestellt, das auf einem großen, vortrainierten Foundation‑Model basiert und sämtliche Nutzer‑, Artikel‑ und Kreuzrepräsentationen nutzt, um Werbeanzeigen präziser zu empfehlen.

Frühere Ansätze konzentrierten sich ausschließlich auf die Übertragung von Nutzerrepräsentationen und vernachlässigten dabei wertvolle Artikel‑ und Kreuzinformationen. Dadurch blieben wichtige Zusammenhänge zwischen Nutzer und Produkt ungenutzt. LFM4Ads löst dieses Problem, indem es alle verfügbaren Repräsentationen aus dem vortrainierten Modell extrahiert und in die downstream‑Anwendungen integriert.

Um die Transferfähigkeit zu maximieren, kombiniert das Framework mehrere Ebenen: nichtlineare Adapter für die Feature‑Ebene, ein isomorphes Interaktionsmodul für die Modul‑Ebene und ein eigenständiges Retrieval‑System für die Modell‑Ebene. Zusätzlich wird die optimale Extraktionsschicht für die Kreuzrepräsentationen bestimmt und in eine übertragbare, grobkörnige Form aggregiert.

Seit der Produktions‑Einführung im vierten Quartal 2024 verarbeitet LFM4Ads auf der Tencent‑Plattform täglich mehrere zehn Milliarden Samples. Das Modell umfasst Terabyte‑große Parameter, Milliarden von sparsamen Einbettungsschlüsseln und rund zwei Tausend Features. In weniger als einem Jahr wurden bereits über zehn erfolgreiche Produktionsstarts realisiert, was die Effektivität und Skalierbarkeit des Ansatzes unterstreicht.

Ähnliche Artikel