CoLLaMo: Neues multimodales Sprachmodell revolutioniert Molekülanalyse

Ein neues großes molekulares Sprachmodell namens CoLLaMo wurde vorgestellt, das die Grenzen bisheriger Modelle sprengt. Durch die Kombination von 1‑D‑Molekülsequenzen, 2‑D‑Graphen und 3‑D‑Konformationen ermöglicht CoLLaMo eine vielschichtige Analyse von chemischen Strukturen.

Der Schlüssel liegt in einem relationen, multimodalen Kollaborationsprojektor, der atomare Informationen unter Einbeziehung von strukturellen und räumlichen Beziehungen fein abgestimmt austauscht. Diese Technik reduziert Halluzinationen und erhöht die Robustheit gegenüber unterschiedlichen Molekülmodalitäten.

Zusätzlich wurden neue, molekülzentrierte Messgrößen eingeführt: ein Halluzinations‑Bewertungsmaß und eine GPT‑basierte Bildunterschriften‑Qualitätsprüfung. Diese ersetzen die üblichen tokenbasierten Metriken wie BLEU und liefern präzisere Einblicke in die Leistungsfähigkeit von LMLMs.

Umfangreiche Tests zeigen, dass CoLLaMo die Generalisierungsfähigkeit von molekularen Sprachmodellen deutlich verbessert. Es erzielt Spitzenleistungen bei Aufgaben wie Molekülbeschriftung, rechnergestützten und beschreibenden Fragen zu Eigenschaften, Motifzählung und IUPAC‑Namensgenerierung.