Forschung arXiv – cs.AI

CodeX-Verify: Multi-Agent-System entdeckt Bugs und Mehrfachschwachstellen schneller

Moderne Sprachmodelle erzeugen häufig fehlerhaften Code: 29,6 % der „gelösten“ Patches im SWE‑Bench scheitern, 62 % der Lösungen im BaxBench enthalten Schwachstellen, und bestehende Werkzeuge erkennen lediglich 65 % der…

≈1 Min. Lesezeit Originalquelle
Visuelle Illustration fuer KI-Kontext
Kernaussagen
Das nimmst du aus dem Beitrag mit
  • Moderne Sprachmodelle erzeugen häufig fehlerhaften Code: 29,6 % der „gelösten“ Patches im SWE‑Bench scheitern, 62 % der Lösungen im BaxBench enthalten Schwachstellen, un…
  • Mit CodeX‑Verify, einem Multi‑Agenten‑System, wird dieses Problem adressiert.
  • CodeX‑Verify nutzt vier spezialisierte Agenten, die jeweils unterschiedliche Fehlerarten erkennen.

Moderne Sprachmodelle erzeugen häufig fehlerhaften Code: 29,6 % der „gelösten“ Patches im SWE‑Bench scheitern, 62 % der Lösungen im BaxBench enthalten Schwachstellen, und bestehende Werkzeuge erkennen lediglich 65 % der Fehler bei gleichzeitig 35 % Fehlalarmen. Mit CodeX‑Verify, einem Multi‑Agenten‑System, wird dieses Problem adressiert.

CodeX‑Verify nutzt vier spezialisierte Agenten, die jeweils unterschiedliche Fehlerarten erkennen. Ein mathematischer Beweis zeigt, dass die Kombination dieser Agenten mehr Bugs aufdeckt als jeder einzelne Agent allein, wenn die Agenten unterschiedliche Problemtypen verfolgen. Die Korrelation zwischen den Agenten liegt zwischen p = 0,05 und p = 0,25, was die Unabhängigkeit der Erkennungsstrategien bestätigt.

Ein besonders alarmierender Befund ist die exponentielle Risikosteigerung bei Mehrfachschwachstellen: Eine Kombination aus SQL‑Injection und exponierten Zugangsdaten erhöht das Risiko um das 15‑fache (Risiko 300 vs. 20), was weit über den bisherigen Modellen liegt.

In Tests mit 99 Codebeispielen, die mit verifizierten Labels versehen waren, erfasst CodeX‑Verify 76,1 % der Fehler. Das Ergebnis entspricht der besten bestehenden Methode, erreicht jedoch gleichzeitig eine höhere Geschwindigkeit und benötigt keine Testausführung.

Bei 15 verschiedenen Agentenkombinationen konnte gezeigt werden, dass die Genauigkeit um 39,7 Prozentpunkte steigt – von 32,8 % auf 72,4 %. Für die einzelnen Agenten 2, 3 und 4 wurden Verbesserungen von +14,9 pp, +13,5 pp bzw. +11,2 pp erzielt. Die beste Zwei‑Agenten‑Kombination erreicht 79,3 % Genauigkeit.

Auf 300 realen Patches aus Claude Sonnet 4.5 wurde CodeX‑Verify unter 200 ms pro Sample ausgeführt, was die praktische Einsatzfähigkeit in Produktionsumgebungen unterstreicht.

Einordnen in 60 Sekunden

Welche Linse du auf diese Meldung legen solltest

Dieses Thema ist relevant, weil es zeigt, wie sich KI-Produkte, Modelle oder Rahmenbedingungen in der Praxis verschieben.

Achte zuerst darauf, was sich fuer Nutzer, Builder oder Unternehmen konkret veraendert und ob daraus ein nachhaltiger Trend entsteht.

Was veraendert sich praktisch?
Ist das eher Signal, Produkt oder nur kurzfristiger Hype?
Begriffe zum Einordnen

Kontext ohne Glossar-Suche

CodeX-Verify
Dieses Thema ist relevant, weil es zeigt, wie sich KI-Produkte, Modelle oder Rahmenbedingungen in der Praxis verschieben.
Multi-Agenten-System
Dieses Thema ist relevant, weil es zeigt, wie sich KI-Produkte, Modelle oder Rahmenbedingungen in der Praxis verschieben.
SQL-Injection
Dieses Thema ist relevant, weil es zeigt, wie sich KI-Produkte, Modelle oder Rahmenbedingungen in der Praxis verschieben.
arXiv – cs.AI
Diese Quelle setzt den Ausgangspunkt fuer die Meldung. Pruefe immer, ob sie eher Forschung, Produktmarketing oder Praxisperspektive liefert.
Naechste Schritte

Aehnliche Entwicklungen zum Weiterlesen