AmbiGraph-Eval: Benchmark zur Auflösung von Mehrdeutigkeiten in Graphabfragen

Mit semantischem Parsing wird gesprochene oder geschriebene Sprache in formale Abfragesprachen wie SQL oder Cypher übersetzt, sodass Anwender Datenbanken intuitiver nutzen können. Doch natürliche Sprache ist von Natur aus mehrdeutig und lässt sich häufig auf verschiedene, jeweils gültige Weisen interpretieren, während Abfragesprachen eine eindeutige Syntax erfordern.

Während die Mehrdeutigkeit bei tabellarischen Abfragen bereits untersucht wurde, stellen graphbasierte Datenbanken aufgrund ihrer stark vernetzten Strukturen eine besondere Herausforderung dar. Das neue Benchmark‑Set AmbiGraph‑Eval bietet dafür die erste systematische Möglichkeit, die Fähigkeit von Graph‑Query‑Generatoren zur Auflösung solcher Mehrdeutigkeiten zu messen und zu vergleichen.