CellARC: Neues Benchmark für KI-Intelligenzmessung mit Zellautomaten
Die Wissenschaftler haben CellARC vorgestellt, ein synthetisches Benchmark-System, das die Fähigkeit von Modellen zur Abstraktion und zum logischen Denken anhand von mehrfarbigen eindimensionalen Zellautomaten (CA) testet. Jede Episode besteht aus fünf Unterstützungsbeispielen und einer Abfrage, die in 256 Token zusammengefasst sind. Dadurch lassen sich schnelle Experimente mit kleinen Modellen durchführen, während gleichzeitig ein kontrollierbarer Aufgabenraum mit einstellbaren Parametern wie Alphabetgröße, Radius, Regelfamilie, Langtons Lambda, Abfrageabdeckung und Zellentropie bereitgestellt wird.
