Warnung: Auswahlverzerrung bei Schätzungen des Algorithmusfortschritts
In einer kürzlich veröffentlichten Notiz wird ein möglicher methodologischer Fehler in der Analyse des Algorithmusfortschritts durch Sprachmodelle aufgezeigt. Die Studie von Ho und Kollegen aus dem Jahr 2024 versucht, d…