Offener Brief fordert Transparenz bei Bewertungsdaten (Forschung & Machine Learning, Test 06)

Mehrere Forschungsgruppen verlangen, dass Benchmarks ihre Herkunft offenlegen. Sonst seien Ranglisten nicht belastbar.

Der Brief nennt drei konkrete Punkte: Herkunft der Aufgaben, Auswahlkriterien und Umgang mit Aufgaben, die in Trainingsdaten auftauchen koennten.