Bewertungsraster: die Tabelle, die den Prüfern angibt, was zu bewerten ist und wie stark die einzelnen Kriterien gewichtet werden

Was ist eine Bewertungsrubrik?

Eine Bewertungsrubrik ist das Raster, anhand dessen eine Prüfungskommission arbeitet. Darin werden die einzelnen Kriterien aufgeführt, beschrieben, wie eine niedrige bzw. eine hohe Punktzahl für das jeweilige Kriterium aussieht, und jedem Kriterium wird eine Gewichtung zugewiesen.

Ohne eine Bewertungsrubrik bewerten die Gutachter nach ihren eigenen, persönlichen Maßstäben. Es kann vorkommen, dass zwei Personen dieselbe Bewerbung mit einer 6 und einer 9 bewerten und beide damit im Recht sind, da sie nie dasselbe beurteilt haben.

‍

Was gehört in eine Bewertungsrubrik?

Jedes Kriterium erfordert drei Elemente: einen Namen, eine Skala und einen Anker. Der Anker ist der Teil, der am häufigsten ausgelassen wird – eine schriftliche Beschreibung, wie eine 2 im Vergleich zu einer 4 aussieht, damit sich die Bewerter an dem Text orientieren und nicht an ihrer momentanen Stimmung.

Vier bis sechs Kriterien bilden in der Regel den Arbeitsbereich. Unterhalb dieser Grenze verkommt die Bewertung zu einem allgemeinen Gesamteindruck; oberhalb dieser Grenze hören die Gutachter auf, zwischen den einzelnen Kriterien zu unterscheiden, und wiederholen dasselbe Urteil über mehrere Zeilen hinweg.

Eine Bewertungsrubrik muss auch angeben, was sie nicht abdeckt. Die Teilnahmeberechtigung gehört zu den Zulassungskriterien und wird vor Beginn der Bewertung geklärt; eine Bewertungsrubrik, die eine Frage zur Teilnahmeberechtigung enthält, führt somit zu einer doppelten Filterung und einer doppelten Berücksichtigung.

‍

Wie die Gewichtung das Ergebnis beeinflusst

Bei der Gewichtung werden die Prioritäten eines Geldgebers zu einer rechnerischen Angelegenheit. Wenn man 40 % der Gesamtpunktzahl auf die erwartete Wirkung und 10 % auf die Klarheit des Budgets verteilt, ergibt sich aus genau denselben Anträgen und denselben Gutachtern eine andere Auswahlliste als bei umgekehrter Gewichtung.

Ein häufiger Fehler ist die standardmäßige gleichmäßige Gewichtung. Jedes Kriterium als gleich wichtig zu betrachten, ist an sich schon eine Entscheidung – und in der Regel nicht die, die ein Förderer bewusst treffen würde.

Die Gewichtung sollte vor Beginn des Auswahlverfahrens festgelegt werden, nicht erst nach Sichtung der Bewerbungen. Eine Anpassung der Gewichtung nach Vorliegen der Bewertungen führt dazu, dass die Bewertungsrubrik lediglich als Mittel zur Rechtfertigung eines bevorzugten Ergebnisses dient.

‍

Bewertungsrubriken auf einer Förderplattform

Eine Softwareplattform für das Fördermittelmanagement speichert die Bewertungsrubrik als strukturiertes Objekt und nicht als Tabellenkalkulation: Jeder Gutachter sieht dieselben Kriterien und Anhaltspunkte, die Gewichtungen werden automatisch angewendet, und die Gesamtwerte sind über eine gesamte Runde hinweg vergleichbar.

Zudem macht sie Abweichungen sichtbar. Wenn zwei Gutachter dieselbe Bewerbung bei einem Kriterium sehr unterschiedlich bewerten, macht die Plattform diese Diskrepanz für das Gutachtergremium sichtbar, damit diese erörtert werden kann, anstatt die Meinungsverschiedenheit stillschweigend durch die Durchschnittsbildung bei der Bewertung der Bewerbung auszugleichen.