Bewertungskriterien definieren
Konfiguration -> Beitragsbewertung -> Bewertungskriterien
Zuletzt aktualisiert
Konfiguration -> Beitragsbewertung -> Bewertungskriterien
Zuletzt aktualisiert
Mit den Bewertungskriterien wird in Converia festgelegt, nach welchen Maßstäben die Gutachter:innen Beiträge bewerten sollen. Auch das Programmkomitee nimmt später die finale Bewertung anhand vieler dieser Kriterien vor. Dabei gibt es eine breite Palette an Bewertungsmöglichkeiten: Zwischen individuellem Feedback und strikter Notenvergabe gibt es viele weitere Abstufungen.
Eine klassische Beitragsbewertung zeigt die Abbildung 1 im Frontend und Abbildung 2 mit der zugehörigen Konfiguration im Backend.
Die Bewertungskriterien können in verschiedenen Kriteriengruppen angeordnet werden. Im Frontend werden die Bezeichnungen der Gruppen aus Überschrift angezeigt. Diese sind in Abb. 1 gut sichtbar (Qualität/Entscheidung/Themengebiete).
Zwei Bewertungskriterien sind bereits in der !Kopiervorlage standardmäßig angelegt. Wenn zusätzliche Kriterien benötigt werden, können diese über den Button Neuen Eintrag erstellen hinzugefügt werden.
Legt die Bezeichnung des Kriteriums für die Unterscheidung im Backend fest.
Die Bezeichnung, die das Kriterium im Frontend haben soll (Abb. 1).
In der Beschreibung können zusätzliche Informationen für das Kriterium ergänzt werden.
Legt den Bezug des Kriteriums fest. Sollen die selben Kriterien in der Abstract- und Manuscriptbewertung verwendet werden, muss der Bezug vor Beginn der Manuscriptbewertung angepasst werden. Folgende Bezüge sind möglich:
Abstract
Manuscript
Legt die Art des Kriteriums fest, folgende Arten gibt es:
Note/Qualität
Klassifikation
Präsentation
Interner Kommentar
Entscheidet, ob das Kriterium ein Pflichtfeld sein soll, folgende Optionen gibt es:
Immer Pflicht
Optional
Pflicht, wenn Beitrag nicht akzeptiert wird
Optional, wenn Beitrag nicht akzeptiert wird
Sollen etwaige Punkte berücksichtigt werden.
Zugehörigkeit zu einer Kriteriengruppe.
Kurztitel für das Kriterium, wird in der finalen Bewertung als Spaltentitel verwendet.
Wurde ein Kriterium der Art Note/Qualität angelegt, können im Reiter Antworten die im Frontend ausgegebenen Antworten konfiguriert werden.
Hier kann ein Name, ein Effekt, sowie ein Wert festgelegt werden. Bei Effekt wird zwischen kein Effekt und Punktwertung nicht zutreffend unterschieden. Ersteres ist der Standard für ein Kriterium der Art Note/Qualität. Sollte es eine zusätzliche Möglichkeit geben, sich der Bewertung zu enthalten, wäre der Effekt Punktwertung nicht zutreffend nötig, damit der zugewiesene Wert nicht in die Bewertung einfließt und den Durchschnitt verzerrt.
Wurde ein Kriterium der Art Klassifikation angelegt, können im Reiter Antworten, die im Frontend ausgegebenen Antworten konfiguriert werden.
Hier werden den Auswahlmöglichkeiten Name und Effekt zugeordnet. Die Effekte des Bewertungskriteriums werden auch für Schritt 3 in den Arbeitsabläufen benötigt, da die Einordnung der Abstracts anhand des Bewertungskriteriums erfolgen.
Damit die Beitragsbewertung und Arbeitsabläufe korrekt funktionieren, ist es zwingend notwendig, ein Kriterium der Art Klassifikation angelegt zu haben.
Eine der Funktionen, die nicht korrekt funktioniert, wenn kein Bewertungskriterium des Typs Klassifikation konfiguriert ist, ist die Ampeldarstellung bei den Gutachter:innen im Frontend.
Damit die Präsentationsform in der finalen Bewertung durch das Programmkomitee angepasst werden kann, muss ein Kriterium der Art Präsentation angelegt sein.
Hier können den Präsentationsformen passende Effekte zugeordnet werden. Die Effekte beziehen sich auf die in der Konfiguration der Beitragseinreichung angelegten Präsentationsformen. Meist wird der Präsentationsform der gleichnamige Effekt zugeordnet.
Mit einem internen Kommentar können Nachrichten oder Einschätzungen der Gutachtenden an das Programmkomitee festgehalten werden. Es gibt die Möglichkeit, ein einzeiliges oder mehrzeiliges Eingabefeld zu konfigurieren.
Die Inhalte des Bewertungskriteriums interner Kommentar können nicht an die Autor:innen der Beiträge gesendet werden.
Die Converia Power Session zum Thema Bewertungskriterien anschauen.
