Die hohe Kunst der Bewertung

[Jenni]

Wie das Ergebnis ermittelt wird


Auch in diesem Wettbewerb gilt das sogenannte „ESC-Bewertungssystem“:

Ähnlich der Punktevergabe beim Eurovision Song Contest hat jeder Bewerter Punkte im Wert von 1 bis 12 zu vergeben, wobei die drei Top-Noten je zwei Punkte Abstand zueinander haben, um die Favoriten deutlicher herauszustellen – Details unten.
Im Bewertungs-Dropdown bei den Texten markiert das System mit einem Haken, welcher Wert schon vergeben ist. Wählt man für einen Text einen schon vergebenen Haken (=Wert), so wird dieser bei dem vormals bewerteten Text automatisch entfernt.


Die Regeln

– Jeder User bekommt eine genau festgelegte Anzahl an Einzelwerten/-punkten zum Bewerten der Beiträge.

– Alle Punkte müssen zwingend vergeben werden, sonst zählt keine einzige Bewertung des Users!

– Die zur Verfügung stehenden Werte sind bei größer oder gleich 10 Texten:

1, 2, 3, 4, 5, 6, 7, 8, 10, 12

– Bei weniger als 10 Texten werden Anzahl undWert der vergebenden Punkte entsprechend angepasst. Also etwa bei 9 Texten:

1, 2, 3, 4, 5, 6, 7, 9, 11


Regelungen bei Punktgleichheit

Wenn zwei oder mehr Teilnehmer am Ende die gleiche Punktanzahl haben, gelten weitere Unterscheidungskriterien, um eine eindeutige Platzierung zu gewährleisten. Ausschlaggebend ist zunächst die Anzahl der Bewerter, von denen die jeweiligen Teilnehmer Punkte erhalten haben. Lässt sich dadurch keine eindeutige Rangfolge erstellen, wird die Anzahl der an die entsprechenden Teilnehmer vergebenen Höchstwertungen berücksichtigt. Dabei wird zuerst die Anzahl der 12-Punkte-Wertungen, bei Gleichheit die Anzahl der 10-Punkte-Wertungen und so folgend bewertet. Erst für den Fall, dass sich durch den Vergleich sämtlicher Einzelwertungen kein Unterschied ergibt, werden die betroffenen Texte auf demselben Rang platziert.


  Hinweis:
Wir haben alle Texte überprüft. Nur Beiträge, die das Wettbewerbsthema überhaupt nicht berücksichtigten, wurden nicht zugelassen.
Wie gut die inhaltlichen Vorgaben (Prosa) und das Thema eurer Ansicht nach umgesetzt wurden, sollte bei eurer Bewertung eine Rolle spielen.



Regeln, Kriterien und alles, was man besser weiß


F: Wie erfahre ich, welcher Text von wem ist?
A: Während des Wettbewerbs bleiben alle Text anonym, d.h. alle werden vom Anonymhelfer "Guy Incognito" veröffentlicht. Erst nach Bewertungsende erfährst du, welches Werk aus wessen Feder stammt.

F: Ab wann kann ich werten?
A: Sind alle Beiträge online, können sie erst nach Abgabe eines Kommentars bewertet werden.

F: Gibt es eine Legende, wie viele Punkte was bedeuten?
A: Es stehen jeweils einmal 1-8 und je einmal 10 und 12 Punkte zur Verfügung, mit denen ihr eure persönlichen Lieblingstexte honoriert. Die Punkte verdeutlichen aufsteigend eure persönliche Einschätzung dieser Texte von "nicht schlecht" (=1) bis "herausragend" (=12). Die komplette Bandbreite der Punkte muss hierbei vergeben werden.

F: Kann ich meinen eigenen Text bewerten?
A: Selbstverständlich nicht. Einige lassen es sich aber nicht nehmen, ihren eigenen Text zu kommentieren, der Gaudi halber und um vor allzu genauen Beobachtern zu verschleiern, welcher einzige Text unbewertet bleibt - könnte ja ein Hinweis auf den eigenen Text sein. Ums Eck gedacht. Kurz: Eigenen Text bewerten nein, kommentieren ja.
Verdachtsmomente auf strategische Abwertungen von Konkurrenztexten werden übrigens von der Administration und dem Wettbewerbsteam genauestens verfolgt, ebenso werden mögliche Zweitnicks überprüft.

F: Ich habe nicht selbst mitgeschrieben – kann ich trotzdem bewerten?
A: Man muss nicht selbst beim Wettbewerb mitgeschrieben haben, um bewerten zu können. Im Gegenteil, wir möchten alle Mitglieder des DSFo auffordern, mit kritischem Blick zur Ermittlung der Sieger beizutragen.

F: Ich habe mich verklickt oder möchte meine Wertung korrigieren – geht das?
A: Solange die Bewertungsfrist nicht abgelaufen ist, kann man die schon vergebene Punktezahl mehrmals ändern.

F: Kann ich meinen Kommentar später noch editieren?
A: Ja, während der Bewertungszeit ist das möglich. Danach natürlich nicht mehr.

F: Kann ich die abgegebenen Punkte anderer Bewerter sehen?
A: Im laufenden Wettbewerb sind aus Gründen der Fairness weder die abgegebene Punktezahl noch die hinterlassenen Kommentare sichtbar. Erst nach Ablauf der Bewertungsfrist werden die Kommentare eingeblendet.

F: Gibt es Bewertungskriterien, die ich beachten muss?
A: Jeder Wettbewerb bringt erneut die Diskussionen der Bewertungskriterien auf den Tisch. Wie viel der Vorgabe muss im Text verarbeitet sein? Wie verteile ich meine Punkte? Eure Kriterien definiert und gewichtet ihr selbst. Wir fordern jedoch ausdrücklich dazu auf, der Themenumsetzung und auch der Umsetzung der inhaltlichen Vorgaben bei eurer Bewertung eine wesentliche Bedeutung zuzumessen.

F: Mach ich auch alles richtig?
A: Bestimmt. Löst Euch auch dieses Mal von allen Zwängen. Schließt die Augen, vergesst für einen kurzen Moment wo ihr seid, horcht in Euch hinein, ringt Schweinehunde und innere Klugscheißer nieder.

F: Die Anonymität hemmt mich / verleitet mich.
A: Kritisiere mindestens in den Worten, in denen Du selbst kritisiert werden möchtest. Vulgärsprache hat hier nichts verloren. Ein selbstgefälliges „Und jetzt?“ oder „Was bitte soll das sein?“ ist weder nett noch konstruktiv. Kommentare dieser oder ähnlicher Art lassen keine Rückschlüsse auf Kompetenz oder Souveränität des Bewerters zu. Man muss keinesfalls bauchpinseln oder seine Kritik in Watte packen, um seine aufrichtige Meinung kund zu tun; ist man nicht angetan von einem Werk bleibt einem immer noch die sachliche Ebene! Kommentare wie die obigen hinterlassen immer einen schalen Beigeschmack und manchem Teilnehmer vermiesen sie noch lange Zeit den gesamten Wettbewerb.

F: Ich bin blutiger Anfänger, ich kann das doch gar nicht!?
A: Galadriel sagt, jeder kann kommentieren, denn auch der Kleinste vermag den Lauf der Welt zu ändern. Versuche, dich möglichst unvoreingenommen auf die Texte einzulassen und ihnen Zeit und Raum zu geben, ihre Wirkung zu entfalten. Lass dich von ihnen mitnehmen, schau, was unterwegs passiert und was am Ende übrig bleibt. Was hat dich berührt oder fasziniert, was war neu und anders, wo sind formale und inhaltliche Experimente ge- oder misslungen? Diese und andere Erfahrungen während des Lesens kannst du zur Grundlage deiner Bewertung machen.
Auch der persönliche Geschmack entscheidet, allerdings sollte hier gründlich abgewogen werden: Hat der Autor sämtliche Vorgaben erfüllt, einen fehlerfreien Text abgeliefert und einen runden und in sich schlüssigen Handlungsstrang gefunden? Dann wäre eine sehr niedrige Wertung nicht gerecht, nur weil der Text nicht in deinem Lieblingsgenre angesiedelt ist.

F: Mir ist das viel zu viel Arbeit, ich möchte nur meine Punkte abgeben!?
A: Je nachdem, wie viele Beiträge eingereicht werden, kann die Bewertung aller Texte eine Lebensaufgabe sein. In der Vergangenheit benutzten einige Bewerter folgenden Text, um bewerten zu können: „Neutraler Kommentar, um bewerten zu können.“ Sechs Wörter.
„Unlogisch, sehr aufgesetzt, einige Rechtschreibfehler, daher unteres Drittel.“ Oder „Kreativer Handlungsstrang, sehr flüssig zu lesen, ein Favorit!“, wären auch nur sieben bzw. acht Wörter.
Kurz: Jeder Teilnehmer wünscht sich Rückmeldung; diese Rückmeldung muss aber keine Facharbeit werden um die abgegebene Punkteanzahl zu begründen. Je detaillierter, desto verständlicher - natürlich (in den meisten Fällen).

F: Bis wann habe ich Zeit die Texte zu lesen und zu bewerten?
A: Die Bewertungsfrist endet am Freitag den 23. September 2016, 19.00 Uhr.

[HerbertH]

Angenommen, es gibt 9 Beiträge, einer davon ist meiner. Dann darf ich meinen Beitrag nicht bewerten. Ich muss also 8mal werten. Welchen Punktwert darf ich aus den möglichen 9 Wertungen 1 2 3 4 5 6 7 9 11 weglassen, so dass ich ein gültige Wertung für diese 9 Beiträge abgebe?

Gehe ich recht in der Annahme, dass FFF Lyrik und FFF Prosa unabhängig gewertet werden und gewertet werden und für FFF Lyrik in diesem Jahr weniger als 10 Beiträge vorliegen und damit keine 12 Punkte dort vergeben werden können?

[sleepless_lives]

[HerbertH]

Hi sleepless, bei 9 Beiträgen hat jemand mit einem eigenen Beitrag genau die gleichen Wertungsmöglichkeiten wie jemand ohne eigenen Beitrag bei 8 Beiträgen.  Das ist keine schlechte Lösung, verhindert allerdings die bei 9 Beiträgen für jemand ohne eigene Beiträge mögliche Höchstbewertung zu vergeben, wenn ein eigener Beitrag vorliegt.

Danke für die super Organisation ans Team

[Rübenach]

Also in der Lyrik gibt es acht Texte. Ich habe nicht mitgeschrieben, kann aber trotzdem nur sieben Texten Federn vergeben (9-7-5-4-3-2-1). Also sollte doch alles in Ordnung sein.

[sleepless_lives]

[HerbertH]

[Rübenach]

aber dann hast du verschiedene punkteskalen für user, die mitgemacht haben und für solche, die nicht teilgenommen haben. und es ist mehr programmieraufwand. (es müsste ja immer eine abfrage stattfinden, ob der bewerter einen text im rennen hat oder nicht)

[HerbertH]

[sleepless_lives]

[HerbertH]

Viel komplizierter muss es nicht werden (bitte nochmal prüfen, ob das Folgende stimmt):

[nebenfluss]

[Jenni]

Außer dass es dann noch ebenso falsch (oder falscher, gäbe es dafür einen Superlativ ) wäre als vorher: Bei elf oder mehr Texten kann man nämlich, wie die meisten von uns wissen, 12 Punkte als Maximalwertung vergeben.

Egal aber, denn was der Punkt ist, haben wir verstanden, vielen Dank euch allen, und der Text wird überarbeitet.

[sleepless_lives]

[MoL]

Ich habe die Logik ehrlich gesagt auch nicht ganz durchschaut; kann es sein (ich habe bereits alles bewertet), dass ich bei Prosa gleich drei Texten und bei Lyrik nur einem 0 Federn geben musste?
Verwirrend. Aber hinnehmbar.
Allerdings hätte ich gerne jedem Prosatext mindestens einen Punkt für die Mühe gegeben, 0 Federn finde ich da etwas gemein ... Warum nicht bei N(Anzahl Texte) = N Punkte max. bis N-N+1 Punkte min.?
Jaaaa sorry, ich will nicht meckern; es widerstrebt mir nur wirklich, 0 Punkte/Federn zu geben

Edit: Ich kenne mich allerdings auch nicht mit dem ESC aus ...

[Jenni]

[Rübenach]

ist doch eigentlich völlig einfach. nur anstatt:

[Jenni]

Sag, Rübenach, willst du mich zum Weinen oder zum Lachen bringen?

Bei mehr als zehn Texten obiges. Ansonsten aber richtig.

Der Punkt ist: Im System ist alles richtig. Oben in der Anleitung steht es falsch. Ist aber eigentlich irrelevant, weil es im System richtig ist und man bei der Bewertung nur anhaken muss, sprich nichts falsch machen kann.

[Rübenach]

[sleepless_lives]

[sleepless_lives]

So, hier nun nochmal mit den Ergänzungen. Neue oder andere Unklarheiten?




Wie das Ergebnis ermittelt wird


Auch in diesem Wettbewerb gilt das sogenannte „ESC-Bewertungssystem“:

Ähnlich der Punktevergabe beim Eurovision Song Contest hat jeder Bewerter Punkte im Wert von 1 bis 12 zu vergeben, wobei die drei Top-Noten je zwei Punkte Abstand zueinander haben, um die Favoriten deutlicher herauszustellen – Details unten.
Im Bewertungs-Dropdown bei den Texten markiert das System mit einem Haken, welcher Wert schon vergeben ist. Wählt man für einen Text einen schon vergebenen Haken (= Wert), so wird dieser bei dem vormals bewerteten Text automatisch entfernt.


Die Regeln

– Jeder User bekommt eine genau festgelegte Anzahl an Einzelwerten/-punkten zum Bewerten der Beiträge.

– Alle Punkte müssen zwingend vergeben werden, sonst zählt keine einzige Bewertung des Users!

– Bei 11 oder mehr Texten stehen die folgenden Werte zur Verfügung:

1, 2, 3, 4, 5, 6, 7, 8, 10, 12

– Bei weniger als 11 Texten werden Anzahl und Werte der zu vergebenden Punkte entsprechend angepasst. Also etwa bei 8 Texten:

1, 2, 3, 4, 5, 7, 9

Manchem mag aufgefallen sein, dass im Beispiel oben nur 7 Wertestufen zur Auswahl stehen, obwohl es doch angenommene 8 Texte gäbe. Der Grund für die Reduzierung liegt in der Tatsache, dass Teilnehmer ihrem eigenen Beitrag keine Punkte geben dürfen und können. Um es ihnen zu ermöglichen, trotzdem alle Einzelwerte zu vergeben (nur so werden die Punkte für das Endergebnis gezählt), ist die Anzahl der Werte um einen reduziert. Damit Teilnehmern und Nicht-Teilnehmern aber die gleiche Punktemenge zu Verfügung steht, gilt die Reduzierung allgemein für alle Bewerter.


Regelungen bei Punktgleichheit

Wenn zwei oder mehr Teilnehmer am Ende die gleiche Punktanzahl haben, gelten weitere Unterscheidungskriterien, um eine eindeutige Platzierung zu gewährleisten. Ausschlaggebend ist zunächst die Anzahl der Bewerter, von denen die jeweiligen Teilnehmer Punkte erhalten haben. Lässt sich dadurch keine eindeutige Rangfolge erstellen, wird die Anzahl der an die entsprechenden Teilnehmer vergebenen Höchstwertungen berücksichtigt. Dabei wird zuerst die Anzahl der 12-Punkte-Wertungen, bei Gleichheit die Anzahl der 10-Punkte-Wertungen und so folgend bewertet. Erst für den Fall, dass sich durch den Vergleich sämtlicher Einzelwertungen kein Unterschied ergibt, werden die betroffenen Texte auf demselben Rang platziert.


  Hinweis:
Wir haben alle Texte überprüft. Nur Beiträge, die das Wettbewerbsthema überhaupt nicht berücksichtigten, wurden nicht zugelassen.
Wie gut die inhaltlichen Vorgaben (Prosa) und das Thema eurer Ansicht nach umgesetzt wurden, sollte bei eurer Bewertung eine Rolle spielen.



Regeln, Kriterien und alles, was man besser weiß


F: Wie erfahre ich, welcher Text von wem ist?
A: Während des Wettbewerbs bleiben alle Text anonym, d.h. alle werden vom Anonymhelfer "Guy Incognito" veröffentlicht. Erst nach Bewertungsende erfährst du, welches Werk aus wessen Feder stammt.

F: Ab wann kann ich werten?
A: Sind alle Beiträge online, können sie erst nach Abgabe eines Kommentars bewertet werden.

F: Gibt es eine Legende, wie viele Punkte was bedeuten?
A: Es stehen jeweils einmal 1-8 und je einmal 10 und 12 Punkte zur Verfügung, mit denen ihr eure persönlichen Lieblingstexte honoriert. Die Punkte verdeutlichen aufsteigend eure persönliche Einschätzung dieser Texte von "nicht schlecht" (=1) bis "herausragend" (=12). Die komplette Bandbreite der Punkte muss hierbei vergeben werden.

F: Kann ich meinen eigenen Text bewerten?
A: Selbstverständlich nicht. Einige lassen es sich aber nicht nehmen, ihren eigenen Text zu kommentieren, der Gaudi halber und um vor allzu genauen Beobachtern zu verschleiern, welcher einzige Text unbewertet bleibt - könnte ja ein Hinweis auf den eigenen Text sein. Ums Eck gedacht. Kurz: Eigenen Text bewerten nein, kommentieren ja.
Verdachtsmomente auf strategische Abwertungen von Konkurrenztexten werden übrigens von der Administration und dem Wettbewerbsteam genauestens verfolgt, ebenso werden mögliche Zweitnicks überprüft.

F: Ich habe nicht selbst mitgeschrieben – kann ich trotzdem bewerten?
A: Man muss nicht selbst beim Wettbewerb mitgeschrieben haben, um bewerten zu können. Im Gegenteil, wir möchten alle Mitglieder des DSFo auffordern, mit kritischem Blick zur Ermittlung der Sieger beizutragen.

F: Ich habe mich verklickt oder möchte meine Wertung korrigieren – geht das?
A: Solange die Bewertungsfrist nicht abgelaufen ist, kann man die schon vergebene Punktezahl mehrmals ändern.

F: Kann ich meinen Kommentar später noch editieren?
A: Ja, während der Bewertungszeit ist das möglich. Danach natürlich nicht mehr.

F: Kann ich die abgegebenen Punkte anderer Bewerter sehen?
A: Im laufenden Wettbewerb sind aus Gründen der Fairness weder die abgegebene Punktezahl noch die hinterlassenen Kommentare sichtbar. Erst nach Ablauf der Bewertungsfrist werden die Kommentare eingeblendet.

F: Gibt es Bewertungskriterien, die ich beachten muss?
A: Jeder Wettbewerb bringt erneut die Diskussionen der Bewertungskriterien auf den Tisch. Wie viel der Vorgabe muss im Text verarbeitet sein? Wie verteile ich meine Punkte? Eure Kriterien definiert und gewichtet ihr selbst. Wir fordern jedoch ausdrücklich dazu auf, der Themenumsetzung und auch der Umsetzung der inhaltlichen Vorgaben bei eurer Bewertung eine wesentliche Bedeutung zuzumessen.

F: Mach ich auch alles richtig?
A: Bestimmt. Löst Euch auch dieses Mal von allen Zwängen. Schließt die Augen, vergesst für einen kurzen Moment wo ihr seid, horcht in Euch hinein, ringt Schweinehunde und innere Klugscheißer nieder.

F: Die Anonymität hemmt mich / verleitet mich.
A: Kritisiere mindestens in den Worten, in denen Du selbst kritisiert werden möchtest. Vulgärsprache hat hier nichts verloren. Ein selbstgefälliges „Und jetzt?“ oder „Was bitte soll das sein?“ ist weder nett noch konstruktiv. Kommentare dieser oder ähnlicher Art lassen keine Rückschlüsse auf Kompetenz oder Souveränität des Bewerters zu. Man muss keinesfalls bauchpinseln oder seine Kritik in Watte packen, um seine aufrichtige Meinung kund zu tun; ist man nicht angetan von einem Werk bleibt einem immer noch die sachliche Ebene! Kommentare wie die obigen hinterlassen immer einen schalen Beigeschmack und manchem Teilnehmer vermiesen sie noch lange Zeit den gesamten Wettbewerb.

F: Ich bin blutiger Anfänger, ich kann das doch gar nicht!?
A: Galadriel sagt, jeder kann kommentieren, denn auch der Kleinste vermag den Lauf der Welt zu ändern. Versuche, dich möglichst unvoreingenommen auf die Texte einzulassen und ihnen Zeit und Raum zu geben, ihre Wirkung zu entfalten. Lass dich von ihnen mitnehmen, schau, was unterwegs passiert und was am Ende übrig bleibt. Was hat dich berührt oder fasziniert, was war neu und anders, wo sind formale und inhaltliche Experimente ge- oder misslungen? Diese und andere Erfahrungen während des Lesens kannst du zur Grundlage deiner Bewertung machen.
Auch der persönliche Geschmack entscheidet, allerdings sollte hier gründlich abgewogen werden: Hat der Autor sämtliche Vorgaben erfüllt, einen fehlerfreien Text abgeliefert und einen runden und in sich schlüssigen Handlungsstrang gefunden? Dann wäre eine sehr niedrige Wertung nicht gerecht, nur weil der Text nicht in deinem Lieblingsgenre angesiedelt ist.

F: Mir ist das viel zu viel Arbeit, ich möchte nur meine Punkte abgeben!?
A: Je nachdem, wie viele Beiträge eingereicht werden, kann die Bewertung aller Texte eine Lebensaufgabe sein. In der Vergangenheit benutzten einige Bewerter folgenden Text, um bewerten zu können: „Neutraler Kommentar, um bewerten zu können.“ Sechs Wörter.
„Unlogisch, sehr aufgesetzt, einige Rechtschreibfehler, daher unteres Drittel.“ Oder „Kreativer Handlungsstrang, sehr flüssig zu lesen, ein Favorit!“, wären auch nur sieben bzw. acht Wörter.
Kurz: Jeder Teilnehmer wünscht sich Rückmeldung; diese Rückmeldung muss aber keine Facharbeit werden um die abgegebene Punkteanzahl zu begründen. Je detaillierter, desto verständlicher - natürlich (in den meisten Fällen).

F: Sind die Bewertungen von Prosa und Lyrik unabhängig oder muss ich meine Punkte auf beide aufteilen?
A: Prosa und Lyrik sind völlig eigenständig, was die Bewertung angeht. Es gibt also zwei Punktesätze für jeden Benutzer und die Forumssoftware registriert verliehene Bewertungen für die beiden Kategorien separat.

F: Bis wann habe ich Zeit die Texte zu lesen und zu bewerten?
A: Die Bewertungsfrist endet am Freitag den 23. September 2016, 19.00 Uhr.

[Rübenach]

Vielleicht noch irgenwo den passus aufnehmen, dass diejenige userIn, die teilgenommen und bewertet hat, noch bonuspunkte bekommt.