Wichtiger Hinweis: Neue Berechnungsformel für die Ermittlung der Prognosegüte

• Wichtiger Hinweis: Neue Berechnungsformel für die Ermittlung der Prognosegüte

  gruener (Luddit), 15.06.2024 02:16

  #1
  

  Die Güte einer Prognose wird auf Wahlfieber anhand der drei Abweichungsfehler MAF, MAPF und MQF ermittelt.

  Daran ändert sich auch künftig nichts.

  Sehr wohl aber an der (Schul-)Note, die wir anschließend einer Prognose geben.

  Bislang wurde diese wie folgt ermittelt:

  Um die Güte einer Prognose zu ermitteln, werden folgende Rechenschritte angewandt:

  • die drei Abweichungsfehler (MAF, MAPF, MQF) werden gemittelt
  • aus dem neuen Mittel wird die Wurzel gezogen - (seltene) Ausnahme: Liegt der Wert des neuen Mittels bereits unter 1, wird quadriert.

  Ab sofort gilt folgende Regelung:

  Neu ab Juni 2024:

  Um die Güte einer Prognose zu ermitteln, werden folgende Rechenschritte angewandt:

  • die drei Abweichungsfehler (MAF, MAPF, MQF) werden gemittelt. Zuvor werden 2 der 3 Abrechnungsfehler zusätzlich gewichtet: der MAF wird quadriert, der MQF verdoppelt.
  • aus dem neuen Mittel wird die Wurzel gezogen - (seltene) Ausnahme: Liegt der Wert des neuen Mittels bereits unter 1, wird quadriert.

  Hintergrund:

  Bislang dominierte der MAPE durch seinen hohen Wert bei der Ermittlung der Prognosegüte - seine Bedeutung wird mit der Änderung verringert. Im weiteren erhielten bislang Prognosen, die weit abseits vom realen Ergebnis lagen, häufig noch eine 3 (ergo ein "befriedigend") vor dem Komma.

  Praktisch bewirkt die Änderung, dass sich die allermeisten Prognosen in ihrer Güte verschlechtern, die (sehr) Guten minimal, die Schlechten signifikant. Im ersten Fall hebt sich die Verdoppelung des MQS durch die Quadrierung des MAF größtenteils wieder auf (sofern letzterer Wert deutlich unter 1), im zweiten kommt die Änderung voll zum Tragen - je schelchter eine Prognose je größer die negative Veränderung in der Prognosegüte.

  Zwei Beispiele:

  		alt	neu	neu		alt	neu	neu
  				entspricht:				entspricht:
  MAE		0,62	0,62	0,38		2,61	2,61	6,81
  MAPE		6,82	6,82	6,82		24,74	24,74	24,74
  MSE		0,64	0,64	1,28		12,39	12,39	24,78
  Mittelwert		2,69		2,83		13,25		18,78
  Wurzel		1,64		1,68		3,64		4,33
  Prognose-Güte		1,64	1,68	1,68		3,64	4,33	4,33

  Die obigen Beispiele wurden der Auswertung für die EU-Wahl 2024 in Deutschland entnommen.

  --------------------------------

  Die bisherigen Auswertungstabellen werden nicht geändert.

  Alle neuen Tabellen folgen aber der eben beschriebenen neuen Berechnungsmethode.

  Für die EU-Wahl 2024 in Österreich sowie Deutschland werden im Forum "Prognosen und Ergebnisse" beide Auswertungen nebeneinander gestellt, damit einmalig ein direkter Vergleich möglich ist.

  Die Neuauswertung hat mitunter auch Auswirkungen auf die Reihenfolge der Prognosen.

  .................................

  Im Weiteren:

  Im Rahmen dieser Umstellung findet bei einigen Anbietern eine Neuzuordnung statt.

  So wird z.B. die Wahlkreisprognose ab sofort unter "Umfragen" gelistet. Auch die Umfragen, die Wahlfieber auf X durchführt, finden dort ihren Platz.

  • Reply

  Link prediction