Momentaufnahme 5 Minuten Blitz Houdini 1.5 *****

By Benno Hartwig Date 2011-01-03 09:01

[quote="Roland Kanz"]Houdini 1.5 x64 - Stockfish 2.0 JA 64bit 1 1 1 0 1 1 1 = = 1 (8:2)
..
Houdini 1.5 x64 - Deep Rybka 4 x64 0 0 0 = = 0 0 1 0 0 (2:8)[/quote]Na, da sieht man doch ganz hübsch, wie sehr groß die zufällige Streuuung ist, wenn man sich mit 10 Partien gegen einen Gegner begnügt.
Meine Erwartung: Stockfish wird auf die Dauer etwas besser werden, und Rybka viel schlechter.
Und soo sehr werden diese beiden Houdini-Gegner nicht auseinanderliegen.
Benno

By Frank Quisinsky Date 2011-01-03 09:59

Hi Benno,

kleine SWCR-Statistik hierzu (zu Null-Ergebnisse).

Zuletzt vorliegend nach 62.880 Partien (bin ja schon fast 17.000 Partien weiter), haben wir 1.572 40-Partien Matches.

Rekord war ein 0:14 aus dem noch ein 12,5 : 27,5 geworden ist.

Also hier die Statistik:

0:14 = 1x
0:13 = 0x
0:12 = 6x
0:11 = 5x
0:10 = 19x

Könnte auch schreiben 14:0 ... logisch!
Vielleicht ganz interessant für Deine Wahrscheinlichkeitsberechnungen.

Kommt also nicht so oft vor. Allerdings sehr viel öfters ein 9:1 oder 9.5 : 0.5!
Derzeit spielt ja Gaviota und ist klar hinter den TOP-Engines zurück. Da steht es in einem Match gar 32:0.

Die Statistik oben ist von Engines die nicht mehr als 250 ELO auseinander liegen, wichtig!
Also von 1.572 Matches sondern von 1.310 Matches (sofern ich das in Erinnerung habe).

Viele Grüße
Frank

By Frank Quisinsky Date 2011-01-03 10:13 Edited 2011-01-03 10:18

Hi,

bei der 0x vorgekommenen 0:13 Statistik ist natürlich das 0:14 Ergebnis nicht mit enthalten (abgezogen).
So gesehen dann 31x nach 1.310 Matches vorgekommen = 2,3% ... passiert also bei 50-Matches und Engines die nicht mehr als 250 ELO auseinander liegen durchschnittlich 1x.

Und das schönste Beispiel produzierte eine Protector Version sofern richtig im Kopf ... müsste nachsehen.
Aus einem 0:11 wurde ein 24,5 : 15,5, sprich nach einem 0:11 folgte ein 24,5 : 4,5 !!

Zur Erinnerung:
In der SWCR werden immer 40-Partien-Matches gespielt, eine Partie dauert durchschnittlich 40 Minuten!

Gruß
Frank

By Frank Quisinsky Date 2011-01-03 10:31 Edited 2011-01-03 10:38

Noch einer ...

Übrigens bei einer Engine direkt 3x passiert.
Eine Komodo Version. Also in 3 von über 30 40-Partien Matches gab es 2x negativ und 1x positiv (aus der Sicht von Komodo) eine solche Statistik. Komodo lag aufgrund von diesem Einzelergebnis übrigens lange in der SWCR 1-2 Punkte hinter Shredder 12. In allen anderen Listen liegt Komodo 1.2 3-10 ELO vor Shredder 12. Mit mehr Partien hat sich das bei mir ausgeglichen und Komodo liegt nun auch bei mir 5 ELO vor Shredder 12.

Solche Einzelergebnisse beeinflussen nur sehr bedingt eine Ratingliste.
Das eine Engine z. B. bei 26 40-Partien Matches ein Zufallsergebnis, also nach 1.000 Partien, erzeugt, welches um mehr als 25 ELO tatsächlich vom wahrscheinlichen Endergebnis abweicht, ist nach meinen kompletten Statistiken ausgeschlossen!

Vielleicht passiert das 1x in einem Jahrhundert wenn alle Rechner 100 Jahre durchlaufen würden

Noch einer ...
Eine wirklich dicke Abweichung in ELO habe ich bei Shredder 12.
Die ELO ist von Partienummer 3.200 auf 4.400 um 7 gefallen, was nicht groß auffällt, da auf Shredder geeicht wird. Shredder 12 w32 ist die einzige Engine die gegen alle anderen Engines, die in der SWCR auftauchen, 40-Partien gespielt hat.

Gruß
Frank