SWCR2: Houdini 4 STD x64 A ... gestartet!

By Frank Quisinsky Date 2013-12-29 18:07 Edited 2013-12-29 18:12

Hallo zusammen,

na dann testen wir mal wie so die Resonanz zur Jahreswende ist.
Im Grunde gibt es ja schon reichlich davon und für mich ist die SWCR2 auch nur Mittel zum Zweck um mehr über Statistiken herauszufinden.

Hier also die SWCR ohne Download Link zu den Partien!
Weiß noch nicht ob ich das komplett auf die Webseiten bringe oder eher nicht.
Sehr viel Motivation dazu habe ich derzeit nicht.

Müsst etwas Geduld mitbringen, ein Durchlauf dauert ca. 8 Tage denn ich setzte meist nur noch ein System ein (reicht).

Code:


Last update    : 29.12.2013
Actual         : Version 1.03
 Games per day  : One game need around 22,50 minutes (move average ~ 89-90)
                 24 hours x 60 minutes = 1.440 minutes : 22,50 = 64 games x 2 = 128 games per day
OS             : Windows 7 Professional SP1 x64
 System         : Asus Z87Pro, Intel® Core™ i7-4770K *4.3Ghz, 16Gb DDR3 2.4Ghz RAM
 Fritz Bench    : 1 core on i7-4470K (4.3GHz) = 7,5
 Cores          : 1 core for each engine
 GUI            : Shredder 12
 Time control   : 40/5 "repeatedly”, 50 games per match = 1.000 games for each engine
 Hash-Tables    : 256Mb
 Endgame        : 4pieces, 32Mb cache: Nalimov tablebases & gaviotabases & syzygybases & shredderbases
 Opening book   : Own swcr book version: 5.11
 Settings       : Resign = off, ponder = on, learning = off, own opening book = off
 Hyperthreading : Off (Bios)
 Large-Pages    : On (UCI configuration if possible)
 Replayed       : Time loses if unclear, draw fiewer than 18 moves, games ended with 300 moves
 UCI & IPP      : UCI protocol only & one IPP engine permitted only (trying to collect the best one)
 ELO calc       : ELOstat 1.3 / Bayesian 0056 / Ordo 0.8
 ELO set to     : Rybka 4.1 SSE42 x64 with 2.950 ELO (ELOstat 1.3)
 Category       : 26 (2876-2900 ELO), actual: 2877 (ratings only one version)

Still running
LIVE update each 15 minutes with "ftptrigger"
29.12.13 - 05.01.14, Houdini 4 STD x64 A (replaced Houdini 3 Pro x64)
LIVE: http://www.amateurschach.de/ftptrigger/houdini_4-std-x64-a.html

Code:

                                      ELOs  Bay   Ordo   Games  Score  Draws  MoveØ
 01. Stockfish 05.12.13 SSE42 x64      3060  3048  3072   1.000  75.3%  39.1%   86
 02. Houdini 3 Pro x64                 3048  3043  3058   1.000  73.9%  34.6%   94
 03. Komodo TCECr x64                  3047  3041  3057   1.000  73.8%  35.8%   90
 04. Critter 1.6a x64                  2987  2982  2991   1.000  66.2%  43.2%   89
 05. Equinox 2.02 x64                  2973  2968  2975   1.000  64.3%  42.2%   86
 06. IPP Bouquet 1.8 x64               2961  2960  2962   1.000  62.6%  45.1%   90
 06. GullChess 2.2 x64                 2961  2960  2962   1.000  62.6%  42.9%   90
08. Rybka 4.1 SSE42 x64               2950  2950  2950   1.000  61.1%  42.7%   92
 09. Hannibal 1.4b x64                 2859  2861  2847   1.000  47.5%  42.0%   89
 10. Chiron 1.5 x64                    2849  2856  2836   1.000  46.1%  40.9%   90
 11. Protector 1.5.0 JA x64            2838  2841  2823   1.000  44.3%  43.0%   89
 12. Jonny 6.00 Yokohama x64           2826  2831  2810   1.000  42.5%  39.5%   92
 13. Naum 4.2 x64                      2825  2829  2809   1.000  42.5%  42.0%   87
 14. Hiarcs 14 WCSC w32                2822  2825  2805   1.000  41.9%  40.5%   90
 15. Sjeng c't 2010 w32                2798  2802  2779   1.000  38.5%  40.2%   88
 16. Junior 13.8.04 Yokohama x64       2791  2793  2771   1.000  37.5%  33.2%   81
 17. Shredder 12 x64                   2782  2786  2761   1.000  36.2%  37.0%   85
 18. Spike 1.4 Leiden w32              2772  2777  2750   1.000  34.9%  38.2%   89
 19. Quazar 0.4 x64                    2760  2765  2737   1.000  33.2%  36.6%   98
 20. Spark 1.0 x64                     2756  2763  2732   1.000  32.6%  39.5%   90
 21. Booot 5.2.0 x64                   2753  2759  2729   1.000  32.3%  35.6%   90

Code:

Stats
Move average : 178,93 = 89,465
Games        : 13.500

White wins   : 4.755 (35.22%)
Black wins   : 3.915 (24.84%)
Draws        : 5.391 (39.93%)
White perf.  : 55,19%
Black perf.  : 44,81%

ECO A00-A99  : 2.801 games (20.2%)
ECO B00-B99  : 3.621 games (29.3%)
ECO C00-C99  : 2.154 games (16.0%)
ECO D00-D99  : 2.460 games (18.2%)
ECO E00-E99  : 2.170 games (16.3%)

Viele Grüße
Frank

By Frank Quisinsky Date 2013-12-29 18:25 Edited 2013-12-29 18:30

Hallo,

kann auch mal ein paar Statistiken zur SWCR2 senden, nur heute Abend nicht.

Beim Aufbau der SWCR2 (ca. 5 Monate hat es gedauert) gab es nur im Grunde nur ein fragwürdiges Ergebnis.
Das von Komodo 6 (ca. 30 ELO schwächer als Komodo TCECr). Im Vergleich zu den anderen Listen etwas merkwürdig, wurde ja ersetzt durch TCECr.
Ansonsten waren die Ratings von Partie Nummer 100 - 1.000 eigentlich recht konstant.

Shredder 12 spielt als x64 und ist wie bei meiner SWCR1 ca. um 10 ELO spielschwächer als die w32.
Daher eiche ich auf Rybka 4.1 SSE42 x64 weil die Ergebnisse einheitlicher und auch fast identisch zu denen der älteren Engines in der SWCR1 sind.
Ferner spielen - nach meinen Analysen - die Engines Rybka, Naum und Spike am konstantesten. Damit aber vernünftig geeicht wird nehme ich natürlich Rybka, da Naum und Spike schon jetzt zu tief stehen.
Bei Rybka orientiere ich mich an die CEGT 40/20, meine Bedingungen hier sind etwas höherwertig als 40/20 auf alter CEGT Hardware da ich auf sehr schneller i7 Hardware spielen lasse.

Ansonsten nichts neues unter der Sonne und von daher auch nicht so wichtig.
Viele Grüße und viel Spaß beim Studieren der bekannten Ergebnisse.

Viele Grüße
Frank

By Benno Hartwig Date 2013-12-29 18:41

> LIVE: http://www.amateurschach.de/ftptrigger/houdini_4-std-x64-a.html

Super!
Mal gucken wie sich H4 bei dir macht.
40 in 5 min, also im Durchschnitt 7,5 sec pro Zug.
Also eine eher kürzere Zeit. Aber in gut 7 Sekunden wird schon eine ganze Menge durchgerechnet! Es sollte H4 hier aber noch die Führung übernehmen können. "Na warte..."
Und schön, dass man diesem Test sehr gut immer wieder über sie Schulter sehen kann.

Benno

By Frank Quisinsky Date 2013-12-29 18:49 Edited 2013-12-29 18:56

Hi Benno,

das sind die identischen Bedingungen, welche die SWCR1 mit 40 in 10 (Partie dauert ca. 45 Minuten hatte).
Der Q9550 den ich einsetze hatte Fritz Bench 3.6.
Der i7 der hier zum Einsatz kommt war bei einem Core der schnellste Prozessor beim Kauf vor ca. 6 Monaten.
Er macht Fritz Bench 7.5 und ist getaktet mit 4.3Ghz.
Also ich bin doppelt so schnell als bei der SWCR1 unterwegs und daher nicht mehr 40 in 10 sondern 40 in 5.

Sollte nicht unterschätzt werden, das sind hier höhere Bedingungen da mit Ponder als bei der CEGT 40 in 20 und sehr gut zu den CEGT Listen vergleichbar.
Habe mich für 40 in 5 entschieden weil ich natürlich die SWCR1, die nicht mehr veröffentlichen SWCR1 und die SWCR2 Ergebnisse mixen kann.
Bei der Auswertung hier aber nur der i7!

Auch setzte ich den schnellsten RAM ein der derzeit verfügbar ist.
Die Viersteiner liegen auf einer SSD bzw. das Betriebssystem und die Engines.

Das bewährte Buch der SWCR1 an dem ich über ein Jahr gearbeitet hatte kommt jetzt von Anfang an zum Einsatz.
Auf einem i7 laufen immer zwei Partien mit Ponder. Am Tag also ca. 120-130 Partien.

Könnte noch ein zweites System einsetzen, mache es aber nicht bzw. eher für andere Dinge.

Anschließend läuft dann
Chiron 2.0 x64
Fire 3.0 AVX x64 ersetzt Bouquet 1.8 x64
und dann wenn offiziell verfügbar GullChess 2.4 und Protector 1.6.0.

Hänge also beim Testen hinterher wegen den vielen Updates.

Gruß
Frank

Ja, kannst ja wenn Du willst ab und an mal die aktuellen Ergebnisse beobachten.

By Frank Quisinsky Date 2013-12-29 19:24 Edited 2013-12-29 19:33

Hier noch die Versionen 1.01 (Basic ist Version 1.00) und 1.02 bzw. 1.03
Einzelresultate der letzten drei getesteten Engines auf meinem ersten i7 System.

Zu sehen ist die ELO Entwicklung nach 100, 200, 300 bis 1.000 Partien.
Wie in der SWCR-1 wird das Ergebnis konstant nach ca. 800 Partien.
In der SWCR hatten viele Engines ja bis zu 4.000 Partien gespielt.
Kommen ja durch jeden Spießroutenlauf pro Engine immer wieder 50 Partien hinzu.

Code:

Ratings only one version!
Version: 1.03, 10.500 games

Equinox 2.02 x64
22.12.13 - 29.12.13, Equinox 2.02 x64 (replaced Equinox 2.00 x64)

+01 to Equinox 2.00 x64
05. Equinox 2.00 x64                  2972  1.000 (+431,=427,-142), 64.5%
05. Equinox 2.02 x64                  2973  1.000 (+432,=422,-146), 64.3%

                                      ELOs  Games  Score  Remis
05. Equinox 2.02 x64                  2973  1.000  64.3%  42.2%
05. Equinox 2.02 x64                  2977    900  64.6%  41.9%
05. Equinox 2.02 x64                  2977    800  64.7%  42.6%
05. Equinox 2.02 x64                  2971    700  64.0%  42.9%
05. Equinox 2.02 x64                  2966    600  63.4%  43.5%
07. Equinox 2.02 x64                  2958    500  62.4%  43.6%
07. Equinox 2.02 x64                  2958    400  62.4%  42.8%
07. Equinox 2.02 x64                  2957    300  62.3%  43.3%
07. Equinox 2.02 x64                  2951    200  61.5%  44.0%
08. Equinox 2.02 x64                  2925    100  58.0%  42.0%

---

Ratings only one version!
Version: 1.02, 10.500 games

Komodo TCECr x64
13.12.13 - 22.12.13, Komodo TCECr x64 (replaced Komodo 6 x64)

+31 to Komodo 6 x64
03. Komodo 6 x64                      3013  1.000 (+506,=384,-110), 69.8%
03. Komodo TCECr x64                  3044  1.000 (+554,=365,- 81), 73.7%

                                      ELOs  Games  Score  Remis
03. Komodo TCECr x64                  3044  1.000  73.7%  36.5%
03. Komodo TCECr x64                  3046    900  73.9%  36.4%
03. Komodo TCECr x64                  3045    800  73.6%  36.0%
03. Komodo TCECr x64                  3048    700  74.1%  35.0%
03. Komodo TCECr x64                  3051    600  74.2%  34.5%
03. Komodo TCECr x64                  3048    500  74.0%  34.0%
03. Komodo TCECr x64                  3053    400  74.5%  32.5%
01. Komodo TCECr x64                  3062    300  75.5%  32.3%
03. Komodo TCECr x64                  3046    200  73.8%  33.5%
03. Komodo TCECr x64                  3053    100  74.5%  35.0%

---

Ratings only one version!
Version: 1.01, 10.500 games

Stockfish 05.12.13 SSE42 x64
06.12.13 - 14.12.13,  Stockfish 05.12.13 SSE42 x64 (replaced Stockfish 03.11.13 SSE42 x64)   

+24 to  Stockfish 03.11.13 SSE42 x64
02. Stockfish 03.11.13 SSE42 x64:     3036  1.000 (+522,=411,- 67), 72.8%
01. Stockfish 05.12.13 SSE42 x64:     3060  1.000 (+562,=384,- 54), 75.4%

                                      ELOs  Games  Score  Remis
01. Stockfish 05.12.13 SSE42 x64      3060  1.000  75.4%  38.4%
01. Stockfish 05.12.13 SSE42 x64      3059    900  75.3%  38.2%
01. Stockfish 05.12.13 SSE42 x64      3058    800  75.2%  38.9%
01. Stockfish 05.12.13 SSE42 x64      3057    700  75.1%  39.6%
01. Stockfish 05.12.13 SSE42 x64      3054    600  74.9%  40.8%
01. Stockfish 05.12.13 SSE42 x64      3065    500  76.0%  38.8%
01. Stockfish 05.12.13 SSE42 x64      3071    400  76.6%  37.8%
01. Stockfish 05.12.13 SSE42 x64      3070    300  76.5%  38.3%
01. Stockfish 05.12.13 SSE42 x64      3066    200  76.2%  40.5%
01. Stockfish 05.12.13 SSE42 x64      3064    100  76.0%  38.0%

Gehe also bei der SWCR2 etwas penibler vor um mir später weniger Arbeit mit den Statistiken zu machen.
Also immer in 100ter Partie-Schritten eine neue ELO-Entwicklung.
Werde die von Houdini 4 STD x64 A dann regelmäßig ins Forum setzen, also nach 100, 200, 300, 400 ... etc. Partien!

So, genug ...
Könnte das ganze Forum mit Statistiken vollmüllen aber ich lasse mal den Computerschächlern den inneren Frieden.

Gruß
Frank

By Frank Quisinsky Date 2013-12-30 21:50

Hallo Benno,

das Interesse ist nicht so groß an der SWCR2, rechnete hier auch nicht damit.
Wenn Dich die Arbeit interessiert, nehme ich Dich in den eMail Verteiler auf.
Sende regelmäßig zu einer kleinen Gruppe von Programmieren und 3 anderen Personen.

In diesem Fall schreibe mir einfach eine kurze eMail, damit ich Deine Adresse habe.

Viele Grüße
Frank

PS:
Ist mir auch lieber als hier Ergebnisse zu publizieren um die eigene Liste zu diskutieren oder die Webseiten wieder anzustoßen damit.
Gibt ja reichlich gute Listen!

Meine eMail Adresse findest du auf meinen Webseiten (Kontaktformular).

By Ralf Müller Date 2013-12-30 23:20

Hallo Frank,

schön, dass du wieder testest. So wie ich dich kenne, machst du bestimmt viele Statistiken zur Rangliste. Schön wäre es, wenn du diese auch auf deiner Seite veröffentlichst und aktualisierst. Aber das ist nur ein kleiner Wunsch meinerseits, der mich interessiert.

Liebe Grüße