Hallo zusammen,

Hier das Ergebnis der allerneuesten Stockfish-Entwicklungsversion 120727Q (nicht 120727, dieses Compilat war deutlich schwächer!!!). Diese Version liegt nun immerhin 10 Elo vor der offiziellen 2.2.2.-Version. Die zuvor gelistete Entwicklungsversion 120622 habe ich aus der Liste entfernt, damit die Liste nicht durch zu viele Stockfische verzerrt wird (Elo von Version 120622 war 2979 (also nur 5 Elo besser als 2.2.2.)). Es geht also wieder ein bißchen vorwärts bei Stockfish, wobei selbst bei meiner Liste bei dieser Aussage eine Restunsicherheit bleibt - wegen der Errorbar.

Testbedingungen: Notebook mit Intel i7-2630QM Prozessor (4 Kerne, 2GHz Takt, Windows 7 64bit Home Premium). Geschwindigkeit der Hardware: Houdini 2.0c auf einem Core etwa 2.1 Mio Kn/s, auf 4 Cores etwa 7.5 Mio Kn/s (bei vollem Brett), FritzMark=20.2. HyperThreading off.
Bedenkzeit: 20''+250ms Fischerbonus (ca. 40 Sekunden pro Partie je Engine), keine Tablebases, 1 Core/Thread und 64 MB Hash pro Engine, kein Pondern, 500 Vorgabestellungen aus der Frank Q. Datenbank (von mir handverlesen, nur Hauptsysteme (kein Holländisch etc.)). Gespielt wird bis zum Matt oder bis zum Remis, die GUI gibt keine Partie auf und auch Remis erst bei 500 Zügen - also gar nicht). Benutzt wird die LittleBlitzerGUI. Dazu merke ich hier nochmal an: Alle Partien wurden/werden im Gauntlet-Modus gespielt, weil nur so die Vorgabestellungen auch alle sequentiell und mit vertauschten Farben korrekt abgespielt werden. Die Ranglisten werden mit bayeselo (mm 0 1) erstellt und die Ergebnisse an Robbolito 0.085g3 x64 mit 3000 Elo gefixt.

Hier nun zunächst die LS-Rangliste mit den besten Engineversionen (nur offizielle Releases, keine Entwicklungsversionen und auch keine Spezialsettings) (jeder gegen jeden, je 1000 Partien):

Rank Name                    Elo    +    - games score oppo. draws
   1 Houdini 2.0c x64       3119    5    6  9000   63%  3025   41%
   2 Strelka 5.5 x64        3077    5    5  9000   57%  3030   49% (singlecore)
   3 Critter 1.6a x64       3067    5    5  9000   55%  3031   50%
   4 Komodo 5 x64           3053    5    6  9000   53%  3033   41% (singlecore)
   5 Ivanhoe 46h x64        3027    5    5  9000   49%  3036   53% (best open source)
   6 Robbolito 0.10 x64s    3025    5    5  9000   48%  3036   53%
   7 Rybka 4.1 x64s         3012    5    5  9000   46%  3037   43%
   8 Robbolito 0.085g3 x64  3000    5    5  9000   44%  3039   50% (singlecore)(Ippolit 2009)
   9 Saros 3.0 x64          2994    5    5  9000   44%  3039   45%
  10 Stockfish 2.2.2 x64s   2973    6    5  9000   41%  3041   40%

Dazu die passende Kreuztabelle:

                                |     01    |     02    |     03    |     04    |     05    |     06    |     07    |     08    |     09    |     10    |
                                +-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+--------------
01) Houdini 2.0c x64            |     **    |548.5-451.5|563.0-437.0|591.0-409.0|619.0-381.0|642.5-357.5|644.0-356.0|685.5-314.5|674.5-325.5|692.5-307.5| 5660.5/9000
02) Strelka 5.5 x64             |451.5-548.5|     **    |498.5-501.5|527.5-472.5|586.0-414.0|565.6-434.5|597.0-403.0|610.0-390.0|638.0-362.0|635.5-364.5| 5109.5/9000
03) Critter 1.6a x64            |437.0-563.0|501.5-498.5|     **    |524.5-475.5|566.5-433.5|554.0-446.0|569.5-430.5|593.5-406.5|587.0-413.0|630.0-370.0| 4963.5/9000
04) Komodo 5 x64                |409.0-591.0|472.5-527.5|475.5-524.5|     **    |530.5-469.5|547.0-453.0|552.0-448.0|582.0-418.0|585.0-415.0|593.0-407.0| 4746.5/9000
05) Ivanhoe 46h x64             |381.0-619.0|414.0-586.0|433.5-566.5|469.5-530.5|     **    |505.0-495.0|527.0-473.0|543.0-457.0|550.5-449.5|564.5-435.5| 4388.0/9000
06) Robbolito 0.10 x64s         |357.5-642.5|434.5-565.5|446.0-554.0|453.0-547.0|495.0-505.0|     **    |507.0-493.0|555.0-445.0|543.0-457.0|566.0-434.0| 4357.0/9000
07) Rybka 4.1 x64s              |356.0-644.0|403.0-597.0|430.5-569.5|448.0-552.0|473.0-527.0|493.0-507.0|     **    |502.5-497.5|521.5-478.5|555.5-444.5| 4183.0/9000
08) Robbolito 0.085g3 x64       |314.5-685.5|390.0-610.0|406.5-593.0|418.0-582.0|457.0-543.0|445.0-555.0|497.5-502.5|     **    |521.0-479.0|545.0-455.0| 3994.5/9000
09) Saros 3.0 x64               |325.5-674.5|362.0-638.0|413.0-587.0|415.0-585.0|449.5-550.5|457.0-543.0|478.5-521.5|479.0-521.0|     **    |553.0-447.0| 3932.5/9000
10) Stockfish 2.2.2 x64s        |307.5-692.5|364.5-635.5|370.0-630.0|407.0-593.0|435.5-564.5|434.5-566.0|444.5-555.4|455.0-545.0|447.0-553.0|     **    | 3665.0/9000
                                +-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+--------------

Dann noch die LS-Rangliste mit allen bis dato getesteten Engineversionen:

Rank Name                     Elo    +    - games score oppo. draws
   1 Houdini 2.0c x64        3120    5    5 13000   64%  3020   39%
   2 Houdini 1.5a x64        3086    5    6 10000   58%  3030   42% (best freeware (multicore))
   3 Strelka 5.5 x64         3078    5    5 13000   58%  3023   47% (singlecore)
   4 Critter 1.6a x64        3067    5    5 13000   56%  3024   48%
   5 Komodo 5 x64            3051    6    5 10000   53%  3028   41% (singlecore)
   6 Ivanhoe 46h x64         3029    5    5 13000   50%  3027   50% (best open source)
   7 Robbolito 0.10 x64s     3022    4    5 13000   49%  3027   51%
   8 Rybka 4.1 x64s          3012    5    5 13000   48%  3028   42%
   9 Komodo 4 x64s           3000    5    5 11000   46%  3031   38% (singlecore)
  10 Robbolito 0.085g3 x64   3000    5    5 13000   46%  3029   48% (singlecore)(Ippolit 2009)
  11 Saros 3.0 x64           2995    5    5 12000   44%  3035   43%
  12 Stockfish 120727Q x64s  2984    5    6  9000   42%  3042   40%
  13 Stockfish 2.2.2 x64s    2974    5    5 12000   42%  3035   39%
  14 Saros 3.2 x64           2959    6    5  9000   39%  3034   43%


(x64=64bit version, x64s=64bit SSE42-version)

Wer die Partien der LS-Rangliste haben will, kann mir seine eMail-Adresse per PM hier oder auf talkchess mitteilen, ich schicke dann in Kürze die Partien als PGN-File. Dieses Angebot erfolgt, damit Transparenz und Glaubwürdigkeit der Rangliste gewährleistet ist.

Grüße an alle - Stefan