Hallo zusammen,

Da das letzte offizielle Stockfishrelease schon mehr als 6 Monate alt ist, habe ich mal die aktuellste Entwicklungsversion (vom 22.06.12) getestet. Entwicklungsversionen werden nur in der Komplett-Liste gelistet (siehe ganz unten)...Ergebnis +7 Elo.

Testbedingungen: Notebook mit Intel i7-2630QM Prozessor (4 Kerne, 2GHz Takt, Windows 7 64bit Home Premium). Geschwindigkeit der Hardware: Houdini 2.0c auf einem Core etwa 2.1 Mio Kn/s, auf 4 Cores etwa 7.5 Mio Kn/s (bei vollem Brett), FritzMark=20.2. HyperThreading off.
Bedenkzeit: 20''+250ms Fischerbonus (ca. 40 Sekunden pro Partie je Engine), keine Tablebases, 1 Core/Thread und 64 MB Hash pro Engine, kein Pondern, 500 Vorgabestellungen aus der Frank Q. Datenbank (von mir handverlesen, nur Hauptsysteme (kein Holländisch etc.)). Gespielt wird bis zum Matt oder bis zum Remis, die GUI gibt keine Partie auf und auch Remis erst bei 500 Zügen - also gar nicht). Benutzt wird die LittleBlitzerGUI. Dazu merke ich hier nochmal an: Alle Partien wurden/werden im Gauntlet-Modus gespielt, weil nur so die Vorgabestellungen auch alle sequentiell und mit vertauschten Farben korrekt abgespielt werden. Die Ranglisten werden mit bayeselo (mm 0 1) erstellt und die Ergebnisse an Robbolito 0.085g3 x64 mit 3000 Elo gefixt.

Hier nun zunächst die LS-Rangliste mit den besten Engineversionen (nur offizielle Releases, keine Entwicklungsversionen und auch keine Spezialsettings) (jeder gegen jeden, je 1000 Partien):

Rank Name                    Elo    +    - games score oppo. draws
   1 Houdini 2.0c x64       3120    6    5  9000   64%  3020   40%
   2 Strelka 5.5 x64        3078    5    5  9000   58%  3024   48% (singlecore)
   3 Critter 1.6a x64       3066    5    5  9000   56%  3026   50%
   4 Ivanhoe 46h x64        3028    5    5  9000   50%  3030   52% (best open source)
   5 Robbolito 0.10 x64s    3025    5    5  9000   49%  3030   53%
   6 Rybka 4.1 x64s         3012    5    5  9000   47%  3032   43%
   7 Robbolito 0.085g3 x64  3000    5    5  9000   45%  3033   49% (singlecore)(Ippolit 2009)
   8 Komodo 4 x64s          3000    6    5  9000   46%  3033   39% (singlecore)
   9 Saros 3.0 x64          2995    5    5  9000   45%  3033   45%
  10 Stockfish 2.2.2 x64s   2973    6    5  9000   41%  3036   40%

Dazu die passende Kreuztabelle:

                                |     01    |     02    |     03    |     04    |     05    |     06    |     07    |     08    |     09    |     10    |
                                +-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+--------------         
01) Houdini 2.0c x64            |     **    |548.5-451.5|563.0-437.0|619.0-381.0|642.5-357.5|644.0-356.0|668.5-331.5|685.5-314.5|674.5-325.5|692.5-307.5| 5738.0/9000   
02) Strelka 5.5 x64             |451.5-548.5|     **    |498.5-501.5|586.0-414.0|565.5-434.5|597.0-403.0|614.0-386.0|610.0-390.0|638.0-362.0|635.5-364.5| 5196.0/9000
03) Critter 1.6a x64            |437.0-563.0|501.5-498.5|     **    |566.5-433.5|554.0-446.0|569.5-430.5|584.5-415.5|593.5-406.5|587.0-413.0|630.0-370.0| 5023.5/9000
04) Ivanhoe 46h x64             |381.0-619.0|414.0-586.0|433.5-566.5|     **    |505.0-495.0|527.0-473.0|549.5-450.5|543.0-457.0|550.5-449.5|564.5-435.5| 4468.0/9000
05) Robbolito 0.10 x64s         |357.5-642.5|434.5-565.5|446.0-554.5|495.0-505.0|     **    |507.0-493.0|521.0-479.0|555.0-445.0|543.0-457.0|566.0-434.0| 4425.0/9000
06) Rybka 4.1 x64s              |356.0-644.0|403.0-597.0|430.5-569.5|473.0-527.0|493.0-507.0|     **    |520.5-479.5|502.5-497.5|521.5-478.5|555.5-444.5| 4255.5/9000
07) Komodo 4 x64s               |331.5-668.5|386.0-614.0|415.5-584.5|450.5-549.5|479.0-521.0|479.5-520.5|     **    |514.4-485.5|505.0-495.0|536.5-463.5| 4098.0/9000
08) Robbolito 0.085g3 x64       |314.5-685.5|390.0-610.0|406.5-593.0|457.0-543.0|445.0-555.0|497.5-502.5|485.5-514.4|     **    |521.0-479.0|545.0-455.0| 4062.0/9000
09) Saros 3.0 x64               |325.5-674.5|362.0-638.0|413.0-587.0|449.5-550.5|457.0-543.0|478.5-521.5|495.0-505.0|479.0-521.0|     **    |553.0-447.0| 4012.5/9000
10) Stockfish 2.2.2 x64s        |307.5-692.5|364.5-635.5|370.0-630.0|435.5-564.5|434.0-566.0|444.5-555.5|463.5-536.5|455.0-545.0|447.0-553.0|     **    | 3721.5/9000
                                +-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+-----------+--------------

Dann noch die LS-Rangliste mit allen bis dato getesteten Engineversionen:

Rank Name                    Elo    +    - games score oppo. draws
   1 Houdini 2.0c x64       3119    5    5 12000   64%  3016   39%
   2 Houdini 1.5a x64       3085    5    5 10000   58%  3029   42% (best freeware (multicore))
   3 Strelka 5.5 x64        3077    5    5 12000   58%  3020   47% (singlecore)
   4 Critter 1.6a x64       3068    5    5 12000   57%  3021   49%
   5 Ivanhoe 46h x64        3028    5    5 12000   51%  3024   51% (best open source)
   6 Robbolito 0.10 x64s    3022    5    5 12000   50%  3024   52%
   7 Rybka 4.1 x64s         3011    5    5 12000   48%  3025   42%
   8 Robbolito 0.085g3 x64  3000    5    5 12000   46%  3026   49% (singlecore)(Ippolit 2009)
   9 Komodo 4 x64s          2999    5    5 12000   46%  3026   38% (singlecore)
  10 Saros 3.0 x64          2995    5    5 11000   45%  3033   44%
  11 Stockfish 120622 x64s  2979    5    6  9000   42%  3035   41%
  12 Stockfish 2.2.2 x64s   2972    5    5 11000   42%  3033   39%
  13 Saros 3.2 x64          2958    5    6  9000   39%  3033   43%

Wer die Partien der LS-Rangliste haben will, kann mir seine eMail-Adresse per PM hier oder auf talkchess mitteilen, ich schicke dann in Kürze die Partien als PGN-File. Dieses Angebot erfolgt, damit Transparenz und Glaubwürdigkeit der Rangliste gewährleistet ist.

Grüße an alle - Stefan