Not logged inCSS-Forum
Forum CSS-Online Help Search Login
CSS-Shop Impressum Datenschutz
Up Topic Hauptforen / CSS-Forum / Houdini 3 x64 - Stockfish 3 64 Ja
- - By Andreas Strangmüller Date 2013-05-14 15:07
4 Matches "Houdini 3 x64 - Stockfish 3 64 Ja" gespielt mit dem Cutechess-Client,
jeweils 1 Kern, 128 MB Hash, 5000 Partien, Buch: 8moves_GM.pgn, unterschiedliche Zeitkontrollen

Hardware:
AMD FX-8350 @ 4,6 GHz, Turbo Core aus
Fritzmark: 30.41 / 14598

--------------------------------------------------------------

                                7.50+0.05 Sek.

1   Houdini 3 x64        +2870/-415/=1715  74.55%   3727.5/5000
2   Stockfish 3 64 Ja   +415/-2870/=1715  25.45%   1272.5/5000

--------------------------------------------------------------

                              15.00+0.05 Sek.

1   Houdini 3 x64        +2581/-487/=1932  70.94%   3547.0/5000
2   Stockfish 3 64 Ja   +487/-2581/=1932  29.06%   1453.0/5000

--------------------------------------------------------------

                              30.00+0.05 Sek.

1   Houdini 3 x64        +2363/-515/=2122  68.48%   3424.0/5000
2   Stockfish 3 64 Ja   +515/-2363/=2122  31.52%   1576.0/5000

--------------------------------------------------------------

                              60.00+0.05 Sek.

1   Houdini 3 x64        +2154/-567/=2279  65.87%   3293.5/5000
2   Stockfish 3 64 Ja   +567/-2154/=2279  34.13%   1706.5/5000

--------------------------------------------------------------

Alle Partien zum Download gibt's hier: http://www.fastgm.de/schach/sf3-h3.zip
Für das vorherige Match "Komodo CCT - Stockfish 3 64 Ja" hier: http://www.fastgm.de/schach/sf3-kocct.zip

Grüße,
Andreas
Parent - - By Ingo Bauer Date 2013-05-14 17:28
Hallo,

Ich hoffe die 5 min kommen noch

Nimmt man das zusammen kommt folgendes raus:

AMD FX-8350 @ 4,6 GHz, Turbo Core aus

                                7.50+0.05 Sek.

1   Houdini 3 x64        +2870/-415/=1715  74.55%   3727.5/5000
2   Stockfish 3 64 Ja   +415/-2870/=1715  25.45%   1272.5/5000

1   Komodo CCT         +2104/-783/=2113 63.21%  3160.5/5000
2   Stockfish 3 64 JA  +783/-2104/=2113 36.79%  1839.5/5000

--------------------------------------------------------------

                              15.00+0.05 Sek.

1   Houdini 3 x64        +2581/-487/=1932  70.94%   3547.0/5000
2   Stockfish 3 64 Ja   +487/-2581/=1932  29.06%   1453.0/5000  +3,61

1   Komodo CCT         +1929/-837/=2234 60.92%  3046.0/5000
2   Stockfish 3 64 Ja  +837/-1929/=2234 39.08%  1954.0/5000   +2,29

--------------------------------------------------------------

                              30.00+0.05 Sek.

1   Houdini 3 x64        +2363/-515/=2122  68.48%   3424.0/5000
2   Stockfish 3 64 Ja   +515/-2363/=2122  31.52%   1576.0/5000  +2,49

1   Komodo CCT         +1763/-867/=2370 58.96%  2948.0/5000
2   Stockfish 3 64 Ja  +867/-1763/=2370 41.04%  2052.0/5000 +1,96

--------------------------------------------------------------

                              60.00+0.05 Sek.

1   Houdini 3 x64        +2154/-567/=2279  65.87%   3293.5/5000
2   Stockfish 3 64 Ja   +567/-2154/=2279  34.13%   1706.5/5000  +2,61

1   Komodo CCT         +1720/-851/=2429 58.69%  2934.5/5000
2   Stockfish 3 64 Ja  +851/-1720/=2429 41.31%  2065.5/5000  +0,27

Wie man sehen kann ist, der Zuwachs von Stockfish zu Komodo bei jeder neuen Zeitkontrolle kleiner als zu Houdini. D.H. je kürzer di eZeitkontrolle desto schlechter Stockfish gegen Houdini aber besser gegen Komodo. Leider bedeutet das auch das diese drei Engines mit Sicherheit bei sehr kurzen Zeitkontrollen unterschiedliches Verhalten an den Tag legen werden oder sehr kurze Zeitkontrollen sich nicht identisch zu langen Zeitkontrollen verhalten. Das Rating dieser drei Engines muß verschieden aussehen.

H3 vs Komodo wäre jetzt noch interessant.

Gruß
Ingo
Parent - - By Andreas Strangmüller Date 2013-05-14 20:04
Hallo Ingo,

die 5 Min. kommen noch, allerdings habe ich dem Match Houdini 3 gegen Komodo CCT bei den vier auserwählten Bedenkzeiten den Vorzug gegeben.
Es läuft bereits.

Erstes Ergebnis:
7.50+0.05 Sec.

1   Houdini_3   +1965/-810/=2225 61.55%  3077.5/5000
2   Komodo_CCT  +810/-1965/=2225 38.45%  1922.5/5000


Mal sehen was sich aus den bisher gesammelten Daten alles auswerten läßt. Jeweils eine separate Rangliste pro Bedenkzeit vielleicht?

Viele Grüße,
Andreas
Parent - By Ingo Bauer Date 2013-05-15 05:49
[quote="Andreas Strangmüller"]
...
Mal sehen was sich aus den bisher gesammelten Daten alles auswerten läßt. Jeweils eine separate Rangliste pro Bedenkzeit vielleicht?
...
[/quote]

Das könntest du auch jetzt schon machen, mit allen drei Engines und Bayeselo. Natürlich fehlen die direkten Partien zw. Houdini und Komodo aber um so interesanter wird die Fähigkeit der Eloformel korrekte Elozahlen, in Relation verschiedener Engines die NICHT gegeneinander gespielt haben, vorherzusagen. Wobei das bei nur 3 Engines wirklich ein va banque Spiel ist. Interessant ist dann zu sehen wie sich die Elozahlen ändern wenn die jeweiligen Matche fertig sind.

Am interessantesten ist zu sehen wie sich die Listen pro Zeitkontrolle unerscheiden. Wobei die Reihenfolge bei nur 3 Engines wahrscheinlich nicht anders sein wird, aber die Abstände.

Gruß
Ingo
Parent - - By Andreas Strangmüller Date 2013-05-20 18:27
5 Matches "Houdini 3 x64 - Stockfish 3 64 Ja" gespielt mit dem Cutechess-Client
jeweils 1 Kern, 128 MB Hash, 5000 Partien, Buch: 8moves_GM.pgn, unterschiedliche Zeitkontrollen

Hardware:
AMD FX-8350 @ 4,6 GHz, Turbo Core aus
Fritzmark: 30.41 / 14598

--------------------------------------------------------------------

                         7.50+0.05 Sek.

1 Houdini 3 x64      +2870/-415/=1715 74.55%  3727.5/5000
2 Stockfish 3 64 Ja  +415/-2870/=1715 25.45%  1272.5/5000

--------------------------------------------------------------------

                        15.00+0.05 Sek.

1 Houdini 3 x64      +2581/-487/=1932 70.94%  3547.0/5000
2 Stockfish 3 64 Ja  +487/-2581/=1932 29.06%  1453.0/5000     +3,61%

--------------------------------------------------------------------

                        30.00+0.05 Sek.

1 Houdini 3 x64      +2363/-515/=2122 68.48%  3424.0/5000
2 Stockfish 3 64 Ja  +515/-2363/=2122 31.52%  1576.0/5000     +2,46%

--------------------------------------------------------------------

                        60.00+0.05 Sek.

1 Houdini 3 x64      +2154/-567/=2279 65.87%  3293.5/5000
2 Stockfish 3 64 Ja  +567/-2154/=2279 34.13%  1706.5/5000     +2,61%

--------------------------------------------------------------------

                       300.00+0.05 Sek.

1 Houdini 3 x64      +1950/-604/=2446 63.46%  3173.0/5000
2 Stockfish 3 64 Ja  +604/-1950/=2446 36.54%  1827.0/5000     +2,41%
--------------------------------------------------------------------

                       Gesamt

1 Houdini 3 x64      +11918/-2588/=10494 68.66%  17165.0/25000
2 Stockfish 3 64 Ja  +2588/-11918/=10494 31.34%   7835.0/25000

--------------------------------------------------------------------


Alle 25000 Partien als PGN: http://www.fastgm.de/schach/sf3-h3.zip

------------------------------------------------------------------------------------------------------------------------

Auswertung Bayeselo bzw. Elo:

                       Bayeselo                     7.50+0.05 Sec.                        Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      83   5  5  5000   75%   -83   34 %  |   1 Houdini 3    : 3093   8  8  5000    74.6 %   2907   34.3 %
   2 Stockfish 3   -83   5  5  5000   25%    83   34 %  |   2 Stockfish 3  : 2907   8  8  5000    25.4 %   3093   34.3 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                       Bayeselo                    15.00+0.05 Sek.                        Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      68   5  5  5000   71%   -68   39 %  |   1 Houdini 3    : 3078   8  8  5000    70.9 %   2922   38.6 %
   2 Stockfish 3   -68   5  5  5000   29%    68   39 %  |   2 Stockfish 3  : 2922   8  8  5000    29.1 %   3078   38.6 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                       Bayeselo                    30.00+0.05 Sek.                        Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      58   5  5  5000   68%   -58   42 %  |   1 Houdini 3    : 3067   7  7  5000    68.5 %   2933   42.4 %
   2 Stockfish 3   -58   5  5  5000   32%    58   42 %  |   2 Stockfish 3  : 2933   7  7  5000    31.5 %   3067   42.4 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                       Bayeselo                    60.00+0.05 Sek.                        Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      49   5  5  5000   66%   -49   46 %  |   1 Houdini 3    : 3057   7  7  5000    65.9 %   2943   45.6 %
   2 Stockfish 3   -49   5  5  5000   34%    49   46 %  |   2 Stockfish 3  : 2943   7  7  5000    34.1 %   3057   45.6 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                       Bayeselo                   300.00+0.05 Sek.                        Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      41   5  4  5000   63%   -41   49 %  |   1 Houdini 3    : 3048   7  7  5000    63.5 %   2952   48.9 %
   2 Stockfish 3   -41   4  5  5000   37%    41   49 %  |   2 Stockfish 3  : 2952   7  7  5000    36.5 %   3048   48.9 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                       Bayeselo                       Gesamt                              Elo                                

     Programm      Elo   +  -  Games Score Oppo. Draws  |     Programm       Elo    +  -  Games   Score   Av.Op.  Draws
   1 Houdini 3      59   4  4  25000  69%   -59   42 %  |   1 Houdini 3    : 3068   3  3  25000   68.7 %   2932   42.0 %
   2 Stockfish 3   -59   4  4  25000  31%    59   42 %  |   2 Stockfish 3  : 2932   3  3  25000   31.3 %   3068   42.0 %
                                                        |
--------------------------------------------------------+---------------------------------------------------------------

                                                              Games        :  25000 (finished)

                                                              White Wins   :   8512 (34.0 %)
                                                              Black Wins   :   5994 (24.0 %)
                                                              Draws        :  10494 (42.0 %)

                                                              White Perf.  : 55.0 %
                                                              Black Perf.  : 45.0 %

                                                              ECO A =   9918 Games (39.7 %)
                                                              ECO B =   6038 Games (24.2 %)
                                                              ECO C =   3238 Games (13.0 %)
                                                              ECO D =   2762 Games (11.0 %)
                                                              ECO E =   3044 Games (12.2 %)
Parent - By Patrick Götz (Mod.) Date 2013-05-20 22:48
Auch hier bestätigt sich, das die jeweils schwächere Engine (hier Stockfish), sich bei längeren Bedenkzeiten immer weiter der 50% Marke nähern kann.

Zitat:
der Zuwachs von Stockfish zu Komodo bei jeder neuen Zeitkontrolle kleiner als zu Houdini.

Richtig, aber der Grund
das der Zuwachs von Stockfish, gegen Komodo kleiner ist, liegt nur daran, dass Stockfish bei kurzer Bedenkzeit mit 36.79% bereits viel dichter an den 50% ist als im Spiel gegen Houdini.
Denn gegen Houdini holt Stockfish in der kürzesten Bedenkzeit nur 25.45%, so dass es auf dem Weg zu 50% noch um bis zu 24,55% zulegen kann, während es gegen Komodo nur noch max. 13,21% zulegen kann.
Dementsprechend legt Stockfish gegen Houdini im Schnitt knapp doppelt so viele Prozentpunkte zu wie gegen Komodo (da 24 knapp das doppelte von 13 ist).

Gru0
Patrick
Up Topic Hauptforen / CSS-Forum / Houdini 3 x64 - Stockfish 3 64 Ja

Powered by mwForum 2.29.3 © 1999-2014 Markus Wichitill