Not logged inCSS-Forum
Forum CSS-Online Help Search Login
CSS-Shop Impressum Datenschutz
Up Topic Hauptforen / CSS-Forum / Rating List (240 sec. + 2.40 sec.)
- - By Andreas Strangmüller Date 2013-10-19 17:58

Playing conditions

CPU:          4.2 GHz Intel Core i7-2600K (4-Core)
OS:           Windows 7 64-Bit
Tool:         Cutechess-Cli (Concurrency 3, 1 Core remains free for OS activities), no draw and resign rules
Cores:        All Engines 1 Core
Hash-Table:   256 MB
Time control: 240 sec. + 2.40 sec.
Tablebases:   None
Openings:     150 different opening positions (no book)
Positions:    Changing colors (300 games per match)
Ponder:       Off
Lerning:      Off

  ELOStat Start Elo: 3000

     Program                 Elo    +   -   Games   Score   Av.Op.  Draws
  -------------------------------------------------------------------------
   1 Houdini 3             : 3122    8   8  3900    66.9 %   2999   44.7 %
   2 Komodo 5.1            : 3071   10  10  2700    62.2 %   2985   46.8 %
   3 Komodo 5.1r2          : 3067   10  10  2700    61.0 %   2989   45.1 %
   4 Stockfish 4           : 3061    9   9  2700    60.1 %   2990   50.0 %
   5 Critter 1.6a          : 3044    7   7  3900    55.6 %   3005   54.8 %
   6 Stockfish 3 13070207  : 3044    9   9  2700    58.1 %   2988   49.4 %
   7 Gull 2.2              : 3027    9   9  2700    54.8 %   2994   52.5 %
   8 Bouquet 1.8           : 3020    9   9  2700    53.7 %   2995   52.1 %
   9 Gull 2.1              : 3013    9   9  2700    53.1 %   2991   53.8 %
  10 Bouquet 1.6           : 3008    9   9  2700    52.4 %   2992   52.7 %
  11 Rybka 4.1             : 3001    7   7  3900    48.8 %   3009   53.1 %
  12 Naum 4.2              : 2879    8   8  3900    30.9 %   3018   41.4 %
  13 Protector 1.5.0       : 2874    9   9  3900    30.3 %   3019   39.5 %
  14 Hannibal 1.3          : 2865    9   9  3900    29.2 %   3019   40.5 %

   Only newest Versions:

     Program                 Elo    +   -   Games   Score   Av.Op.  Draws
  -------------------------------------------------------------------------
   1 Houdini 3             : 3124   10  10  2700    68.7 %   2987   42.6 %
   2 Komodo 5.1r2          : 3071   10  10  2700    61.0 %   2993   45.1 %
   3 Stockfish 4           : 3065    9   9  2700    60.1 %   2994   50.0 %
   4 Critter 1.6a          : 3049    9   9  2700    57.6 %   2996   52.6 %
   5 Gull 2.2              : 3031    9   9  2700    54.8 %   2998   52.5 %
   6 Bouquet 1.8           : 3024    9   9  2700    53.7 %   2998   52.1 %
   7 Rybka 4.1             : 3004    9   9  2700    50.5 %   3001   52.5 %
   8 Naum 4.2              : 2882   10  10  2700    31.8 %   3014   41.4 %
   9 Protector 1.5.0       : 2880   10  10  2700    31.6 %   3014   39.9 %
  10 Hannibal 1.3          : 2870   10  10  2700    30.2 %   3015   40.5 %
Parent - - By U. Haug Date 2013-10-19 21:30
Hallo Andreas,

sehr schön, mal wieder etwas von dir zu lesen. Erinnerst du dich noch an unsere Fernpartie im IECG WM-Finale 2004? Grünfeld-Indisch, du hattest Weiß, erreichtest mit feinem Spiel Vorteil, der aber nicht zum Sieg ausreichte. Trotzdem hast du den IECG Weltmeistertitel erringen können - phantastisch! Spielst du noch Fernschach oder hast du dich mehr dem Computerschach zugewandt?

[quote="Andreas Strangmüller"]
   Only newest Versions:

     Program                 Elo    +   -   Games   Score   Av.Op.  Draws
  -------------------------------------------------------------------------
   1 Houdini 3             : 3124   10  10  2700    68.7 %   2987   42.6 %
   2 Komodo 5.1r2          : 3071   10  10  2700    61.0 %   2993   45.1 %
   3 Stockfish 4           : 3065    9   9  2700    60.1 %   2994   50.0 %
   4 Critter 1.6a          : 3049    9   9  2700    57.6 %   2996   52.6 %
   5 Gull 2.2              : 3031    9   9  2700    54.8 %   2998   52.5 %
   6 Bouquet 1.8           : 3024    9   9  2700    53.7 %   2998   52.1 %
   7 Rybka 4.1             : 3004    9   9  2700    50.5 %   3001   52.5 %
   8 Naum 4.2              : 2882   10  10  2700    31.8 %   3014   41.4 %
   9 Protector 1.5.0       : 2880   10  10  2700    31.6 %   3014   39.9 %
  10 Hannibal 1.3          : 2870   10  10  2700    30.2 %   3015   40.5 %

[/quote]

Für mich interessant, dass die Engine Rybka 4.1, die ich lange Zeit für optimal hielt, offenbar inzwischen messbar abgeschlagen ist.

Freundliche Grüße,

Ulrich
Parent - By Andreas Strangmüller Date 2013-10-20 09:18
Hallo Ulrich,

kann mich noch sehr gut an unsere Partie erinnern.
Erstens, weil sie eröffnungstheoretisch sehr interessant war und zweitens, da es aus meiner Sicht eine fehlerfreie Partie war, in der Du immer die besten Züge zum Remis gefunden hast. Und das war keineswegs einfach.

Aktuell spiele ich kein Fernschach mehr. Widme mich mehr dem Spiel am Brett bei Mannschaftskämpfen und dem Computerschach.

Ja, Rybka war lange Zeit die Nr. 1 und bei Analysen auch mein Favorit. Das änderte sich erst mit Houidini.
Mittlerweile sind aufgrund der fehlenden Weiterentwicklung Rybkas weitere Engines vorbeigezogen.
Wie gut Rybka war und immer noch ist, sieht man jedoch an der Tatsache, dass seit Erscheinen der 4er Version bereits fast 3 1/2 Jahre vergangen sind!

Viele Grüße,
Andreas
Parent - By Roland Riener Date 2013-10-24 07:47
Ulrich Haug schrieb:

Zitat:
Für mich interessant, dass die Engine Rybka 4.1, die ich lange Zeit für optimal hielt, offenbar inzwischen messbar abgeschlagen ist.


Mir scheint, sie ist weiterhin für Analysen sehr interessant, weil sie offenbar besondere Wege geht.

Roland
Parent - By Andreas Strangmüller Date 2013-10-28 17:41
Das Resultat von Hannibal 1.4b ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - By Andreas Strangmüller Date 2013-11-06 18:55
Das Resultat von Komodo 6 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - By Andreas Strangmüller Date 2013-11-15 18:31
Das Resultat von Gull 2.3 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - - By Andreas Strangmüller Date 2013-11-24 16:40
Das Resultat von Stockfish 4 13111119 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - - By Stefan Pohl Date 2013-11-24 17:00
Andreas Strangmüller schrieb:

Das Resultat von Stockfish 4 13111119 ist nun online.

<a class='urs' href='http://www.fastgm.de'>http://www.fastgm.de</a>

Viele Grüße,
Andreas


Sehr schön. Genau das Ergebnis, das ich erwartet habe, nämlich der deutliche Sieg im Einzelvergleich gegen Houdini 3 (während es in der LS-Rangliste für diese Stockfishversion mit deutlich weniger Bedenkzeit noch eine ganz knappe Niederlage gegen Houdini 3 gab), aber insgesamt ein schlechteres Scoring gegen andere Engines, dadurch ist Stockfish auch in deiner Rangliste noch knapp hinter Houdini 3.
Also alles wie in der LS-Rangliste, nur mit einem höheren Score-Niveau für Stocki, eben weil Stockfish mit mehr Zeit/besserer Hardware überproportional zulegt (besonders im Vergleich zu Houdini 3). Eben weil Stockfish noch selektiver rechnet als andere und sich mit mehr Zeit nicht so im Variantensuchbaum festfrißt wie weniger stark selektiv rechnende Engines...

Gruß - Stefan
Parent - - By Frank Quisinsky Date 2013-11-25 00:56 Edited 2013-11-25 00:59
Hi,

und je mehr schwächere Engines hinzukommen desto größer wird dann wieder der Unterschied zu Houdini
Computerschach kann schon verrückt sein ...

Gruß
Frank

Ist im übrigen keine Vermutung sondern ich erlebe es selbst in meiner Ratingliste.
Houdini verliert wirklich doppelt so viele Partien wie Stockfish aber gewinnt deutlich mehr als Stockfish in ein Remis vermasselt.
Und bei mir läuft eine Partie 22.25 Minuten im Schnitt ... also deutlich länger als dieser Test hier bei 4.3 GHz auf i7 vierte Generation.
Parent - By Tom Paul Date 2013-11-25 01:46
Du könntest z.B. schauen, wie oft Stockfish und Houdini gegen andere Gegner Threefold Repetition machen.
Parent - - By Andreas Strangmüller Date 2013-12-05 23:23
Das Resultat von Houdini 4 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - By Stefan Pohl Date 2013-12-06 12:04 Edited 2013-12-06 12:08
Andreas Strangmüller schrieb:

Das Resultat von Houdini 4 ist nun online.

<a class='urs' href='http://www.fastgm.de'>http://www.fastgm.de</a>

Viele Grüße,
Andreas


Deine Liste wird so langsam richtig gut. Da wächst was heran. Sehr schön, daß du wenigstens 300 Partien pro Einzelbegegnung machst. Bei deinem Tempo von 4'+2.4'' ist das schon richtig viel. Ist klar, daß da keine 1000 Partien drin sind. Dafür aber eine schön lange Bedenkzeit. Und auch eine Kreuztabelle  mit den Einzelbegegnungen - find ich gut! Eine Rangliste ist nicht alles, gerade die Einzelergebnisse der großen 3 sind doch immer besonders interessant. Und da können andere Ranglisten außer unseren nichts statistisch belastbares bieten. Ob das noch zeitgemäß ist?!?
Wie man sieht, sind die Ergebnisse durchaus nahe an den LS-Ergebnissen dran, bis auf Stockfish, der erwartungsgemäß bei deinen längeren Bedenkzeiten generell besser liegt. Ansonsten alles ziemlich ähnlich, Komodo wird mit mehr Zeit auch etwas besser, allerdings nicht so viel wie Stockfish.
Houdini 4 liegt bei dir 28 Elo vor Houdini 3, bei mir 30 Elo. Da kann man also von einer sehr verlässlichen Gesamtmessung bei kurzen und längeren Zeiten ausgehen, die ca. 30 Elo ergibt.
Schön wäre ein Test von Mars und PanChess. Aber da bleibe ich wohl allein auf weiter Flur. Aber sonst: Weiter so!

Gruß - Stefan

PS: Sehr schön auch, daß die Kreuztabelle von vor dem letzten Update auch noch sichtbar ist, dann kann man schön vergleichen, wie die neue Version im Verhältnis zur alten Version abschneidet. Du hast von dem Besten gelernt!
Parent - By Stefan Schiffermüller Date 2013-12-06 12:32
+28 für Houdini 4 sind durchaus innerhalb der Schwankungsbreite, wenn man dein Resultat mit dem IPON-Resultat +39 (siehe talkchess) vergleicht. Außerdem wird in der IPON, so weit ich mich erinnere, mit 3+4-Steinern EGTB getestet. Falls Ingo Bauer die Syzygy statt Nalimov für Houdini 4 verwendet hat, ergibt sich hier vielleicht nochmal ein kleiner Gewinn.

Gruß Stefan
Parent - By Andreas Strangmüller Date 2013-12-15 16:59
Das Resultat von Stockfish DD ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - By Andreas Strangmüller Date 2013-12-24 14:19
Das Resultat von Komodo TCEC ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - - By Andreas Strangmüller Date 2014-01-03 08:01
Das Resultat von Chiron 2 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - By Stefan Schiffermüller Date 2014-01-03 11:56
Interessant ist, dass die beiden Houdinis in der von der Bedenkzeit vergleichbaren IPON-Liste besser abschneiden. Dafür kann es folgende Gründe geben:

1. Zufall
2. Houdini pondert besser (IPON mit pondern)
3. Houdini punktet besser gegen Schwächere (in der IPON mehr vorhanden)

Gruß Stefan
Parent - - By Andreas Strangmüller Date 2014-01-26 20:02
Das Resultat von Stockfish 3 ist nun online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - - By Tom Paul Date 2014-01-26 20:10
Wie alt ist nochmal Stockfish 3???
Parent - By Andreas Strangmüller Date 2014-01-26 20:20
Stockfish 3 ist vom 30.04.2013, also erst gut ein 3/4 Jahr alt.

Stockfish 3  = 3001
Stockfish 4  = 3047
Stockfish DD = 3100
Parent - - By Patrick Götz Date 2014-01-26 23:35
Danke, interessant.
Damit liegt Stockfish 3 immerhin 15 Elopunkte vor Rybka 4.1.
Weißt Du schon ob und wann Du einen aktuellen Stocki in Deiner Liste aufnehmen wirst?
a) Da die jeweils ca.+65 Elopunkte aus dem Framework bei dir jeweils zu ca. +50 Elo zusammengeschmolzen sind, schätze ich
b) den aktuellen Stockfish (der im Framework bei +32 Elo steht) in Deiner Liste auf +25 Elo zu Stockfish DD.
Damit also nur noch 9 Elo hinter Houdini4 und 17 Elo vor Houdini3!

Wenn im Framework noch 11 Elo hinzugewonnen werde, könnte Stockfish in Deiner Liste exakt auf Augenhöhe mit Houdini4 sein.
Parent - By Andreas Strangmüller Date 2014-01-27 00:48 Edited 2014-01-27 00:54
Aktuell läuft noch Shredder 12, als nächstes ist eine akutelle Developement-Version von Stockfish eingeplant, Texel 1.0.3, Deep Junior Yokohama, Gull 2.8 Beta oder 2.9 Alpha, Deep Hiarcs 14 usw.
Parent - - By Andreas Strangmüller Date 2014-02-01 01:13
Das Resultat von Deep Shredder 12 ist online.

http://www.fastgm.de

Viele Grüße,
Andreas
Parent - - By Ernest Bonnem Date 2014-02-02 02:05
Andreas Strangmüller schrieb:

Das Resultat von Deep Shredder 12 ist online.

Konnte es nicht finden...
Parent - By Andreas Strangmüller Date 2014-02-02 07:40
240 + 2.40 (i7)

Complete List: 01.02.2014

     Program                 Elo    +   -   Games   Score   Av.Op.  Draws
  -------------------------------------------------------------------------
   1 Houdini 4             : 3135    8   8  4200    69.7 %   2991   40.8 %
   2 Houdini 3             : 3109    7   7  5100    65.2 %   3000   45.5 %
   3 Stockfish 4 13111119  : 3105    9   9  3000    63.9 %   3005   49.6 %
   4 Stockfish DD          : 3102    8   8  3900    66.3 %   2984   48.3 %
   5 Komodo TCECr          : 3088    8   8  3600    65.4 %   2977   45.9 %
   6 Komodo 6              : 3082    8   8  3900    58.9 %   3019   49.7 %
   7 Komodo 5.1            : 3062   10  10  2700    62.2 %   2975   46.8 %
   8 Komodo 5.1r2          : 3057    9   9  3000    61.9 %   2973   44.8 %
   9 Stockfish 4           : 3053    8   8  3600    59.3 %   2987   51.3 %
  10 Gull 2.3              : 3036    7   7  4800    53.9 %   3008   50.7 %
  11 Stockfish 3 13070207  : 3035    9   9  2700    58.1 %   2978   49.4 %
  12 Critter 1.6a          : 3033    6   6  6900    53.6 %   3008   53.4 %
  13 Gull 2.2              : 3017    8   8  3300    54.5 %   2986   52.1 %
  14 Bouquet 1.8           : 3012    6   6  5700    51.0 %   3005   50.7 %
  15 Stockfish 3           : 3006    9   9  3000    49.1 %   3012   51.5 %
  16 Gull 2.1              : 3003    9   9  2700    53.1 %   2982   53.8 %
  17 Bouquet 1.6           : 2999    9   9  2700    52.4 %   2982   52.7 %
  18 Rybka 4.1             : 2992    6   6  6900    47.5 %   3009   51.4 %
  19 Chiron 2              : 2938    9   9  3600    42.5 %   2990   43.4 %
  20 Hannibal 1.4b         : 2902    7   7  5400    33.8 %   3019   42.9 %
  21 Naum 4.2              : 2872    7   7  6300    29.4 %   3024   40.0 %
  22 Protector 1.5.0       : 2867    7   7  6900    30.0 %   3015   39.0 %
  23 Hannibal 1.3          : 2856    9   9  3900    29.2 %   3010   40.5 %
  24 Deep Shredder 12      : 2819   11  11  3000    24.8 %   3012   33.6 %
Up Topic Hauptforen / CSS-Forum / Rating List (240 sec. + 2.40 sec.)

Powered by mwForum 2.29.3 © 1999-2014 Markus Wichitill