FCP: 100.000 Partien auf Haswell Hardware gespielt!

By Frank Qy. Date 2015-07-31 14:11 Upvotes 1

Hallo zusammen,

war ein langer Weg und viele Änderungen im Verlauf habe ich durchgeführt um den Weg zum Ziel ein wenig interessanter zu gestalten.
Nun steht im Grunde die Ratingliste nach ca. 2 Jahren Laufzeit und ich hätte einen sehr gute Stand wie seinerzeit bei der abgebrochenen SWCR Ratingliste.

Booot muss noch aufgenommen werden und ich habe alles drin was ich drin haben möchte.
Warte noch auf Bugfixes von Fizbo und Alfil.

Zukünftig lasse ich dann 2050 Partien Spießroutenläufe absolvieren.
Zwar wird es bei 41 Gegner dann hinsichtlich der Rating Entwicklung nach ca. 800 Partien langweilig (regt sich kaum etwas) aber die Ergebnisse aller Engines in meiner Liga 1 und 2 werden sehr früh sehr genau. Ein solcher Testlauf dauert dann bei 14 Cores ca. 4.5 Tage. Mehr als 6 Engines Updats im Monat kommen eh nicht bei den TOP-42.

Hier die aktuelle Liste (derzeit läuft Cheng 0.39 x64). Wie gesagt beim Rating passiert seit ca. 650 Partien nichts ... bleibt beständig bei + 38 Elo.

Code:

July 30th, 2015 (23:15)
... after 100140 games!
... after round 40 of 50, still running Cheng4 0.39 x64 test-run!

  41 Cheng 4.39 x64                              : 2794.2   13.2    717.5    1640   43.8%  +38,2 Elo
  54 Cheng4 0.38 x64                             : 2756.0   11.0   1005.0    2250   44.7%

   # PLAYER                                      : RATING  ERROR   POINTS  PLAYED    (%)
   1 Stockfish 26Apr2015 BMI2 x64                : 3159.0   14.2   1721.0    2090   82.3%
   2 Komodo 9 x64                                : 3157.0   14.9   1717.5    2090   82.2%
   3 Stockfish 6 BMI2 x64                        : 3141.3   17.3   1424.0    1700   83.8%
   4 Stockfish 02Oct2014 BMI2 x64, Contemp 17    : 3112.5   18.4    914.0    1150   79.5%
   5 Komodo 8 x64                                : 3110.2   13.6   1676.0    2100   79.8%
   6 Stockfish 03Aug2014 BMI2 x64                : 3110.1   14.7   1703.0    2100   81.1%
   7 Houdini 4 STD B x64                         : 3091.5   18.2    728.0    1040   70.0%
   8 Stockfish 26Mar2014 SSE42 x64               : 3090.3   20.9    858.5    1050   81.8%
   9 Komodo 7a x64                               : 3085.3   18.0    995.5    1250   79.6%
  10 Stockfish 5 SSE42 x64                       : 3084.1   20.2    796.0    1000   79.6%
  11 Komodo TCECr x64                            : 3054.6   19.5    824.5    1050   78.5%
  12 Fire 4 x64                                  : 3051.2   11.5   2007.5    2740   73.3%
  13 GullChess 3.0 BMI2 x64                      : 3043.2   10.6   2044.5    2890   70.7%
  14 Equinox 3.30 x64                            : 2996.4   10.8   1806.0    2690   67.1%
  15 GullChess 2.8 Beta BMI2 x64                 : 2995.2   18.8    760.5    1050   72.4%
  16 Critter 1.6a x64                            : 2984.2   12.8   1313.0    1990   66.0%
  17 Fire 3.0 AVX x64                            : 2959.1   12.4   1361.0    2100   64.8%
  18 Rybka 4.1 SSE42 x64                         : 2957.0   16.2    584.5    1090   53.6%
  19 Sting SF 4.8.4 x64                          : 2940.6   11.1   1385.5    2340   59.2%
  20 Protector 1.8.0 x64                         : 2940.6   15.0    664.5    1240   53.6%
  21 Protector 1.7.0 x64                         : 2917.1   11.7   1199.0    2150   55.8%
  22 Critter 0.90 SSE4 x64                       : 2906.6   11.6   1201.0    2150   55.9%
  23 Hannibal 1.5 x64                            : 2904.5   11.1   1364.5    2440   55.9%
  24 Texel 1.05 x64                              : 2902.4   10.4   1426.0    2540   56.1%
  25 Nirvanachess 2.1c POP x64                   : 2901.9   11.8   1119.0    1990   56.2%
  26 Chiron 2.0 x64                              : 2899.6    7.7   2671.5    4540   58.8%
  27 Andscacs 0.81 POP x64                       : 2891.3   15.2    552.5    1190   46.4%
  28 Naum 4.6 x64                                : 2890.0   10.3   1578.0    2790   56.6%
  29 Protector 1.6.0 x64                         : 2889.0   13.5    939.5    1600   58.7%
  30 Hannibal 1.4b x64                           : 2868.7    9.3   2011.0    3550   56.6%
  31 Texel 1.04 x64                              : 2854.6    9.5   1672.5    3000   55.8%
  32 Protector 1.5.0 JA x64                      : 2853.3   16.4    577.0    1050   55.0%
  33 Nirvanachess 2.0a x64                       : 2846.9   11.3   1253.5    2400   52.2%
  34 Hakkapeliitta 3.0 x64                       : 2841.8   16.0    445.0    1140   39.0%
  35 Senpai 1.0 SSE42 x64                        : 2837.2    8.0   2318.0    4540   51.1%
  36 Hiarcs 14 WCSC w32                          : 2829.8    7.8   2275.5    4540   50.1%
  37 Andscacs 0.72 POP x64                       : 2817.2   10.6   1202.5    2500   48.1%
  38 Sjeng c't 2010 w32                          : 2805.5   10.3   1185.5    2590   45.8%
  39 Shredder 12 x64                             : 2799.3    9.3   1436.5    3390   42.4%
  40 Texel 1.03 x64                              : 2795.2   16.0    495.0    1050   47.1%
  41 Cheng 4.39 x64                              : 2794.2   13.2    717.5    1640   43.8%
  42 Junior 13.3.00 x64                          : 2792.0    8.5   1690.5    3690   45.8%
  43 Junior 12.5.03 x64                          : 2787.1   14.6    591.0    1400   42.2%
  44 Vajolet2 2.0 POP x64                        : 2786.0   10.4   1098.5    2390   46.0%
  45 Junior 13.8.04 Yokohama x64                 : 2782.1   13.1    723.5    1700   42.6%
  46 Spike 1.4 Leiden w32                        : 2780.2    9.4   1418.5    3390   41.8%
  47 Deuterium 14.3.34.130 POP x64               : 2764.6   10.1   1201.5    2790   43.1%
  48 iCE 2.0 v2240 POP x64                       : 2763.3    7.7   2237.5    4690   47.7%
  49 Quazar 0.4 x64                              : 2763.0    9.4   1477.0    3540   41.7%
  50 DiscoCheck 5.2.1 x64                        : 2761.1    9.7   1237.0    2990   41.4%
  51 Spark 1.0 x64                               : 2759.1    7.2   2452.5    5290   46.4%
  52 SmarThink 1.70 SSE3 x64                     : 2757.9    8.5   1657.5    3890   42.6%
  53 Alfil 15.04 C# Beta 24 x64                  : 2756.6   14.3    653.5    1240   52.7%
  54 Cheng4 0.38 x64                             : 2756.0   11.0   1005.0    2250   44.7%
  55 Fizbo 1.3.1 x64                             : 2749.4   10.7   1078.5    2490   43.3%
  56 Zappa Mexico II x64                         : 2748.2    9.6   1266.5    3190   39.7%
  57 SmarThink 1.60 x64                          : 2747.6   16.3    418.0    1100   38.0%
  58 Thinker 5.4d Inert x64                      : 2740.5   10.6    962.5    2440   39.4%
  59 Vajolet2 1.45 POP x64                       : 2733.7    7.8   1958.5    4500   43.5%
  60 Vajolet2 1.28 POP x64                       : 2729.7   14.0    533.0    1500   35.5%
  61 Gaviota 1.0 AVX x64                         : 2727.9    7.3   2276.0    5390   42.2%
  62 Deuterium 14.2.33.276 x64                   : 2727.8    9.7   1356.5    3100   43.8%
  63 Atlas 3.80 x64                              : 2724.2   11.6    898.5    2190   41.0%
  64 Tornado 5.0 SSE4 x64                        : 2721.8   11.5    987.0    2300   42.9%
  65 MinkoChess 1.3 JA POP x64                   : 2721.0   11.9    790.0    1840   42.9%
  66 Arasan 17.5 POP x64                         : 2718.4   11.9    814.0    1890   43.1%
  67 EXchess 7.71b x64                           : 2718.0   14.7    556.5    1190   46.8%
  68 Andscacs 0.70 POP x64                       : 2708.2   15.3    456.5    1150   39.7%
  69 SmarThink 1.50 SSE3 x64                     : 2705.3   16.5    371.0    1050   35.3%
  70 Nirvanachess 1.7 x64                        : 2700.0   10.9   1035.5    2500   41.4%
  71 Rodent 1.7 Build 1 POP x64                  : 2699.7   12.6    709.0    1690   42.0%
  72 Murka 3 x64                                 : 2698.8   12.0    734.5    1840   39.9%
  73 Nemo 1.01 Beta POP x64                      : 2692.2   12.1    729.5    1850   39.4%
  74 Arasan 17.4 POP x64                         : 2689.6   10.7   1048.0    2400   43.7%
  75 Fizbo 1.2 x64                               : 2688.4   11.8    878.5    2100   41.8%
  76 Nirvanachess 1.6 x64                        : 2682.2   15.0    406.0    1400   29.0%
  77 Cheng4 0.36c x64                            : 2681.1   11.7    958.5    2200   43.6%
  78 EXchess 7.51b x64                           : 2679.5   11.8    767.5    2050   37.4%
  79 DisasterArea 1.54 x64                       : 2675.7   11.5    774.0    2000   38.7%
  80 Pedone 1.1 BMI2 x64                         : 2670.7   12.5    637.0    1650   38.6%
  81 Rodent 1.6 Build 6 POP x64                  : 2662.7   13.7    488.5    1400   34.9%
  82 Crafty 24.1 SSE42 x64                       : 2656.0    9.5   1159.0    2900   40.0%
  83 EXchess 7.31b x64                           : 2651.4   15.7    495.5    1100   45.0%
  84 Glaurung 2.2 JA x64                         : 2642.3   15.9    471.5    1000   47.1%
  85 Crafty 24.0 SSE42 x64                       : 2638.6   17.3    287.0    1050   27.3%
  86 Rodent 1.4 Build 2 POP x64                  : 2638.4   16.0    466.0    1000   46.6%
  87 Atlas 3.70em x64                            : 2636.8   16.2    468.0    1050   44.6%
  88 OctoChess r5190 SSE4 x64                    : 2633.2   16.2    458.5    1000   45.9%
  89 Rhetoric 1.4.1 x64                          : 2607.3   12.9    638.0    2000   31.9%
  90 Andscacs 0.64 POP x64                       : 2605.2   16.3    419.0    1000   41.9%
  91 Godel 3.4.9 x64                             : 2594.0   17.1    403.5    1000   40.4%
  92 Djinn 1.021 POP x64                         : 2524.8   17.2    312.0    1000   31.2%
  93 ProDeo 1.87 w32                             : 2518.0   17.1    303.5    1000   30.4%

White advantage = 40.15 +/- 0.84
Draw rate (equal opponents) = 48.34 % +/- 0.19

By Sedat Canbaz Date 2015-08-01 18:46 Edited 2015-08-01 19:03 Upvotes 1

Hello Frank,

Well, (using Google translator) I've noticed that you passed 100.000 games (40/10) on your Haswell Hardware, right ?!

This is simply an amazing work....BIG thank you as usual

Btw, I agree with you about the latest releases of Alfil and Fizbo
Yes...these engines seems to be buggy or at least not better than previous ones...

Also it is interesting to note that,
The latest Cheng 4.39 x64 is probably stronger in Elo than previous version
But I can not say the same thing...if we are talking about the improvement in tactics
For example (in my TTS), the older Cheng4 0.38 x64 version performed better ...

Another interesting note is that,
In your FCP (40/10): Stockfish is leader...where in SCCT (3m+2s), CEGT (40/20), CCRL (40/40) : Komodo

But however...
Stockfish/Komodo Elo points are very close to each other, and it is hard to determine which one is stronger

And it seems in 2015 year,
We have a great pleasure to compare the strength of these titans

Have a nice weekend,
Sedat

By Frank Qy. Date 2015-08-02 00:00

Hi Sedat,

I think that Cheng lost a little bit tactic in current version but without to lost the good safty in the beginning of the game.

Komodo 9 is in my rating list better as Stockfish 6.
Same info you can find in the work by the others.

The Stockfish version on place 1 in my list is from the same day Komodo was released!
Stockfish 6 is clearly older as Komodo 9. Only my list compare Stockfish / Komodo from the same day.

All is OK with my or the work by others.
The deal from my work are the + information to playing styles. Stats are clear and explain the faces from all of "our" top engines.

Have a nice day Sedat

I will give your test also a first look ... next week.

Best
Frank

By Clemens Keck Date 2015-08-02 19:08

geht ab wie ein D-Zug bei Dir mit 14cpu !
Ich schaue immer wieder gerne rein

Clemens

By Frank Qy. Date 2015-08-03 16:22

Hallo Clemens,

am liebsten wäre mir aber mal die Kisten auszuschalten.
Bin ja jetzt auch auf einen fast aktuellen Stand bzw. stehen nach Booot nur noch 2 neue Engine Updates aus.
Das hatte ich auch noch nicht ...

Ja, durch die neu eingepickte Maschine kann ich mein Liga System einfacher händeln.
Vielleicht werde ich dann zum Ende des Jahres noch die Liga 3 starten.

Schön das Du die Arbeit verfolgst.
Habe ja jetzt auch Rybka und Houdini drin ... war ja auch ein Wunsch von Dir auch wenn im Grunde natürlich keine neuen Erkenntnisse gewonnen werden konnten.

Gruß
Frank

By Benno Hartwig Date 2015-08-03 09:26

Thanx für die riesige Informationsmenge, die du bereitstellst und die du ständig erweiterst.
Ich überlege gerade, wann ich deinen Namen das erste mal in der CSS las.
Und ich denke, das muss bereits so in den mittleren 80ern gewesen sein. Richtig?

Benno

By Frank Qy. Date 2015-08-03 16:28

Hallo Benno,

in der CSS Zeitschrift war ich glaube ich nicht oft erwähnt.
Bin ja auch schon seit dem 10 Lebensjahr, also jetzt 38 Jahre dabei.

Hatte aber auch in jüngeren Jahren ein paar Aktivitäten laufen.
Ob Vereinszeitschrift und Computerschach oder für Ernst Musch oder Berthold Seifritz (Freeware Selection über Trödelmarkt erweitert) ...
Der Spruch bei Musch geht's Husch Husch ... das war mal ein Spaß beim telefonieren mit Ernst Musch.
Oder hier und da auch mal ein Test für Jan Lowmann.

Im Grunde habe ich aber still und heimlich an meiner eigenen Ratingliste mit Schachcomputer gewerkelt.
Internet hatte ich erst sehr spät, glaube so 1995 oder 1996 ...

Und zu der Informationsmenge ...
Das Problem ist jetzt eher, meine Ratingliste steht ... wird jetzt erst interessant und immer wenn ich so weit bin verliere ich die Lust.
Muss mich also selbst ein wenig motivieren um weiter zu machen.

Ist dann für mich auch immer so Ende Gelände ...
Keine neuen Erkenntnisse können gewonnen werden, maximal wenn etwas neues eingepickt wird.
Aber mich interessiert ja auch eher der Ablauf, die Statistiken, die Buchentwicklung etc..

Auch mein Buch ist mittlerweile auf einen Stand da gibt es nicht mehr so viele schlechte Variante die raus müssen.
Auch sind mittlerweile fast alle wichtigen Züge mit Prios belegt. Da ist kaum noch etwas zu verbessern bzw. sind immer nur geringe Änderungen wenn ich das Buch update.

Gruß
Frank