TCEC S15 - Rapid Bonus

By Benno Hartwig Date 2019-06-17 13:00

Leider keinen guten Zeitpunkt habe ich erwischt,
aber ich finde, die Teilnehmer sollten in diesem Thread doch schon mal aufgeführt sein:

Platz Engine                          Anz  Pkt                         
-----------------------------------------------
   1  Houdini 6.03                     5   4.5
   2  Fire 021819                      5   4.0
   3  AllieStein v0.5-dev_1359f44-n8   5   4.0
   4  Stockfish 19061419               5   3.5
   5  Komodo 2356.00                   5   3.5
   6  LCZero v0.21.2-n42547            5   3.0
   7  Ethereal 11.38                   5   3.0
   8  KomodoMCTS 2356.00               5   3.0
   9  Xiphos 0.5.3                     6   3.0 
  10  Laser 230319                     6   2.0
  11  Andscacs 0.95123                 6   1.5
  12  Chiron 230119                    6   1.5
  13  Jonny 8.1                        5   0.5
  14  Fizbo 2                          5   0.0

By Michael Scheidl Date 2019-06-20 15:54

Halbzeitstand:

 N Engine                         Rtng  Pts Gm     SB X  Elo Perf St Al Lc Ho Km Ko Et Fi La Xi An Fz Ch Jo

 1 Stockfish 19061419             3985 19.0 26 225.50 0  +53 73.1 ·· =1 == 1= == == == =1 =1 11 1= 11 1= 11
 2 AllieStein v0.5-dev_1359f44-n8 3858 18.0 26 206.00 0 +174 69.2 =0 ·· == == =1 == == == 11 =1 11 11 11 1=
 3 LCZero v0.21.2-n42547          3990 17.5 26 210.75 0   -0 67.3 == == ·· == == == =1 11 11 == =1 1= 1= =1
 4 Houdini 6.03                   3945 16.0 26 191.25 0   +3 61.5 0= == == ·· == 1= == 1= 1= == 1= 1= =1 1=
 5 KomodoMCTS 2356.00             3885 16.0 26 188.75 0  +76 61.5 == =0 == == ·· == =1 =1 == == =1 11 11 ==
 6 Komodo 2356.00                 3938 16.0 26 187.75 0  +12 61.5 == == == 0= == ·· == 1= 1= == =1 1= =1 11
 7 Ethereal 11.38                 3868 14.0 26 161.00 0  +33 53.8 == == =0 == =0 == ·· =0 == == == 1= 11 11
 8 Fire 021819                    3867 13.0 26 145.25 0   +3 50.0 =0 == 00 0= =0 0= =1 ·· 1= == 1= =1 1= 1=
 9 Laser 230319                   3838 12.0 26 123.50 0   +7 46.2 =0 00 00 0= == 0= == 0= ·· == 1= 11 =1 11
10 Xiphos 0.5.3                  3852 12.0 26 145.00 0  -11 46.2 00 =0 == == == == == == == ·· == == == =1
11 Andscacs 0.95123              3832  8.5 26 100.00 0  -98 32.7 0= 00 =0 0= =0 =0 == 0= 0= == ·· 0= == =1
12 Fizbo 2                       3786  7.5 26  78.75 0  -75 28.8 00 00 0= 0= 00 0= 0= =0 00 == 1= ·· =1 ==
13 Chiron 230119                 3752  6.5 26  77.00 0  -68 25.0 0= 00 0= =0 00 =0 00 0= =0 == == =0 ·· ==
14 Jonny 8.1                     3775  6.0 26  72.50 0 -110 23.1 00 0= =0 0= == 00 00 0= 00 =0 =0 == == ··

Die Engines auf den Rängen 10...14 haben zusammen vier Gewinnpartien geschafft, Stockfish alleine zwölf

By Benno Hartwig Date 2019-06-20 17:15

Thanx für die schöne Tabelle.
Ich denke aber, es ist jetzt erst 1/3 durch.

By Michael Scheidl Date 2019-06-20 19:38

Zitat:

...es ist jetzt erst 1/3 durch.

Stimmt! Dank der Bedenkzeit von 12m+3s soll es aber in einer Woche um sein.

Die Tabelle ist copy & paste von der alten "Legacy" Liveseite, wo nicht mehr alle aber einige Bewerbe noch parallel gezeigt werden: http://legacy-tcec.chessdom.com/live.php (Der Menüpunkt Crosstable auf der neuen Liveseite läßt hier in Chrome ein Script oder sowas erscheinen und keine Tabelle.)

By Guenter Stertenbrink Date 2019-06-20 21:04

Xiphos ist ja der totale Remisschieber.
Viel schlimmer als Fire, das ja bekannt war dafuer.

By Hauke Lutz Date 2019-06-20 21:55

Das Xiphos gegen Lc0, Houdini und die Komodos nicht verloren hat ist stark, aber die Punkte Andscacs, Fizbo und Chiron fehlen natürlich.
Ohne Platz 11-14 sieht es besser aus.

Stockfish 19061419 19,0 - 7,0 = 12,0
LCZero v0.21.2-n42547    17,5 - 6,0 = 11,5
AllieStein v0.5-dev_1359f44-n8 18,0 - 7,5 = 10,5
Houdini 6.03 16,0 - 6,0 = 10,0
Komodo 2356.00 16,0 - 6,5 =   9,5
KomodoMCTS 2356.00 16,0 - 6,5 =   9,5
Ethereal 11.38 14,0 - 6,5 =   7,5
Xiphos 0.5.3    12,0 - 4,5 =   7,5
Fire 021819 13,0 - 6,0 =   7,0
Laser 230319 12,0 - 7,0 =   5,0

By Peter Weise Date 2019-06-21 14:46 Upvotes 1

Das hört sich nach einem Gerücht an.


CEGT 40/4
Xiphos 0.5 x64 1CPU  Remisquote 51.5%  Partien 2600
Fire 7.1 x64 1CPU    Remisquote 52.8%  Partien 4900
 
CEGT 40/20
Xiphos 0.5 x64 1CPU  Remisquote 47.8%  Partien 1626
Fire 7.1 x64 1CPU    Remisquote 53.7%  Partien 2845
 
CEGT 3+1 und ponder
Xiphos 0.5 x64 1CPU  Remisquote 51.3%  Partien 3600
Fire 7.1 x64 1CPU    Remisquote 59.6%  Partien 3600
 
CEGT 5+3 und ponder
Xiphos 0.5 x64 1CPU  Remisquote 45.9%  Partien 1500
Fire 7.1 x64 1CPU    Remisquote 54.6%  Partien 1500

By Benno Hartwig Date 2019-06-21 06:26

Faszinierend finde ich, dass neben Lc0 auch Alliestein es schaffte, sich erst mal vor Houdini und Komodo zu platzieren.
Diese beiden Engines waren ja vor kurzem noch Leader of the Gang. Zu ihrer Zeit eben.

By Lothar Jung Date 2019-06-22 16:46 Edited 2019-06-22 16:53

Nach ungefähr der Hälfte der Partien, liegen AllieStein und Leela mit jeweils 27,5 Punkten in „Schlaglänge“ hinter SF mit 28 Punkten.
Die aktuellen NNs geben wohl nicht mehr soviel halbe Punkte gegen schwächere Engines ab.
Lc0 hat noch keine Partie verloren. Houdini und Komodo liegen 2,5 Punkte hinter den NNs.
AllieStein gehört vielleicht zu den drei stärksten Engines.

By Benno Hartwig Date 2019-06-22 17:16

    N Engine                         Rtng  Pts Gm     SB X  Elo Perf St   Al   Lc   Ho   Ko   Km   Fi   Et   La   Xi   An   Ch   Fz   Jo  

    1 Stockfish 19061419             3985 28.0 40 511.25 0  +39 70.0 ···· =10  ===  1==  ==1  ==1  =1=  ===  =1=  111  1=1  1==  11=  111=
    2 AllieStein v0.5-dev_1359f44-n8 3858 27.5 40 497.00 0 +260 68.8 =01  ···· ===  ==1  ===  =1=  ==0  ===  111  =11  111= 111  11=  1== 
    3 LCZero v0.21.2-n42547          3990 27.5 40 510.75 0  +14 68.8 ===  ===  ···· ===  ===  ==1  111  =11  111  ===  =1=  1=1= 1=1  =1= 
    4 Houdini 6.03                   3945 25.0 40 468.50 0  +16 62.5 0==  ==0  ===  ···· 1=1  ==1  1=1  ===  1=1= ===  1==  =1=  1=1  1== 
    5 Komodo 2356.00                 3938 25.0 40 438.00 0  +27 62.5 ==0  ===  ===  0=0  ···· ===  1=1  ===  1==  ===  =11  =11  1=11 111 
    6 KomodoMCTS 2356.00             3885 23.0 40 415.00 0  +65 57.5 ==0  =0=  ==0  ==0  ===  ···· =1=  =11  ===  ==1= =1=  11=  11=  ==1 
    7 Fire 021819                    3867 22.5 40 390.25 0  +84 56.3 =0=  ==1  000  0=0  0=0  =0=  ···· =111 1=1  ==1  1=1  1==  =11  1=1 
    8 Ethereal 11.38                 3868 20.0 40 355.00 0   +2 50.0 ===  ===  =00  ===  ===  =00  =000 ···· ===  ===  ===  11=  1=1  111 
    9 Laser 230319                   3838 17.0 40 284.75 0  -33 42.5 =0=  000  000  0=0= 0==  ===  0=0  ===  ···· ===  1==  =1=  11=  11= 
   10 Xiphos 0.5.3                   3852 17.0 40 317.00 0  -63 42.5 000  =00  ===  ===  ===  ==0= ==0  ===  ===  ···· ==0  ===  ==1  =1=   
   11 Andscacs 0.95123               3832 14.5 40 263.00 0 -106 36.3 0=0  000= =0=  0==  =00  =0=  0=0  ===  0==  ==1  ···· ==1  0==  =1= 
   12 Chiron 230119                  3752 12.0 40 225.00 0  -36 30.0 0==  000  0=0= =0=  =00  00=  0==  00=  =0=  ===  ==0  ···· =0=  ==1   
   13 Fizbo 2                        3786 11.0 40 192.75 0 -129 27.5 00=  00=  0=0  0=0  0=00 00=  =00  0=0  00=  ==0  1==  =1=  ···· === 
   14 Jonny 8.1                      3775 10.0 40 196.75 0 -140 25.0 000= 0==  =0=  0==  000  ==0  0=0  000  00=  =0=  =0=  ==0  ===  ····

By Michael Hoeppenstein Date 2019-06-22 17:33

Hallo Benno, wo kann man den AllieStein v0.5-dev_1359f44-n8 herunterladen?
Grüße, Michael

By Stefan Pohl Date 2019-06-22 20:05

Michael Hoeppenstein schrieb:

Hallo Benno, wo kann man den AllieStein v0.5-dev_1359f44-n8 herunterladen?
Grüße, Michael

Gar nicht.
Allie gibt es bisher nur in V0.4
https://github.com/manyoso/allie/releases

Die verwendeten “Leelenstein“-Netze kann man nur gegen Bezahlung bei patreon bekommen (selber Schuld, wer dafür zahlt):
https://www.patreon.com/jjosh

By Lothar Jung Date 2019-06-24 22:03 Edited 2019-06-24 22:08

Nach rd. 2/3 des Tuniers führt das Trio aus AllieStein, LC0 und SF mit 55, 55, 54.5 Punkten.
In „sicheren“ Abstand Houdini und Komodo rd. 2-3 Punkte dahinter.
Meine Sympathie gilt - auch den übrigen - offenen und kostenlosen Engines.

By Benno Hartwig Date 2019-06-25 06:10 Edited 2019-06-25 06:18

Stand nach "2/3 + 1"

   N Engine                         Rtng  Pts Gm      SB X  Elo Perf Lc    Al    St    Ho    Ko    Fi    Km    Et    La    Xi    An    Fz    Ch    Jo  

   1 LCZero v0.21.2-n42547          3990 39.5 57 1078.75 0  +43 69.3 ····· ====1 ===== ===1= ===== 1111  ==1=  =111  1111  ====  =1==  1=1=  1=1=1 =1=1 
   2 AllieStein v0.5-dev_1359f44-n8 3858 38.5 57  978.25 0 +351 67.5 ====0 ····· =01== ==10  ===1  ==0=  =1==  ====  1111  =111  111== 11=11 1111  1===1
   3 Stockfish 19061419             3985 38.5 57 1016.75 0  +17 67.5 ===== =10== ····· 1===  ==1== =1==  ==1=  ====  =1=1  1111  1=1=  11==  1==1= 111=1
   4 Houdini 6.03                   3945 36.5 57  965.50 0  +49 64.0 ===0= ==01  0===  ····· 1=1=  1=1=  ==11  ===1  1=1=1 ===1  1==== 1=1=1 =1==  1==1=
   5 Komodo 2356.00                 3938 35.5 57  886.00 0  +39 62.3 ===== ===0  ==0== 0=0=  ····· 1=1=  ====  ====  1===  ====  =111  1=111 =1111 1111=
   6 Fire 021819                    3867 34.0 57  830.00 0 +173 59.6 0000  ==1=  =0==  0=0=  0=0=  ····· =0==  =1111 1=1=1 ==1=1 1=1=1 =111  1==11 1=1= 
   7 KomodoMCTS 2356.00             3885 32.5 57  821.50 0  +73 57.0 ==0=  =0==  ==0=  ==00  ====  =1==  ····· =11=  ===10 ==1== =1=1= 11=1= 11==  ==1=1
   8 Ethereal 11.38                 3868 28.0 57  700.50 0  -21 49.1 =000  ====  ====  ===0  ====  =0000 =00=  ····· ===== ===1= ===1= 1=1== 11==  111= 
   9 Laser 230319                   3838 24.0 57  574.50 0  -57 42.1 0000  0000  =0=0  0=0=0 0===  0=0=0 ===01 ===== ····· ===== 1===  11=1  =1==  11=1 
  10 Xiphos 0.5.3                   3852 24.0 57  623.50 0 -104 42.1 ====  =000  0000  ===0  ====  ==0=0 ==0== ===0= ===== ····· ==01  ==1=  ===1= =1== 
  11 Andscacs 0.95123               3832 21.0 57  558.75 0 -136 36.8 =0==  000== 0=0=  0==== =000  0=0=0 =0=0= ===0= 0===  ==10  ····· 0===  ==11  =1== 
  12 Fizbo 2                        3786 16.5 57  419.75 0 -157 28.9 0=0=  00=00 00==  0=0=0 0=000 =000  00=0= 0=0== 00=0  ==0=  1===  ····· =1==  ===1 
  13 Chiron 230119                  3752 16.0 57  430.25 0  -83 28.1 0=0=0 0000  0==0= =0==  =0000 0==00 00==  00==  =0==  ===0= ==00  =0==  ····· ==1= 
  14 Jonny 8.1                      3775 14.5 57  414.00 0 -188 25.4 =0=0  0===0 000=0 0==0= 0000= 0=0=  ==0=0 000=  00=0  =0==  =0==  ===0  ==0=  ·····

PS:

> Meine Sympathie gilt - auch den übrigen - offenen und kostenlosen Engines.

Meine Sorge gilt aber auch den kommerziellen Entwicklern.
Ich weiß nicht, ob es wirklich gut für die Szene ist, wenn komerzielles Interesse so gar keine Triebfeder mehr ist für ein weiteres Vorantreiben der Thematik?
Obwohl, wer weiß: Vielleicht taucht ja auch bald ein kommerzieller NN-Entwickler auf, der die anderen NN-Projekte das virtuelle Fürchten lehrt.

By Patrick Götz Date 2019-06-25 11:41

Benno Hartwig schrieb:

Meine Sorge gilt aber auch den kommerziellen Entwicklern.
Ich weiß nicht, ob es wirklich gut für die Szene ist, wenn kommerzielles Interesse so gar keine Triebfeder mehr ist für ein weiteres Vorantreiben der Thematik?

Das war bisher immer ein berechtigtes Argument.
Im Moment scheint es aber so, dass sich selbst mit immensen Aufwand nur noch wenige Elo-Püncktchen aus der stärksten Engine Stockfish heraus pressen lassen.
Wir scheinen uns einem Plateau zu nähern das auch mit einer lebhaften kommerzielle Szene und deren finanziellen Möglichkeiten kaum überwunden werden könnte.

By Stefan Pohl Date 2019-06-25 11:53

Patrick Götz schrieb:

Benno Hartwig schrieb:

Aber das Komodoteam plant doch zumindest ein eigenes NeuronalNetz, soweit ich weiß...
Problematisch sehe ich eher die Monokultur: Die bisherigen guten NNs aus dem lc0-Lernprozeß, also die 10000er, die 30000er und jetzt die 40000er Nets haben, obwohl sie alle bei Null begonnen haben und die Lernparameter nicht identisch waren (und die 40000er Nets sogar eine andere, interne Struktur (SE-Nets) haben), alle den gleichen Spielstil entwickelt. Nur, daß jede Netzgeneration eben etwas besser wurde.

By Benno Hartwig Date 2019-06-27 06:13 Edited 2019-06-27 07:07

An der Spitze sieht es jetzt so aus:

 1 Stockfish 19061419             3985 50.0 72 1679.00 0  +69 69.4 ······ ====== =10==1 1===1= =1===  ==1=== ==1==1 ====1  11111  =1=1=  1=1=1  11===  1==1=1 111=11
 2 LCZero v0.21.2-n42547          3990 48.5 72 1668.75 0   +9 67.4 ====== ······ ====1= ===1== 1111=  ====== ==1=== =111=1 =====  11111  =1===  1=1=1  1=1=1= =1=1= 
 3 AllieStein v0.5-dev_1359f44-n8 3858 48.5 72 1556.00 0 +437 67.4 =01==0 ====0= ······ ==101  ==0==  ===1=1 =1===  =====  =1111  1111=  111==1 11=11= 111111 1===1=

Lc0 und Allie punktgleich.
Interessant ist aber, dass Lc0 dafür 25 Siege und keine Niederlage braucht, während Allie 30 Siege und 5 Niederlagen spielt, und dafür dann natürlich auch 10 remis weniger!

Lässt sich das im Spiel auch sonst so wiedererkennen? Ist Allie risikoreicher? Spielt die Engine mehr auf Angriff und nimmt auch Niederlagen in Kauf?
Oder ist das hier jetzt einfach Zufall?

By Reinhold Stibi Date 2019-06-27 07:57

Toll die Ergebnisse von AllieStein v.0.5.

Hoffentlich kann man diese Top-Engine in Bälde downloaden, dann könnte man sich selber ein Bild machen.

Schön finde ich dass Stockfish noch nicht abgeschrieben ist.

Man kann nicht erwarten, dass sich die Engines vom Spielstíl sehr unterscheiden, denn alle spielen sehr dynamisch und angriffslustig.
Anders würde sich der Erfolg nicht realisieren lassen. Mit defensiver Spielweise kommen viel zu viele Remis zustande.

By Benno Hartwig Date 2019-06-28 06:01

Und so ging es nun aus:

  N Engine                         Rtng  Pts Gm      SB X  Elo Perf St     Lc     Al     Ho     Ko     Fi     Km     Et     Xi     La     An     Fz     Ch     Jo    

   1 Stockfish 19061419             3985 55.5 78 2007.25 0 +112 71.2 ······ ====== =10==1 1===1= ==1=== =1===1 ==1==1 ====1= 111111 =1=1=1 1=1=11 11===1 1==1=1 111=11
   2 LCZero v0.21.2-n42547          3990 53.5 78 1968.00 0  +31 68.6 ====== ······ ====1= ===1== ====== 1111=1 ==1=== =111=1 ====== 111111 =1===1 1=1=11 1=1=1= =1=1==
   3 AllieStein v0.5-dev_1359f44-n8 3858 53.5 78 1899.25 0 +506 68.6 =01==0 ====0= ······ ==1011 ===1=1 ==0==1 =1==== =====1 =1111= 1111=1 111==1 11=11= 111111 1===1=
   4 Houdini 6.03                   3945 48.0 78 1731.50 0  +10 61.5 0===0= ===0== ==0100 ······ 1=1==1 1=1==0 ==111= ===1== ===1== 1=1=11 1===== 1=1=11 =1==1= 1==1=1
   5 Komodo 2356.00                 3938 46.5 78 1625.50 0  -13 59.6 ==0=== ====== ===0=0 0=0==0 ······ 1=1=== ====== ====== ====== 1===1= =111=1 1=111= =1111= 1111=1
   6 Fire 021819                    3867 46.0 78 1581.75 0 +232 59.0 =0===0 0000=0 ==1==0 0=0==1 0=0=== ······ =0==== =11111 ==1=1= 1=1=11 1=1=11 =111=1 1==11= 1=1=1=
   7 KomodoMCTS 2356.00             3885 43.0 78 1540.50 0  +69 55.1 ==0==0 ==0=== =0==== ==000= ====== =1==== ······ =11=== ==1=== ===101 =1=1== 11=1== 11==1= ==1=1=
   8 Ethereal 11.38                 3868 38.0 78 1325.75 0  -28 48.7 ====0= =000=0 =====0 ===0== ====== =00000 =00=== ······ ===1== ====== ===1=1 1=1=== 11==1= 111==1
   9 Xiphos 0.5.3                   3852 34.0 78 1207.75 0  -96 43.6 000000 ====== =0000= ===0== ====== ==0=0= ==0=== ===0== ······ ====== ==01== ==1=1= ===1== =1===1
  10 Laser 230319                   3838 32.5 78 1047.75 0  -92 41.7 =0=0=0 000000 0000=0 0=0=00 0===0= 0=0=00 ===010 ====== ====== ······ 1====1 11=111 =1===1 11=1==
  11 Andscacs 0.95123               3832 28.5 78 1001.75 0 -198 36.5 0=0=00 =0===0 000==0 0===== =000=0 0=0=00 =0=0== ===0=0 ==10== 0====0 ······ 0===== ==11== =1==11
  12 Fizbo 2                        3786 23.0 78  809.25 0 -208 29.5 00===0 0=0=00 00=00= 0=0=00 0=000= =000=0 00=0== 0=0=== ==0=0= 00=000 1===== ······ =1==01 ===1==
  13 Chiron 230119                  3752 22.5 78  825.50 0 -107 28.8 0==0=0 0=0=0= 000000 =0==0= =0000= 0==00= 00==0= 00==0= ===0== =0===0 ==00== =0==10 ······ ==1=0=
  14 Jonny 8.1                      3775 21.5 78  814.50 0 -217 27.6 000=00 =0=0== 0===0= 0==0=0 0000=0 0=0=0= ==0=0= 000==0 =0===0 00=0== =0==00 ===0== ==0=1= ······

Stockfish hat mit 2.0 Punkten Vorsprung gewonnen. Respekt!
Und Lc0 und AllieStein punktgleich dahinter.
Lc0 mit 29 Siegen und ohne Niederlage, Allie mit 34 Siegen und 5 Niederlagen. Diesen Unterschied finde ich schon bemerkenswert.
Die alten Superhaudegen Houdini und Komodo dann auf den Plätzen 4 und 5, immerhin 7,5 bzw 9,0 Punkte hinter Stockfish.
Und Fire schlug sich auch achtbar. Wenn er nur nicht so von Lc0 verprügelt worden wäre...

Benno