LC0 v0.17.0-rc2 Net 11095 + 11 Top Engines

By Andreas Strangmüller Date 2018-08-27 19:10 Upvotes 3

Nun habe ich ebenfalls mein erstes Turnier mit Leela Chess Zero gestartet.

Turnierbedingungen:

Betriebssystem: Windows 10 64-bit
Hardware:       CPU Intel i7-6820HK @ 2,7 GHz (Intel Turbo-Boost aus), 16 GB RAM
GPU:            NVidia GeForce GTX 980M, 8 GB Memory, 1536 CUDA Cores, 1038 MHz Base Clock, 2500 MHz GDDR5 Memory Clock
GUI:            Arena 3.5.1
Engines:        1 Kern, 64-Bit (pext/bmi2 oder popcnt), default settings
Bedenkzeit:     5 Minuten + 3 Sekunden
Hash:           256 MB
Buch:           4 Züge Eröffnungsbuch (Partie wird mit vertauschten Farben wiederholt)
Ponder:         aus
Large Pages:    aus
Tablebases:     keine
LC0-Version:    LC Zero CUDA v0.17.0-rc2 Network 11095 (20x256), 2 worker threads

LC Zero CUDA erreicht ca. 2500 Rollouts in der Sekunde bei selektiver Suchtiefe 28 in der Grundstellung bei einem Netzwerk mit 20 Blöcken und 256 Filtern.
Stockfish 9 erreicht auf einem Kern ca. 1,45 Millionen Knoten nach einer Minute Rechenzeit in der Grundstellung.
Somit ist der Leela-Ratio Wert bei diesem Turnier (2500 * 875) / 1.450.000 = 1,51

Name des Turniers: LC0 v0.17.0-rc2 Net 11095 + 11 Top Engines
Stand nach 132 Partien:

                                   1  2  3  4  5  6  7  8  9 10 11 12
   1 Komodo 12.1.1          +261  ** 10 ½½ 1½ ½1 1½ 11 11 ½1 11 11 11  18.0/22
   2 Houdini 6.03           +150  01 ** ½0 ½½ 1½ 1½ 11 ½1 ½½ 11 11 ½1  15.5/22
   3 LC0 v0.17.0-rc2 11095  +132  ½½ ½1 ** ½½ ½½ ½½ ½½ 11 ½1 1½ 1½ 11  15.0/22  147.50
   4 Stockfish 9            +132  0½ ½½ ½½ ** 1½ ½½ ½½ 11 11 ½1 11 ½1  15.0/22  141.75
   5 Fire 7.1                +47  ½0 0½ ½½ 0½ ** ½½ ½½ 10 11 1½ ½1 11  12.5/22
   6 Booot 6.3.1             +15  0½ 0½ ½½ ½½ ½½ ** ½½ ½0 ½1 11 01 ½1  11.5/22  112.25
   7 Shredder 13             +15  00 00 ½½ ½½ ½½ ½½ ** ½½ 1½ 11 ½1 1½  11.5/22  102.75
   8 Fizbo 2                 -80  00 ½0 00 00 01 ½1 ½½ ** ½½ ½0 01 11   8.5/22
   9 Andscacs 0.94          -114  ½0 ½½ ½0 00 00 ½0 0½ ½½ ** 0½ ½1 ½1   7.5/22
  10 Ethereal 10.55         -132  00 00 0½ ½0 0½ 00 00 ½1 1½ ** 10 1½   7.0/22
  11 Gull 3                 -170  00 00 0½ 00 ½0 10 ½0 10 ½0 01 ** ½½   6.0/22
  12 Laser 1.6              -261  00 ½0 00 ½0 00 ½0 0½ 00 ½0 0½ ½½ **   4.0/22

By guest171218 Date 2018-08-27 19:56

Hallo,

super klasse!! und bitte weiter darüber berichten.
weshalb haben sie nicht die neuere ethereal version 10.88 genommen?
lt. cegt 3plus1 und ponder an hat die wohl schon wieder stark zugelegt,
z.zt. besser als deep shredder version 13, siehe:

http://cegt.forumieren.com/t1018-testing-ethereal-10-88-x64

Gruß MiKa.

By Andreas Strangmüller Date 2018-08-27 20:43

Hallo Mika,

Ethereal 10.55 ist die aktuellste Version: https://github.com/AndyGrant/Ethereal/releases
Die 10.88 ist noch kein öffentliches Release.

Das Turnier geht über 264 Partien = 4 Runde a 66 Partien.
Denke Stockfish 9 wird noch ein wenig zulegen.

Grüße,
Andreas

By Andreas Strangmüller Date 2018-09-02 08:04 Upvotes 2

Endstand nach 264 Partien:

                                  1    2    3    4    5    6    7    8    9    10   11   12
1   Komodo 12.1.1          +201  **** 10½½ 1½01 ½½½½ ½101 1½½½ 111½ 1111 ½111 111½ 111½ 1111  33.5/44
2   Houdini 6.03           +170  01½½ **** ½½01 ½0½0 1½½1 1½11 1111 ½111 ½½1½ 111½ 1111 ½11½  32.0/44
3   Stockfish 9            +160  0½10 ½½10 **** ½½½½ 1½11 ½½½1 ½½01 1111 11½1 ½111 111½ ½111  31.5/44
4   Lc0 v0.17.0-rc2 11095  +150  ½½½½ ½1½1 ½½½½ **** ½½11 ½½11 ½½11 11½½ ½111 1½01 1½½½ 111½  31.0/44
5   Fire 7.1                +23  ½010 0½½0 0½00 ½½00 **** ½½10 ½½1½ 100½ 11½1 1½½½ ½111 1111  23.5/44
6   Booot 6.3.1             -15  0½½½ 0½00 ½½½0 ½½00 ½½01 **** ½½10 ½0½½ ½11½ 11½1 010½ ½1½1  21.0/44
7   Shredder 13             -31  000½ 0000 ½½10 ½½00 ½½0½ ½½01 **** ½½0½ 1½0½ 11½½ ½11½ 1½11  20.0/44
8   Fizbo 2                 -55  0000 ½000 0000 00½½ 011½ ½1½½ ½½1½ **** ½½0½ ½01½ 0110 1111  18.5/44
9   Andscacs 0.94           -72  ½000 ½½0½ 00½0 ½000 00½0 ½00½ 0½1½ ½½1½ **** 0½½½ ½111 ½111  17.5/44
10  Ethereal 10.55         -123  000½ 000½ ½000 0½10 0½½½ 00½0 00½½ ½10½ 1½½½ **** 10½0 1½10  14.5/44
11  Gull 3                 -141  000½ 0000 000½ 0½½½ ½000 101½ ½00½ 1001 ½000 01½1 **** ½½10  13.5/44
12  Laser 1.6              -274  0000 ½00½ ½000 000½ 0000 ½0½0 0½00 0000 ½000 0½01 ½½01 ****   7.5/44

Alle Partien:
http://www.fastgm.de/schach/Lc0_v0.17.0-rc2_11095.7z

By Peter Martan Date 2018-09-02 08:16

Kann man mal rein so als Vermutung in den Raum stellen, dass komodo mehr von der Teilnahme von LC0 profitiert hat, als SF und Houdini, letzterer aber immer noch mehr als SF?

By Andreas Strangmüller Date 2018-09-02 19:26

Bei 44 Partien liegt die Fehlertoleranz etwa bei +- 12,5 % oder +- 4 Punkten bei den Spitzenengines oder +- 90 Elo bei einem Konfidenzniveau von 95 %.
Jeder der ersten 4 Engines hätte das Turnier demnach theoretisch gewinnen können. Diese Vermutung trifft es noch am ehesten.

By Tom Paul Date 2018-09-02 10:11

Andreas Strangmüller schrieb:

Endstand nach 264 Partien:
<code> 1 2 3 4 5 6 7 8 9 10   11   12
1   Komodo 12.1.1 +201 **** 10½½ 1½01 ½½½½ ½101 1½½½ 111½ 1111 ½111 111½ 111½ 1111 33.5/44
2   Houdini 6.03    +170 01½½ **** ½½01 ½0½0 1½½1 1½11 1111 ½111 ½½1½ 111½ 1111 ½11½ 32.0/44
3   Stockfish 9 +160 0½10 ½½10 **** ½½½½ 1½11 ½½½1 ½½01 1111 11½1 ½111 111½ ½111 31.5/44
4   Lc0 v0.17.0-rc2 11095 +150 ½½½½ ½1½1 ½½½½ **** ½½11 ½½11 ½½11 11½½ ½111 1½01 1½½½ 111½ 31.0/44
5   Fire 7.1 +23 ½010 0½½0 0½00 ½½00 **** ½½10 ½½1½ 100½ 11½1 1½½½ ½111 1111 23.5/44
6   Booot 6.3.1    -15 0½½½ 0½00 ½½½0 ½½00 ½½01 **** ½½10 ½0½½ ½11½ 11½1 010½ ½1½1 21.0/44
7   Shredder 13    -31 000½ 0000 ½½10 ½½00 ½½0½ ½½01 **** ½½0½ 1½0½ 11½½ ½11½ 1½11 20.0/44
8   Fizbo 2    -55 0000 ½000 0000 00½½ 011½ ½1½½ ½½1½ **** ½½0½ ½01½ 0110 1111 18.5/44
9   Andscacs 0.94    -72 ½000 ½½0½ 00½0 ½000 00½0 ½00½ 0½1½ ½½1½ **** 0½½½ ½111 ½111 17.5/44
10 Ethereal 10.55    -123 000½ 000½ ½000 0½10 0½½½ 00½0 00½½ ½10½ 1½½½ **** 10½0 1½10 14.5/44
11 Gull 3    -141 000½ 0000 000½ 0½½½ ½000 101½ ½00½ 1001 ½000 01½1 **** ½½10 13.5/44
12 Laser 1.6 -274 0000 ½00½ ½000 000½ 0000 ½0½0 0½00 0000 ½000 0½01 ½½01 ****   7.5/44</code>

Alle Partien:
<a class='urs' href='http://www.fastgm.de/schach/Lc0_v0.17.0-rc2_11095.7z'>http://www.fastgm.de/schach/Lc0_v0.17.0-rc2_11095.7z</a>

Nur weil LC0 gegen Ethereal verloren hat, ist es nicht auf dem zweiten Platz gelandet.

By Reinhold Stibi Date 2018-09-02 10:39

Lc0 v0.17.0 Network 11141 GTX 1051 gegen Ethereal 10.88   8 Threads
Eröffnung: 4 Move von Pohl   4 Min. + 6 Sek.je Zug

22 Partien +7 =14   -1   =63,6 %   =+97 Elo

By Rainer Maikowski Date 2018-09-02 11:02

Interesssant ist, dass LCO besonders lange Seeschlangen produziert (bis zu 241 Züge), d.h. auch oft erst im späten Endspiel gewinnt. So schlecht kann das also nicht sein.
R.Maikowski

By Michael Scheidl Date 2018-09-02 12:31

Insgesamt nur eine Niederlage, aber zwei Siege gegen H6. Meine Skepsis muß ich über Bord werfen, auch zumal das ja noch garnicht die "Überhardware" war.