Testrun von Net 42850 durch

By Stefan Pohl Date 2019-08-02 12:48 Edited 2019-08-02 12:59

https://www.sp-cc.de/lc0-testing.htm

Auch das letzte Net der 40xxx Serie konnte keine weitere Steigerung bringen. Letztlich liegen alle 40xxx Nets, die ich getestet habe (inklusive dem T40.T8.610 (TCEC 15 Superfinal)) innerhalb von nur 12 Elo. Bei einer Errorbar von +/-9 also alle praktisch gleichauf. Die Abweichungen sind so gering, daß sie selbst bei 3000 Partien pro Testrun als Zufallsschwankungen gelten können. Denn die Vergleichs-Errorbar zwischen den 40xxx Netzen ist jeweils sqrt((9*9+(9*9))=12.7. Ergo kann man nicht sicher sagen, welches der Netze das Beste ist.
Jetzt teste ich Net 32930, also das Ende der 30xxx Serie, um zu messen, wieviel besser die 40xxx Nets gegenüber den 30xxx Nets sind. Danach kommt dann wahrscheinlich noch Net 11260, um auch den Fortschritt seit der 10xxx Serie zu messen. Da ja die 60xxx noch in den Kinderschuhen steckt, kann ich die ca. 12-14 Tage Rechnerzeit für diese beiden Testruns älterer Nets jetzt gut zwischenschieben...

Hier mal wieder eine schöne Kurzpartie, in der lc0 42850 gegen Stockfish mal wieder einen tödlichen Angriff durchzieht und Stockfish in nur 37 Zügen schlägt. Letzter Vorgabezug war 8.0-0-0 von Weiß. Nach Zug 28 ist die Partie schon gelaufen. Immer wieder beeindruckend, wie scheinbar "leicht" lc0 Stockfish besiegen kann. Auch in dieser Partie beeindruckt mich die simple Logik, mit der lc0 einen Angriffsplan aufs Brett bringt, der einfach und schön ist und gegen dennoch den kein Kraut gewachsen ist. Man beachte 11.g4 !! Der weiße Läufer auf g5 hängt und lc0 pfeift drauf und bietet stattdessen ein Bauernopfer an.

Event:

Ort:

Datum:

Weiss:

Schwarz:

Ergebnis

Board

By Reinhold Stibi Date 2019-08-02 15:01

Mit 48,80 % gegen Stockfish 22.06.19 wieder ein Negativergebnis gegen Stockfish.

Das gibt doch zu denken, weil doch früher eher Lc0 in der direkten Begegnung vorne lag.

Könnte es vielleicht sein, dass Lc0 diese ganz kurzen Bedenkzeiten nicht so liegen ?

Lc0 42850 hat sehr wenige Selfplaypartien und könnte deshalb auch in der Spielstärke abfallen.

M.E. ist das Net 42845 besser. Schnitt bei mir im Stellungstest auch besser ab.

In meinem Super-Turnier mit über 500 Partien und 24 Engines hatte Lc0 mit Net 42845
einen prächtigen Einstand mit dem Turniergewinn vor Lc0 42595 und Stockfish 10.
Eine Tabelle und mehr dazu in einem anderen Thread.

By Reinhold Stibi Date 2019-08-02 16:05

Wie ich sehe, hat auch Stockfish mit wenigen Zügen Partien gewonnen.

Gib doch bitte die Partienummer an, dass man die Partie schnell auffinden kann.

By Guenter Stertenbrink Date 2019-08-02 16:15

42850 hoch gelobt hier :

https://groups.google.com/forum/#!topic/lczero/T3dhsZxTD08

By Stefan Pohl Date 2019-08-02 16:19 Edited 2019-08-02 16:21

Guenter Stertenbrink schrieb:

42850 hoch gelobt hier :

<a class='ura' href='https://groups.google.com/forum/#!topic/lczero/T3dhsZxTD08'>https://groups.google.com/forum/#!topic/lczero/T3dhsZxTD08</a>

Wie gesagt, statistisch alles pille-palle... Ob nun bei 3000 Partien ein Netz ein paar Elo mehr oder weniger hat. Oder ob nun knapp 49% in 500 Partien gegen Stockfish, oder 50.7% erzielt werden: Alles statistisch belanglos, da klar innerhalb der Errorbar. Zufallsschwankungen, weiter nichts.
Viel interessanter finde ich jetzt, wie das alte Net 32930 aus der 30xxx Serie mit der aktuellen lc0.exe gegen die gleichen Gegner abschneiden wird. Da sieht man nämlich, ob bzw. wieviel die neue Netzstruktur (SE-Nets) der 40xxx-Netze nun wirklich gebracht hat. Oder vielleicht auch nicht.

By Guenter Stertenbrink Date 2019-08-02 16:31

ahh, falscher link.

dieser thread : https://drive.google.com/uc?export=download&id=1tIdhDWOP2tCgb6LO6mxytYhgnzj1eR2r

20000 Partien dort fuer 42820 , 5000 fuer 42850

--------
32930 hatte -60 bei CEGT , -34 bei CCRL

-35 gegen T8.610 auf Discord , 2000 bzw. 14000 Partien

By Stefan Pohl Date 2019-08-02 16:34

Guenter Stertenbrink schrieb:

32930 hatte -60 bei CEGT , -30 bei CCRL

Ja, aber nicht mit einer heute aktuellen lc0.exe. Das könnte das Ergebnis von 32930 verbessern. Mal abwarten.

By Reinhold Stibi Date 2019-08-02 18:21 Edited 2019-08-02 18:27

Ryzen 5 1 CPU Stockfish 12.04.19 Co.

11. g4 !   in 9 Sek.

[fen][/fen]Neue Partie Line
r2q1rk1/pb1nbpp1/1pp1pn1p/3p2B1/2PP3P/2N1PN2/PPQ2PP1/1K1R1B1R w - - 0 1

Analysis by Stockfish 120419 64 BMI2 Costalba:

1.Lf4 c5 2.dxc5 bxc5 3.Le2 Dc8 4.cxd5 exd5 5.a3 c4
WeiÃŸ steht etwas besser: +/= (0.39) Tiefe: 10/12   00:00:00
1.Lf4 c5 2.cxd5 Sxd5 3.Sxd5 exd5 4.Ld3 c4 5.Lf5 Sf6 6.Se5 Ld6 7.a3
Die Stellung ist ausgeglichen: = (0.18) Tiefe: 11/15   00:00:00
1.Lf4 c5 2.cxd5 Sxd5 3.Sxd5 exd5 4.g4 Tc8 5.De2 cxd4 6.g5 dxe3 7.gxh6
Weiß hat minimalen Vorteil: = (0.28) Tiefe: 12/19   00:00:00
1.Lf4 dxc4 2.Lxc4 Sd5 3.Se5 Sxf4 4.exf4 b5 5.Ld3 Sxe5 6.dxe5 Da5
Weiß hat minimalen Vorteil: = (0.27) Tiefe: 13/19   00:00:00 258kN
1.Lf4 dxc4 2.Lxc4 b5 3.Ld3 b4 4.Se4 Sxe4 5.Lxe4 Sf6 6.Le5 Sxe4 7.Dxe4 Dd5 8.Dxd5 cxd5
WeiÃŸ steht etwas besser: +/= (0.37) Tiefe: 14/19   00:00:00 326kN
1.Lf4 c5 2.cxd5 Sxd5 3.Sxd5 exd5 4.g4 Tc8 5.De2 f6 6.Lg2 c4 7.Tc1 Tf7
WeiÃŸ steht etwas besser: +/= (0.50) Tiefe: 15/21   00:00:01 523kN
1.Lf4 Lb4 2.g4 Sxg4 3.cxd5 cxd5 4.Tg1 h5 5.Lh3 Lxc3 6.bxc3 Sdf6 7.Se5 Sxe5 8.Lxe5
WeiÃŸ steht etwas besser: +/= (0.45) Tiefe: 16/23   00:00:01 995kN
1.Lf4 dxc4 2.Lxc4 Dc8 3.Se5 Sd5 4.Sxd5 cxd5 5.Lb3 Dxc2+ 6.Lxc2 Sxe5 7.Lxe5 f6 8.Lg3 Kf7 9.Ld3 Tac8 10.Tc1
WeiÃŸ steht etwas besser: +/= (0.42) Tiefe: 17/25   00:00:01 1324kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sd5 5.Lf3 Sxe5 6.Lxe5 Sxc3+ 7.bxc3 Db6 8.De4 b4 9.c4 f5 10.Df4 c5 11.d5 exd5 12.cxd5
Weiß hat minimalen Vorteil: = (0.30) Tiefe: 18/28   00:00:02 2181kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Weiß hat minimalen Vorteil: = (0.24) Tiefe: 19/30   00:00:03 2992kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Die Stellung ist ausgeglichen: = (0.15 --) Tiefe: 20/26   00:00:04 3497kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Die Stellung ist ausgeglichen: = (0.06 --) Tiefe: 20/29   00:00:04 3871kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Die Stellung ist ausgeglichen: = (0.15 ++) Tiefe: 20/32   00:00:05 4461kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Die Stellung ist ausgeglichen: = (-0.07 --) Tiefe: 20/32   00:00:05 4845kN
1.Lf4 dxc4 2.Lxc4 b5 3.Le2 Tc8 4.Se5 Sxe5 5.Lxe5 c5 6.Lxb5 Db6 7.Le2 Se4 8.Sxe4 cxd4 9.Lc4 Da5 10.Lxd4 Lxe4 11.Dxe4 Txc4
Die Stellung ist ausgeglichen: = (0.13 ++) Tiefe: 20/32   00:00:05 5232kN
1.Lf4 dxc4 2.Lxc4 b5 3.Ld3 Da5 4.Se5 Sxe5 5.Lxe5 Sd7 6.f4 Sxe5 7.fxe5 b4 8.Sa4 c5 9.Sxc5 Lxc5 10.dxc5 Tac8 11.Tc1 Ld5 12.b3 Kh8 13.Db2 Txc5
Die Stellung ist ausgeglichen: = (-0.09) Tiefe: 20/32   00:00:06 6356kN
1.Le2
Die Stellung ist ausgeglichen: = (0.00 ++) Tiefe: 21/35   00:00:08 8246kN
1.g4
Die Stellung ist ausgeglichen: = (0.08 ++) Tiefe: 21/35   00:00:09 9331kN
1.g4
Weiß hat minimalen Vorteil: = (0.23 ++) Tiefe: 21/35   00:00:09 9461kN
1.g4
WeiÃŸ steht etwas besser: +/= (0.42 ++) Tiefe: 21/35   00:00:10 9640kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Le2 Tc8 5.Se5 b5 6.c5 b4 7.Sa4 Sxe5 8.dxe5 Sd7 9.Tg2 b3 10.axb3 Lxh4
Die Stellung ist ausgeglichen: = (0.15) Tiefe: 21/35   00:00:10 9862kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Le2 Tc8 5.Se5 b5 6.c5 b4 7.Sa4 Sxe5 8.dxe5 Sd7 9.Tg2 b3 10.axb3 Lxh4
Die Stellung ist ausgeglichen: = (0.05 --) Tiefe: 22/30   00:00:11 10637kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Le2 Tc8 5.Se5 b5 6.c5 b4 7.Sa4 Sxe5 8.dxe5 Sd7 9.Tg2 b3 10.axb3 Lxh4
Die Stellung ist ausgeglichen: = (0.15 ++) Tiefe: 22/31   00:00:11 11079kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Le2 Tc8 5.Se5 b5 6.c5 b4 7.Sa4 Sxe5 8.dxe5 Sd7 9.Tg2 b3 10.axb3 Lxh4
Weiß hat minimalen Vorteil: = (0.29 ++) Tiefe: 22/31   00:00:11 11222kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Se5 Sxe5 5.Lxe5 Tg8 6.Ld3 Tc8 7.cxd5 cxd5 8.De2 a6 9.Df3 b5 10.Se2 b4 11.Dg2 Df8 12.Sf4 Se4
Die Stellung ist ausgeglichen: = (0.08) Tiefe: 22/31   00:00:12 12067kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Se5 Sxe5 5.Lxe5 Tg8 6.Ld3 Tc8 7.cxd5 cxd5 8.De2 a6 9.Df3 b5 10.Se2 b4 11.Dg2 Df8 12.Sf4 Se4
Die Stellung ist ausgeglichen: = (0.17 ++) Tiefe: 23/32   00:00:13 12956kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Se5 Sxe5 5.Lxe5 Tg8 6.Ld3 Tc8 7.cxd5 cxd5 8.De2 a6 9.Df3 b5 10.Se2 b4 11.Dg2 Df8 12.Sf4 Se4
Weiß hat minimalen Vorteil: = (0.27 ++) Tiefe: 23/32   00:00:13 13106kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Se5 Sxe5 5.Lxe5 Tg8 6.Ld3 Tc8 7.cxd5 cxd5 8.De2 a6 9.Df3 b5 10.Se2 b4 11.Dg2 Df8 12.Sf4 Se4
Die Stellung ist ausgeglichen: = (0.00 --) Tiefe: 23/34   00:00:14 13925kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.Se5 Sxe5 5.Lxe5 Tg8 6.Ld3 Tc8 7.cxd5 cxd5 8.De2 a6 9.Df3 b5 10.Se2 b4 11.Dg2 Df8 12.Sf4 Se4
Die Stellung ist ausgeglichen: = (0.20 ++) Tiefe: 23/35   00:00:15 14846kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.e4 dxe4 5.Se5 c5 6.Dc1 De8 7.d5 exd5 8.cxd5 Tg8 9.Sxd7 Dxd7 10.d6 Ld8 11.Lxh6 Sg4 12.Le3 Se5 13.h5 Sd3 14.Lxd3 exd3 15.Txd3 Lf6
Die Stellung ist ausgeglichen: = (0.09) Tiefe: 23/36   00:00:16 15390kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.e4 dxe4 5.Se5 c5 6.Dc1 De8 7.d5 exd5 8.cxd5 Tg8 9.Sxd7 Dxd7 10.d6 Ld8 11.Lxh6 Sg4 12.Le3 Se5 13.h5 Sd3 14.Lxd3 exd3 15.Txd3 Lf6
Die Stellung ist ausgeglichen: = (0.19 ++) Tiefe: 24/45   00:00:17 17052kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.e4 dxe4 5.Se5 c5 6.Dc1 De8 7.d5 exd5 8.cxd5 Tg8 9.Sxd7 Dxd7 10.d6 Ld8 11.Lxh6 Sg4 12.Le3 Se5 13.h5 Sd3 14.Lxd3 exd3 15.Txd3 Lf6
Weiß hat minimalen Vorteil: = (0.28 ++) Tiefe: 24/45   00:00:18 17317kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.e4 dxe4 5.Se5 c5 6.Dc1 De8 7.d5 exd5 8.cxd5 Tg8 9.Sxd7 Dxd7 10.d6 Ld8 11.Lxh6 Sg4 12.Le3 Se5 13.h5 Sd3 14.Lxd3 exd3 15.Txd3 Lf6
WeiÃŸ steht etwas besser: +/= (0.42 ++) Tiefe: 24/45   00:00:18 17700kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.e4 dxe4 5.Se5 c5 6.Dc1 De8 7.d5 exd5 8.cxd5 Tg8 9.Sxd7 Dxd7 10.d6 Ld8 11.Lxh6 Sg4 12.Le3 Se5 13.h5 Sd3 14.Lxd3 exd3 15.Txd3 Lf6
WeiÃŸ steht etwas besser: +/= (0.62 ++) Tiefe: 24/45   00:00:19 18507kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.cxd5 cxd5 5.Ld3 Tc8 6.De2 Sh5 7.Lh2 Sdf6 8.Se5 a6 9.Lxa6 Lxa6 10.Dxa6 Ld6 11.De2 g6 12.Sb5 Lb8 13.Tc1 Txc1+ 14.Txc1 Se4
WeiÃŸ steht etwas besser: +/= (0.51) Tiefe: 24/45   00:00:19 18544kN
1.g4 Sxg4 2.Lf4 Sgf6 3.Tg1 Kh8 4.cxd5 cxd5 5.Ld3 Tc8 6.De2 Sh5 7.Lh2 Sdf6 8.Se5 a6 9.Lxa6 Lxa6 10.Dxa6 Ld6 11.De2 g6 12.Sb5 Lb8 13.Tc1 Txc1+ 14.Txc1 Se4
WeiÃŸ steht etwas besser: +/= (0.41 --) Tiefe: 25/36   00:00:21 20762kN