Not logged inCSS-Forum
Forum CSS-Online Help Search Login
CSS-Shop Impressum Datenschutz
Up Topic Hauptforen / CSS-Forum / Net 32139 könnte Net 11250 überholen
- - By Stefan Pohl Date 2018-12-22 19:20
https://www.twitch.tv/potato_chess

Dort läuft der m.E. einzig wirklich seriöse, aussagekräftige Test von den neuen Nets im Vergleich zum Net 11250, was dort nachwievor den höchsten Score erreicht hat (je 200 Partien gegen 10 Top AB-Engines).
Net 32139 liegt dort nach 86 von 200 Partien ein Stück besser als Net 11250, sollte das Ergebnis stabil bleiben, wird 32139 der neue Spitzenreiter. Falls das so kommen sollte, werde ich Net 32139 in mein long-thinking time Turnier aufnehmen und 11250 rausnehmen (https://www.sp-cc.de/long-thinkingtime.htm). Schaun mer mal.
Parent - By Reinhold Stibi Date 2018-12-22 20:20
11250 wird nach wie vor vorne liegen mit ca. 50 Elo Vorsprung.

Das Net 32109 das ganz dicht mit den Werten bei 32139 ist

liegt nach meinem Test von GTX 960  gegen Stockfish 10 1 CPU  je 2 Min.6 Sek.Z.  Vorgabe 4 Z. Stefan Pohl

nach 50 Partien -123 Elo hinter Stockfish 10    50  +1  =31  -18  =33,0 %

Denke schon dass es noch ca. 14 Tage dauern wird, um mit Net 11250 gleich zu ziehen.

Um das Niveau von Stockfish 10  zu erreichen wird es wahrscheinlich noch 2 bis 3 Monate dauern.

Abwarten und Tee trinken und Geduld haben.

Teste gerade das Net 32139. Nach meiner Erfahrung liegt Lc0 in den ersten 10 Partien sehr gut
um dann nach weiteren Partien stetig abzufallen und sich dann nach 30-50 Partien zu stabilisieren.

Bin gespannt.
Parent - - By Lothar Jung Date 2018-12-22 20:44
Das absehbare ist geschehen, Net30 hat/wird 11248/11250 überholen.
Jedoch sind TC und Hardware sehr entscheidend.
Ich habe, als sich das abzeichnete, ein kleines Tunier (10 Partien, TC 5/5 ) SF10 8 Cores gegen SLI 1080 mit 32139 antreten lassen.
Ernüchternd: SF10 gewann 7:0:3.
Klar ist, dass bei vergleichbaren Bedingungen, schon jetzt Test 3xxxx, auch wegen seines Endspiels, bessere Ergebnisse zeitigt.
Parent - - By Reinhold Stibi Date 2018-12-22 21:06
Ein gutes 3er Netzwerk lag vor ca. 10 Tagen noch 190 bis 200 Elo hinter Stockfish 10.

Das jetzige 3er Netzwerk liegt nur noch ca. 120 Elo hinter Stockfish 10, hat also in ca.
10 Tagen 70 bis 80 Elo aufgeholt.

Natürlich könnte es sein dass Lc0 mit einer oder zwei RTX 2080 Ti  noch näher an Stockfish ist,
aber wer hat schon eine RTX 2080 Ti.
Entscheidend ist doch wie Lc0 mit einer normal erschwinglichen Grafikkarte wie einer RTX 2070
oder einer GTX 960  gegen Stockfish mit 12 bis 24 Threads oder 1 Thread (hier im Vergleich zur GTX 960)
dasteht.

Lc0 ist in den letzten 10 Tagen deutlich im Endspiel besser geworden.
Parent - - By Lothar Jung Date 2018-12-22 21:59
Hallo Reinhold,

wir wünschen uns alle, dass es spannend bleibt - zwischen LC0 untereinander oder gegen SF10.
Die sehr unterschiedliche Hardware auf beiden Seiten ist, anders als bei A/B-Tunieren, der entscheidende Faktor.
Klar ist, dass jetzt die Test30-Netze besser als die Test10 (fehlerbehaftet) oder Test20 (absolut gescheitert) sind.
Besser im Endspiel, keine erkennbaren Fehler, optimiert aufgrund der neuesten Google-veröffentlichungen.
Ich teste auf 2x1080. Bei 4 Cores (Ryzen 1800x, 3.6 GHz) mit  SF9/10 kann ich mithalten.
Jetzt wirtschaftlich viel besser ist eine RTX 2070.
Das neue Netzt 40 ist größer und wird von der Hardware noch anspruchsvoller sein.
Für 4-8 Cores ist das Net30 eine vernünftige Lösung.
Alles andere ist eine Sache von TCEC und Co.

Lothar
Parent - By Tom Paul Date 2018-12-23 01:37
Lothar Jung schrieb:

Hallo Reinhold,

wir wünschen uns alle, dass es spannend bleibt - zwischen LC0 untereinander oder gegen SF10.
Die sehr unterschiedliche Hardware auf beiden Seiten ist, anders als bei A/B-Tunieren, der entscheidende Faktor.
Klar ist, dass jetzt die Test30-Netze besser als die Test10 (fehlerbehaftet) oder Test20 (absolut gescheitert) sind.
Besser im Endspiel, keine erkennbaren Fehler, optimiert aufgrund der neuesten Google-veröffentlichungen.
Ich teste auf 2x1080. Bei 4 Cores (Ryzen 1800x, 3.6 GHz) mit  SF9/10 kann ich mithalten.
Jetzt wirtschaftlich viel besser ist eine RTX 2070.
Das neue Netzt 40 ist größer und wird von der Hardware noch anspruchsvoller sein.
Für 4-8 Cores ist das Net30 eine vernünftige Lösung.
Alles andere ist eine Sache von TCEC und Co.

Lothar


Test 20 wurden doch für massig Tests verwendet um herauszufinden wie welche Einstellungen usw. die Entwicklung beeinflussen.
Da ging es nicht wirklich darum besser als Test 10 zu werden.

Woran stellst du fest das LC0 besser in Endspielen geworden ist?

Wo siehst du das Netz 40? Link?
Parent - By Tom Paul Date 2018-12-23 01:32
Reinhold Stibi schrieb:

Natürlich könnte es sein dass Lc0 mit einer oder zwei RTX 2080 Ti  noch näher an Stockfish ist,
aber wer hat schon eine RTX 2080 Ti.


Naja abgesehen von dir fast jeder .
Also quasi 50% aller Schachspieler die eine GPU verwenden, benutzen diese GPU für die nächsten 10 Jahre, anstatt sich nach 2-5 Jahren eine neue GPU für den Preis einer RTX 2070 zu kaufen, die dann auch nur 5-15% besser ist als die RTX 2070.
Parent - - By Stefan Pohl Date 2018-12-23 05:33 Upvotes 1
Da jetzt die erste Version von lc0 released wurde (0.20.0 rc1), die SENets unterstützt, ist damit zu rechnen, daß die 30xxx Nets bald aufgegeben werden und ein ganz neuer main-run bei Null starten wird. Insofern ist es fraglich, ob Testen der 30xxx Nets überhaupt noch Sinn hat.

Wer sich schlau machen will (langsam wirds aber echt kompliziert):
https://towardsdatascience.com/squeeze-and-excitation-networks-9ef5e71eacd7
Parent - By Reinhold Stibi Date 2018-12-23 07:54
Test: Lc0  v0.19.1   32139  GTX 960   gegen  Stockfish  1 CPU

40 Partien   +2   =24   -14   = 35,0 %   = -108 Elo

Net 11250 dürfte also ca. 40 Elo besser sein.
Parent - - By Tom Paul Date 2018-12-23 08:17
Stefan Pohl schrieb:

Da jetzt die erste Version von lc0 released wurde (0.20.0 rc1), die SENets unterstützt, ist damit zu rechnen, daß die 30xxx Nets bald aufgegeben werden und ein ganz neuer main-run bei Null starten wird. Insofern ist es fraglich, ob Testen der 30xxx Nets überhaupt noch Sinn hat.

Wer sich schlau machen will (langsam wirds aber echt kompliziert):
<a class='ura' href='https://towardsdatascience.com/squeeze-and-excitation-networks-9ef5e71eacd7'>https://towardsdatascience.com/squeeze-and-excitation-networks-9ef5e71eacd7</a>


Wenn die schon wieder bei 0 starten, ohne jetzt ein deutlich besseres 3xxxx Netzwerk fertigzustellen, da kriegen doch alle Hardwarestifter wieder eine Kriese.
Dann sollen die Entwickler als Begründung wenigstens anfangen Schach 960 Stellungen zu verwenden, anstatt nur die Schachgrundstellung.
Parent - - By Reinhold Stibi Date 2018-12-23 14:13
Net 32166  Elo 9670  Partien 31.550  vom 23.12.18 mit Lc0 v020.0-rc1

könnte tatsächlich Net 11250 überholen.

Zwischenstand nach 18 Partien mit GTX 960  gegen Stockfish 10  1 CPU

+2  =11  -5  = 41,7 %  = -58 Elo, also ca.12. Elo besser wie mit Net 11250.

Frage ist, welchen Einfluss darauf die Version v20.0-rc1 gegenüber Version v19.1.1 hat.

Aber es ist nur ein Zwischenstand, mit erfreulich gutem Start.

Ob der Stand nach 40 Partien gehalten werden kann, wird sich morgen früh herausstellen.
Parent - By Horst Sikorsky Date 2018-12-23 16:00
32141- 11250 .... +8 -5 =31 mit einer GTX 1070 im Analysemodus ohne TB- ase.
letzte Meldung
Frohe Weihnacht
Horst
Parent - - By Thomas Zipproth Date 2018-12-23 16:21
Stefan Pohl schrieb:

Da jetzt die erste Version von lc0 released wurde (0.20.0 rc1), die SENets unterstützt, ist damit zu rechnen, daß die 30xxx Nets bald aufgegeben werden und ein ganz neuer main-run bei Null starten wird. Insofern ist es fraglich, ob Testen der 30xxx Nets überhaupt noch Sinn hat.

Wer sich schlau machen will (langsam wirds aber echt kompliziert):
<a class='ura' href='https://towardsdatascience.com/squeeze-and-excitation-networks-9ef5e71eacd7'>https://towardsdatascience.com/squeeze-and-excitation-networks-9ef5e71eacd7</a>


Danke für den Link, das schaut ziemlich interessant aus.
Es soll wohl auch eine Verbesserung von SENets (Squeeze-and-Excitation Networks), die GENets (Gather-Excite Networks) geben:

Paper: https://arxiv.org/abs/1810.12348
github: https://github.com/hujie-frank/GENet
Parent - - By Patrick Götz Date 2018-12-24 04:43
Hallo Thomas,
gibt es einen Grund dafür das die Cerebellum Demo, die ich gerne genutzt habe, auf Deiner Brainfish Webseite nicht mehr funktioniert?
Gruß
Patrick
Parent - - By Reinhold Stibi Date 2018-12-24 05:41
So schnell wird das Net 11250 nicht überholt.

Endstand Test mit dem noch besseren Net 32166  GTX 960  gegen Stockfish 10  1 CPU

70 Partien   +5  =38  -27   =34,3 %    = -113

Net 11250  liegt um ca. 40 Elo vorne.

Inzwischen hat aber Net 32196  9778 Elo  32.517 Partien  vom 24.12.18  wahrscheinlich
weiter aufgeholt, denke 5 - 10  Elo   Test folgt.
Parent - - By Reinhold Stibi Date 2018-12-24 11:25
Zwischenstand Test Lc0 v0.20.0  Net 32196  9778 ! Elo  3.517 Partien vom 24.12.18 GTX 960

gegen Stockfish 10  1 CPU  je 2 Min.6 Sek.Z.   Eröffnungen:   Stefan Pohl  4 Züge Vorgabe

Nach 20 Partien  +1  = 15   -4    =42,5 %   = -53 Elo .

Das wäre natürlich ein Super-Ergebnis für Lc0  und das Net 11250  wäre
zum ersten Mal  um ca.17 Elo übertroffen.

Nach den bisherigen Erfahrungen verlor allerdings Lc0 im Endstand nach ca. 40 Partien
doch noch erheblich.

Mir scheint das Net 32196 doch sicherer zu spielen.

Bis heute Abend  liegt das Endergebnis vor. Bin sehr gespannt.
Parent - - By Michael Scheidl Date 2018-12-24 14:43
Voraussichtlich wird Lc0 in der unmittelbar bevorstehenden TCEC-DivP mit Version v0.20RC2-32194 oder -32195 antreten (vorerst ohne Gewähr).
Parent - By Lothar Jung Date 2018-12-24 15:53 Edited 2018-12-24 16:09
Netz 32210 wurde wohl für TCEC ausgewählt.

https://groups.google.com/forum/m/#!topic/lczero/S4vPhpn5oxU
Parent - - By Thomas Zipproth Date 2018-12-24 12:47
Patrick Götz schrieb:

Hallo Thomas,
gibt es einen Grund dafür das die Cerebellum Demo, die ich gerne genutzt habe, auf Deiner Brainfish Webseite nicht mehr funktioniert?
Gruß
Patrick


Hallo Patrick,
vermutlich hat es mit dem Umzug des Servers vor einiger Zeit zu tun, ich schau mir das mal an.
Gruß
Thomas
Parent - - By Reinhold Stibi Date 2018-12-25 09:49
Endergebnis Test mit Net 32196

74 P    +5  =44  -25     GTX 960  gegen  Stockfish 10  1 CPU    =36,5 %  = -96 Elo
Parent - - By Reinhold Stibi Date 2018-12-25 10:09
Das heutige Net 32226  9925 !! Elo  33.454 Partien :

Man staune, Steigerung innerhalb eines Tages 147 Net-Elo.

Zwischenergebnis  nach 20 Partien  Lc0 v0.20.0-rc2 Net wie oben  mit GTX 960 

gegen Stockfish 10  1 CPU mit Eröffnungsvorgabe Stefan Pohl 4 Züge mit GUI Fritz 14

+3  =12  -5   =45 %  = -35 Elo.

Das Endergebnis wird sicherlich schlechter ausfallen. Schätze -70 Elo

das wäre Gleichstand mit Net 11250  - super !

Allen noch ein frohes, friedliches  Weihnachtsfest  !
Parent - - By Reinhold Stibi Date 2018-12-26 08:07
Endergebnis  Net 32226, gespielt wurde übrigens mit einer Bedenkzeit von 2 Min.+ 6 Sek.je Zug:

40 Partien    +3  = 26   -11    = 40 %  =  -70 Elo

Das heutige Net 32253  10025 Net Elo  24.425 Partien wird m.E. das Net 11250 überholen,
spielt sehr hartnäckig und auch sicherer gegen Stockfish 10  1 CPU

Zwischenergebnis: 18 P   +2  =12   -4    = - 39 Elo
Parent - By Reinhold Stibi Date 2018-12-26 16:15
Endergebnis: Lc0 Net 32253 GTX 960  gegen  Stockfish 10  1 CPU

42 P   +6   = 24   - 12   = 42,9 %   = - 50 Elo
Up Topic Hauptforen / CSS-Forum / Net 32139 könnte Net 11250 überholen

Powered by mwForum 2.29.3 © 1999-2014 Markus Wichitill