TCEC Bonus

By Benno Hartwig Date 2020-11-10 09:04

Thanx,
ich empfinde die Lc0-Überlegenheit als überraschend deutlich.
Als es mit NNUE losging, hatte ich noch den Eindruck, dass Lc0 vielleicht so gerade dabei war, an SF (dem klassischen eben noch) vorbei zu ziehen. Wenn überhaupt.
Und jetzt scheint dieser klassische SF doch ganz hübsch abgehängt zu sein von Lc0.
Vorbei die Zeiten, in denen sich der Entwickler überlegte, welche Bauernstrukturen er in welcher Heftigkeit als vorteilhaft bewerten möchte.

By Peter Martan Date 2020-11-10 09:31 Edited 2020-11-10 09:34

Benno Hartwig schrieb:

Vorbei die Zeiten, in denen sich der Entwickler überlegte, welche Bauernstrukturen er in welcher Heftigkeit als vorteilhaft bewerten möchte.

Wie schon gesagt, glaube ich das nicht, was SF angeht. Die "Hybrid- Eval" ist die einzige, die die Engine verwendet, (zum Unterschied von z.B. CFfish, bei dem man zwischen Use NNUE Pure, Hybrid und Classical wählen kann), das heißt, dass außerhalb bestimmter Eval- Tresholds nach wie vor die hard coded Eval verwendet wird, (und wohl auch, was die statischen und dynamischen Werte angeht, nach denen zunächst mal die Tresholds erreicht werden oder nicht) und was man so, als das noch zur Diskussion stand, gelesen hat, macht dieses Splitting doch einiges an Elo im erweiterten Selfplay gegen SF 11 aus.
Natürlich kommt's, wenn schon das Matt angerechnet werden kann, nicht mehr so auf die Bauernstruktur an, von der du schreibst, drum dreh' ich das NNUE auch ab, wenn's nur mehr um die DTM geht, aber ansonsten kann ich mir nicht vorstellen, dass die Classical Eval seit NNUE schon wesentlich minimiert worden sein wird.
Schau doch mal im Code nach.

By Peter Martan Date 2020-11-11 21:15

Die gerade noch laufende 75. Partie wieder mal als Remis vorwegnehmend, schaut's danach so aus:

Wins   = 22
Draws  = 46
Losses = 7
Av.Op. Elo = 3500

Result     : 45.0/75 (+22,=46,-7)
Perf.      : 60.0 %
Margins    :
 68 %      : (+  3.4,-  3.4 %) -> [ 56.6, 63.4 %]
 95 %      : (+  6.6,-  6.7 %) -> [ 53.3, 66.6 %]
 99.7 %    : (+ 10.0,- 10.2 %) -> [ 49.8, 70.0 %]

Elo        : 3570
Margins    :
 68 %      : (+ 25,- 24) -> [3546,3595]
 95 %      : (+ 50,- 48) -> [3523,3620]
 99.7 %    : (+ 77,- 72) -> [3499,3647]

By Peter Martan Date 2020-11-13 19:55

Und aus:

Wins   = 28
Draws  = 62
Losses = 10
Av.Op. Elo = 3500

Result     : 59.0/100 (+28,=62,-10)
Perf.      : 59.0 %
Margins    :
 68 %      : (+  2.9,-  2.9 %) -> [ 56.1, 61.9 %]
 95 %      : (+  5.8,-  5.8 %) -> [ 53.2, 64.8 %]
 99.7 %    : (+  8.7,-  8.8 %) -> [ 50.2, 67.7 %]

Elo        : 3563
Margins    :
 68 %      : (+ 21,- 21) -> [3542,3584]
 95 %      : (+ 42,- 41) -> [3522,3606]
 99.7 %    : (+ 65,- 62) -> [3501,3628]

By Patrick Götz Date 2020-11-10 09:13

S19 - Sufi Bonus 3 (Time Control 60'+5")
LCZero v0.26.3_T60.SV.JH.92-330 - StockfishClassical 202007311012 = 34.5 - 22.5
(nach 57 Partien)

Das ist für mich unerwartet deutlich.
Immerhin konnte Stockfish ein Minimatch gewinnen, LCZero v0.26.3_T60.SV.JH.92-330 hat aber schon 13 Minimatches gewonnen.

By Peter Martan Date 2020-11-10 09:36

Patrick Götz schrieb:

LCZero v0.26.3_T60.SV.JH.92-330 hat aber schon 13 Minimatches gewonnen.

Ja, seit ich gepostet hatte, ist wieder eines dazu gekommen, wenn das, was jetzt läuft, (Nr.58) wirklich Remis wird, wie's scheint.