Not logged inCSS-Forum
Forum CSS-Online Help Search Login
CSS-Shop Impressum Datenschutz
Up Topic Hauptforen / CSS-Forum / T60-Netze gegen SF10
- - By Lothar Jung Date 2019-11-07 12:47
Die letzten aktuellen Netze auf guter GPU-Hardware ziehen fast gleich:

At Edosani stream 61047 seems to perform quite nicely against SF10 and so far better than 61034 and 61040:   https://www.twitch.tv/edosani

Lothar
Parent - - By Lothar Jung Date 2019-11-07 21:30
...sind fast gleichauf:

Round Robin: stockfish_10 vs lc0.net.61055 
LC0-version: lc0-v0.22, cuda, Default parameters
SF-version: stockfish_10_x64_popcnt, Threads=4, Default parameters
LC0 options: Backend=cudnn-fp16
Hardware: RTX2060 / i5 
Software: Cutechess-CLI
Time control: LC0: 1k nodes/move, sf_10: 500k nodes/move
Book: openings-8ply-10k.pgn, 8 plies, sequential, color reversed
Tablebases: Syzygy 5-men
 
# PLAYER           :  RATING  ERROR  POINTS  PLAYED    W    L    D  D(%)  CFS(%)
1 stockfish_10     :     0.0   11.7   255.0     500  152  142  206    41      73
2 lc0.net.61055    :    -7.2   11.7   245.0     500  142  152  206    41     ---

White advantage = 60.92 +/- 11.71
Draw rate (equal opponents) = 42.30 % +/- 2.21
Parent - - By Lothar Jung Date 2019-11-08 09:25
Ein aktuelles T60-Netz nimmt wohl an dem bald beginnenden CCC-Tunier teil.
Parent - By Lothar Jung Date 2019-11-09 14:17
Im CCC-Bullet nimmt T60 derzeit den dritten Platz ein.
Nur Stockfish und LC0 stehen besser.
Parent - - By Stefan Pohl Date 2019-11-10 16:53 Edited 2019-11-10 17:14 Upvotes 1
Hier mal ein Test von discord, der zur Abwechslung nicht völlig Banane ist. Leela-Ratio etwa 0.85 (und nicht über 2.6, wie in dem hier eingangs geposteten Test, was natürlich viel zu viel ist, insbesondere bei dem dort gespielten Hyperbullet (Stockfish nur 500000 Knoten pro Zug(!!!)) - völlig klar, daß lc0 da sehr gut abschneidet, nur sind diese Testbedingungen eben komplett lächerlich), wenn man die angegebene Verarbeitungsgeschwindigkeit auf ein 256x20 Netz umrechnet (ca. x1.5, da die hier getesten Netze ca. 50% größer (und somit langsamer) als 256x20 sind). Und keine fixen Knoten, sondern richtige Bedenkzeit.
Tja, und schon ist es vorbei mit der schönen Illusion, daß T60 schon Richtung SF 10 oder den besten T40-Netzen linst. Von "fast gleichauf" kann also noch gar keine Rede sein - reines Wunschdenken. Hätte mich auch sehr gewundert. Das dauert eben noch. Was ja auch gar nicht schlimm ist, nur etwas mehr Geduld sollte man halt aufbringen. 100 Elo schlechter als SF10 muß man auch erst mal sein. Das ist ja schon ein sehr hohes Niveau! Nur die letzten 100 Elo sind halt die schwersten...

Time control: 1 min + 1s
Speed: SF-10: i9-9900K, 12 threads, 4GB Hash  ~ 20,000,000 nps
             T60,J13B: RTX 2080 ~ 13,000 nps
Book: Chad's openings-6ply-1000.pgn, sequentially, switched colors
Tablebases: 6-men syzygy
Adjudication: TB's, loss=-800 centipawns, draw=400 moves or 200 moves and value=0.00
Software: Arena
Results:
Zitat:

   # PLAYER                            :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)  OppN
   1 Stockfish_10_x64_bmi2    :       0      8   910.0    1500  60.7      62  463  894  143  59.6     3
   2 lc0.net.J13B.2-136           :      -3     15   248.0     500  49.6     100   76  344   80  68.8     1
   3 lc0.net.60986                  :    -106     16   177.5     500  35.5      93   32  291  177  58.2     1
   4 lc0.net.61055                   :    -126     16   164.5     500  32.9     ---   35  259  206  51.8     1        *new*

White advantage = 38.25 +/- 5.59
Draw rate (equal opponents) = 66.68 % +/- 1.42
Parent - - By Eduard Nemeth Date 2019-11-10 17:02
Ist J13b nicht ein grosses Netz, aber trainiert mit T40 Partien?
Parent - By Stefan Pohl Date 2019-11-10 17:05
Eduard Nemeth schrieb:

Ist J13b nicht ein grosses Netz, aber trainiert mit T40 Partien?


Jup.

Alle drei Netze in dem Test sind 320x24. Das muß man natürlich bei der Leela-Ratio berücksichtigen. Also LR = (Knotenzahl von lc0 mit diesen Netzen * 1.5 * 875) / Stockfish Knotenzahl
Parent - - By Lothar Jung Date 2019-11-11 09:57 Edited 2019-11-11 10:00
In einem heute veröffentlichten Test von mattblachess schlägt Net61046 SF9 deutlich und das mit einem Elo-Abstand, der an SF10 heranreicht (CEGT und CCRL-Rating für SF9/10 mit 4 Kernen).
Leela-Ratio war 0,85.
Die Spielstärke der aktuellen T60-Netze schwanken stark.

Match: lc0.22.0.61046 vs Stockfish 9 4CPU - 100 rapid games
LC0-version: v22.0 cuda
LC0-options: --nncache=6000000 --max-collision-events=256 --minibatch-size=256 --cpuct=3.3 --cpuct-base=10000 --backend=multiplexing
Time control: 15min + 2s  (CCRL 40/40)
Hardware: CPU i7-8700 4 cores vs 1070Ti GPU
Book: Custom short lines played from both sides ever test (!sheet4 for opening list)
Tablebase: 6 piece syzygy (DTZ + WDL) for both engines
Software: Arena
Speed: Leela ratio ~0.85; Lc0 npm~200K, SF npm~200M
Context: !sheet4 for test history
Comment: First match win over Stockfish 9
# PLAYER                  :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)
1 lc0.22.0.61046          :  3460.5   39.2    54.0     100    54      93   21   66   13    66
2 Stockfish_9_x64_bmi2    :  3431.0   ----    46.0     100    46     ---   13   66   21    66

lc0.22.0.61046 - Stockfish_9_x64_bmi2 : 54.0/100 21-13-66 (===0=====1====1===1===10==01========10====10=0=01=1===1==10=1=====1=1==0=0=0==1=1=0=1===1=1===10==1=)  54% -> 3461 ordo score  (40/40 rating)
Parent - - By Lothar Jung Date 2019-11-11 12:22
Hier sieht man die Schwankungen zwischen den T60-Netzen:

**Round Robin:** stockfish_9 vs lc0.net.61105 
**LC0-version:** lc0-v0.22, cuda, Default parameters
**SF-version:** stockfish_9, Threads=4, Default parameters
**LC0 options:** Backend=cudnn-fp16
**Hardware:** RTX2060 / i5 
**Software:** Cutechess-CLI
**Time control:** LC0: 1k nodes/move, sf_9: 500k nodes/move
**Book:** openings-8ply-10k.pgn, 8 plies, sequential, color reversed
**Tablebases:** Syzygy 5-men
   ``` # PLAYER           :  RATING  ERROR  POINTS  PLAYED    W    L    D  D(%)  CFS(%)
*1 lc0.net.61105    :    29.4   19.6   270.5     500  178  137  185    37      62
2 lc0.net.61052    :    24.3   19.5   267.0     500  176  142  182    36      71
3 lc0.net.61083    :    14.3   20.9   260.0     500  167  147  186    37      86
4 stockfish_9      :     0.0   10.4   702.5    1500  426  521  553    37     ---

White advantage = 48.90 +/- 7.10
Draw rate (equal opponents) = 37.57 % +/- 1.24```
Parent - - By Lothar Jung Date 2019-11-11 20:39
Zum 11.11. Netz 61111 holt gegen 41800 auf, noch besser als SF10:

Match:  61111 vs 41800
LC0 version: 0.22
LC0 options: cudnn-fp16, 1 thread
Time control:  Fixed nodes 1kn
Hardware: RTX 2070
Book: Hert 250 book, in sequence, reversed color
Tablebases: 6-man TB
Adjudication: 6-man TB, -draw movenumber=50 movecount=5 score=8 -resign movecount=5 score=1000
Software:cutechess-cli
Comments: 61111 vs 41800: +107 -114 =279 (-5 elo): Weird that 61111 falling so hard in self elo but the best net for me!

threads=1, fixed 1k nodes per move vs 41800, hert 250 book:
   # PLAYER                 :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)     W     D     L
   1 lc0.net.41800          :       0   ----  3552.5    6500  54.7      68  1852  3401  1247
+  2 lc0.net.61111          :      -5     20   246.5     500  49.3      63   107   279   114
   3 lc0.net.61000          :     -10     19   243.0     500  48.6      73   108   270   122
   4 lc0.net.61080          :     -18     20   237.0     500  47.4      50   107   260   133
   5 lc0.net.60927          :     -18     20   237.0     500  47.4      61   105   264   131
   6 lc0.net.61045          :     -23     21   234.0     500  46.8      52   104   260   136
   7 lc0.net.61030          :     -23     20   233.5     500  46.7      52    95   277   128
   8 lc0.net.61071          :     -24     20   233.0     500  46.6      58    99   268   133
   9 lc0.net.61018          :     -27     21   231.0     500  46.2      57   101   260   139
  10 lc0.net.61100          :     -30     21   229.0     500  45.8      66   103   252   145
  11 lc0.net.60950          :     -36     22   224.5     500  44.9      58    96   257   147
  12 lc0.net.60900          :     -39     20   222.5     500  44.5      87    90   265   145
  13 lc0.net.60853          :     -56     20   211.0     500  42.2     100    82   258   160
  14 lc0.net.384x30-1024    :    -125     23   165.5     500  33.1     ---    50   231   219
Parent - - By Lothar Jung Date 2019-11-13 07:53
Ganz nah dran:

Round Robin: stockfish_10 vs lc0.net.61123 
LC0-version: lc0-v0.22, cuda, Default parameters
SF-version: stockfish_10, Threads=4, Default parameters
LC0 options: Backend=cudnn-fp16
Hardware: RTX2060 / i5 
Software: Cutechess-CLI
Time control: LC0: 1k nodes/move, sf_10: 500k nodes/move
Book: openings-8ply-10k.pgn, 8 plies, sequential, color reversed
Tablebases: Syzygy 5-men
 
# PLAYER           :  RATING  ERROR  POINTS  PLAYED    W    L    D  D(%)  CFS(%)
1 stockfish_10     :     0.0   10.5   808.5    1500  519  402  579    39      73
2 lc0.net.61055    :    -7.2   19.2   245.0     500  142  152  206    41      88
3 lc0.net.61081    :   -28.0   21.2   230.5     500  131  170  199    40      88
*4 lc0.net.61123    :   -49.0   19.8   216.0     500  129  197  174    35     ---

White advantage = 51.50 +/- 7.18
Draw rate (equal opponents) = 39.57 % +/- 1.30
Parent - - By Lothar Jung Date 2019-11-14 07:38
In der 2. Runde von CCC liegt Lc0 T60 gut im Mittelfeld und dürfte die 3. Runde der besten 6 Engines erreichen, d.h. es spielt als 7. Engine weiter mit.

https://www.chess.com/computer-chess-championship

Lothar
Parent - - By Lothar Jung Date 2019-11-14 07:50
Auch hier macht sich T60 ganz ordentlich:

https://www.twitch.tv/edosani

Lothar
Parent - By Lothar Jung Date 2019-11-15 13:22
T60 in CCC-Tunier jetzt auf Platz 4, nur einen halben Punkt hinter SFdev.
Unglaublich!
Nicht mehr zu ignorieren.

https://www.chess.com/de/computer-chess-championship
Up Topic Hauptforen / CSS-Forum / T60-Netze gegen SF10

Powered by mwForum 2.29.3 © 1999-2014 Markus Wichitill