Aktuelles TCEC Turnier

By Ingo Althöfer Date 2024-09-27 13:53 Upvotes 1

Vorhin hat Stockfish in diesem Turnier eine geniale Partie gegen Stormphrax
gebracht. Die ersten fünf Zugpaare waren Vorgabe. Zwischendurch hatte
Stockfish zwei Leichtfiguren ins Geschäft gesteckt und dadurch den Gegner
fast bewegungsunfähig gemacht.

Event:

Ort:

Datum:

Weiss:

Schwarz:

Ergebnis

Board

Viele Grüße, Ingo Althöfer.

By Max Siegfried Date 2024-09-30 00:50

Lothar Jung schrieb:

Lc0 hat das Turnier gewonnen, Stockfish mit 1 Punkt weniger Zweiter und Ceres mit einem Punkt Abstand zu SF Dritter.
Auf Discord werden die Ergebnisse gefeiert.
Lc0 verzeichnet 11 Siege und nur 2 Niederlagen gegen Stockfish und Ceres.
<a class='ura' href='https://tcec-chess.com/'>https://tcec-chess.com/</a>

11 Siege gegen Stockfish und Ceres sind schon eine Leistung

Gibt es etwas besonderes an der Versionsnummer oder dem Netz? -> LCZero 0.31-dag-321205e-BT4-6147500-it332
Ist LC0 stärker geworden (doppelte Netzgröße?) oder ist Stockfish schwächer geworden? (MultiPV=4 war ja nicht so toll im Vergleich zu Stockfish 16.1)
Oder liegt es an den neuen GPUs?

LC0 hat 3x Remis gespielt und Stockfish hat 3x verloren und das gegen:
4 Berserk 13
6 Obsidian dev-13.11
9 Caissa 1.20.1

Ceres hat gegen 4 und 9 auch verloren aber wenigstens gegen 9 remis gespielt.

LC0 gewinnt gerade gegen rofChade 3.110, dass macht dann:
LC0 16,5
Stockfish 14,5
Ceres 13,5

Alle 3 müssen noch gegen Revenge spielen, von daher könnte sich noch etwas ändern.
Und Ceres braucht noch 1 Spiel gegen KomodoDragon 3.3.
Danach dürfte die Reihenfolge der stärksten Engines mehr oder weniger feststehen.

Ceres dürfte so stark sein wie Torch, wenn nicht sogar stärker.
Das ging ziemlich schnell.
Hat schon jemand diese vom Spielstil her wundervolle Engine konfiguriert und getestet?

By Peter Martan Date 2024-09-30 09:09 Edited 2024-09-30 09:15

Unter den vom IWS- Tool gefilterten very interesting games von Lc0 ist das der Runde 3.44 gegen Halogen, die Gegenpartie des Paares ging Remis aus und ist in die .pgn eingefügt:

[Event "TCEC Season 27 - Swiss 7"]
[Site "https://tcec-chess.com"]
[Date "2024.09.13"]
[Round "3.44"]
[White "LCZero 0.31-dag-321205e-BT4-6147500-it332"]
[Black "Halogen 12.4.1"]
[Result "1-0"]
[ECO "D17"]
[WhiteElo "3639"]
[BlackElo "3323"]
[PlyCount "125"]
[EventDate "2024.??.??"]

1. d4 d5 2. c4 c6 3. Nf3 Nf6 4. Nc3 dxc4 5. a4 Bf5 6. Ne5 Nbd7 7. Nxc4 Nd5 {book} 8. f3 e5 9. e4 Nxc3 10. bxc3 Be6 11. d5 (11. Rb1 exd4 12. cxd4 Nb6 13. Ne3 a5 14. d5 Bb4+ 15. Bd2 cxd5 16. Bxb4 axb4 17. Bb5+ Bd7 18. Bxd7+ Nxd7 19. Rxb4 O-O 20. Nxd5 Nf6 21. Nb6 Qe7 22. Rb5 Ra6 23. Qd4 Rd8 24. Qb4 Qxb4+ 25. Rxb4 Nd7 26. Nxd7 Rxd7 27. Ke2 Rc7 28. Rd1 g6 29. Rd8+ Kg7 30. h4 Rac6 31. Ke3 Rc2 32. Rd2 R2c3+ 33. Kf4 Ra3 34. Rdd4 h6 35. e5 h5 36. Re4 Ra2 37. Kg3 Kh6 38. Rbc4 Re7 39. Kh3 Rb2 40. Rb4 Rxb4 41. Rxb4 Rxe5 42. Rxb7 f6 43. Rb3 Ra5 44. Ra3 g5 45. g3 Kg6 46. Kh2 Kf5 47. Ra1 Kg6 48. Ra3 Kf5 49. Ra1 Kg6 50. Kh1 Kf5 51. Ra2 Kg6 52. Ra1 Kf5 53. Kg2 Kg6 54. Kf2 Kf5 55. Kg2 Kg6 56. Ra3 Kf5 57. Ra2 Kg6 58. Ra3 Kf5 59. Ra2 Kg6 60. Kh1 Kf5 61. Kh2 Kg6 62. Ra1 Kf5 63. Ra2 Kg6 64. Ra1 Kf5 65. Kh1 Kg6 66. Ra3 Kh6 67. Kg2 Kg6 68. f4 gxf4 69. gxf4 Kf5 70. Kg3 Ke4 71. Ra2 Ke3 72. Ra1 {½-½ Halogen 12.4.1 (3323)-LCZero 0.31-dag-321205e-BT4-6 (3639) TCEC Season 27 - Swiss 7 https://tcec-chess.com 2024 (3.43)}) 11... cxd5 12. exd5 Bf5 13. Ne3 Qf6 14. d6 Be6 15. Be2 O-O-O 16. Ba3 Qg5 17. Kf2 Nf6 18. c4 Bxd6 19. Bxd6 Qf4 20. g3 Ne4+ 21. Ke1 Nxg3 22. hxg3 Qxg3+ 23. Kf1 Bh3+ 24. Rxh3 Qxh3+ 25. Kg1 Qh6 26. Nf5 Qg5+ 27. Kf2 Qxf5 28. c5 Qf4 29. Qd5 Qh2+ 30. Ke3 Qh6+ 31. Kd3 Rhe8 32. Rd1 Qe6 33. Kc4 e4 34. f4 g6 35. Rb1 e3 36. a5 Qe4+ 37. Qxe4 Rxe4+ 38. Kd5 Rxf4 39. a6 Rf5+ 40. Kc4 b5+ 41. Kd4 b4 42. Bg4 e2 43. Bxe2 Rd7 44. Bf1 Kd8 45. Bh3 Rxd6+ 46. cxd6 Rh5 47. Rb3 h6 48. Rf3 Ke8 49. Kc4 f6 50. Be6 Rh4+ 51. Kc5 f5 52. Bd5 f4 53. Kc6 Rh5 54. Rxf4 Rf5 55. Re4+ Kf8 56. d7 Kg7 57. Re7+ Kf6 58. d8=Q Kg5 59. Re4+ Rf6+ 60. Be6 b3 61. Rg4+ Kh5 62. Qxf6 b2 63. Qh4# 1-0

Aus irgendeinem Grund weigert sich EloStat, den Download vom Match mit allen Teilnehmern zu berechnen, Lc0 wird ignoriert, hier mit Ordo und willkürlich vorgegebenen 3300 Durchschnitts- Elo:

   # PLAYER                                       : RATING    POINTS  PLAYED    (%)
   1 LCZero 0.31-dag-321205e-BT4-6147500-it332    : 3616.1      15.5      22   70.5%
   2 Stockfish 17                                 : 3578.2      14.5      22   65.9%
   3 Ceres 1.0_512x15_NLA                         : 3544.3      13.5      22   61.4%
   4 Berserk 13                                   : 3494.9      12.5      22   56.8%
   5 Obsidian dev-13.11                           : 3484.2      12.0      22   54.5%
   6 Ethereal 14.40                               : 3472.6      12.0      22   54.5%
   7 Caissa 1.20.1                                : 3460.4      12.0      22   54.5%
   8 Stormphrax 5.0.20_0f8af3f                    : 3445.6      12.0      22   54.5%
   9 KomodoDragon 3.3                             : 3441.1      12.0      22   54.5%
  10 rofChade 3.110                               : 3422.3      11.5      22   52.3%
  11 RubiChess 20240817                           : 3417.4      11.5      22   52.3%
  12 Viridithas 15.0.0-dev-f6ea5980               : 3415.8      12.0      22   54.5%
  13 Seer 2.8.0                                   : 3415.5      11.5      22   52.3%
  14 Revenge 20240822                             : 3392.7      12.5      22   56.8%
  15 Stoofvlees II d6                             : 3386.0      12.0      22   54.5%
  16 Ginkgo 4.31                                  : 3371.7      11.5      22   52.3%
  17 Uralochka 3.42.dev4-avx512                   : 3365.3      11.0      22   50.0%
  18 Devre 6.12                                   : 3363.4      12.0      22   54.5%
  19 PlentyChess selfgen-dev_3f195496             : 3362.0      11.5      22   52.3%
  20 Arasan 4e7f90a                               : 3329.1      11.0      22   50.0%
  21 Lizard 10.5_439e4896                         : 3327.9      11.5      22   52.3%
  22 Minic 3.41                                   : 3317.1      10.5      22   47.7%
  23 Velvet 8.0.0                                 : 3310.5      11.0      22   50.0%
  24 DeepSjeng 3.6 a30                            : 3298.7      11.0      22   50.0%
  25 akimbo 1.1.0-dev                             : 3292.7      11.5      22   52.3%
  26 BlackMarlin 9.0-dev-578a6f64                 : 3278.0      11.0      22   50.0%
  27 Halogen 12.4.1                               : 3267.6      10.5      22   47.7%
  28 Booot 7.3                                    : 3266.3      11.0      22   50.0%
  29 Igel 3.5.6                                   : 3251.2      11.0      22   50.0%
  30 Altair 7.1.5                                 : 3243.0      11.0      22   50.0%
  31 Equisetum 1.9.arvense                        : 3233.3      10.5      22   47.7%
  32 Weiss 2.1-dev10                              : 3227.8      10.5      22   47.7%
  33 Renegade 1.1.19                              : 3196.3      11.0      22   50.0%
  34 Tucano 11.24                                 : 3195.2      10.5      22   47.7%
  35 Winter 4.01a                                 : 3194.5      10.0      22   45.5%
  36 Texel 1.12a5                                 : 3191.8      11.5      22   52.3%
  37 Patricia 3.1_dev_d24e8487                    : 3153.9      10.5      22   47.7%
  38 Integral 3                                   : 3150.1      10.0      22   45.5%
  39 Marvin 6.3.0                                 : 3086.5       9.5      22   43.2%
  40 Heimdall 1.0.0-beta                          : 3013.2       8.0      22   36.4%
  41 4ku 5.1                                      : 3002.7       7.0      22   31.8%
  42 ChessFighter 3.19                            : 2995.7       7.5      22   34.1%
  43 Princhess 0.18.0-9-g214a6dc                  : 2966.8       7.0      22   31.8%
  44 ice4 5                                       : 2960.4       6.5      22   29.5%

By Peter Martan Date 2024-09-30 10:00 Edited 2024-09-30 10:03

Lothar Jung schrieb:

Lc0 hat zwei Engines unter den ersten vier SchachApps.

Na gut, aber wenn du so rechnest, hat SF eine Unmenge Engines unter den ersten 20 bis 50 (je nachdem, was du alles an Branches reinnimmst), und da sind dann nur 2 davon "Lc0- Engines"

Bin neugierig, ob sich Ceres halbwegs zivil installieren lassen wird und ob's die Lc0- Netze auch weiter wird nutzen können, die eigenen sollen ja um einiges schwächer sein. Dass Ceres hier so gut abgeschnitten hat (Lc0 natürlich auch), war schon auch ein bisschen dem Losglück der Eröffnungen geschuldet, das bei einem so großen Feld im Schweizer System halt schon noch eine Nummer mehr Rolle spielt, als wenn alle gegen alle mit allen Eröffnungen antreten, umso mehr, wenn die Eröffungen so verschieden lang und so verschieden unausgeglichen sind, was die Größe des einseitigen Vorteils angeht. Oder einfacher gesagt, mit diesem Riesenfeld und diesen Eröffnungen hätte es ein Vielfaches an Partien gebraucht, um halbwegs statistische Relevanz zu bekommen, was natürlich auch nicht die Absicht des an sich interessanten Events war (wie bei TCEC überhaupt in der Regel kein Wert auf error bars gelegt wird und gelegt werden kann).
Just my two cents und ohne den schönen Erfolg der NN- Engines schmälern zu wollen...

By Lothar Jung Date 2024-09-30 10:06 Upvotes 1

Der Rheinländer würde Deine Ausagen als “Kappes“ (Kohl) bezeichnen:

1. Ich kenne nur den jeweiligen Stockfish für eine Ranglistenbewertung.

2. Die ersten Engines haben in dem Schweizer Turnier untereinander Partien ausgetragen.
Schau dir doch die Kreuztabelle an.

By Peter Martan Date 2024-09-30 11:16 Edited 2024-09-30 11:24

Schau dir doch an, wieviele Partien jede Engine gespielt hat und mit welchen Eröffnungen welche starke gegen weche schwache. Das Schweizer System hat den Sinn, mit weniger Partien ein großes Feld halbwegs fair auf eine bunte (in der Spielstärke weit aufgefächerte) Gegnerschaft zu verteilen, wenn du dazu aber noch so unterschiedlich lange und unterschiedlich (un)ausgeglichene Eröffnungen nimmst, hast du die Hälfte an Fairness des Schweizer Systems wieder verschenkt (von dem ohnehin schon kompromisshaften Wer gegen Wen wie oft) und wenn du eine error bar des Turniers bestimmtest (wollte ich EloStat ja machen lassen, hat aber halt mit dieser download- .pgn nicht funktioniert, da kommt ein Ranking ohne Lc0 heraus, vielleicht des langen Namens wegen, und mit Ordo war's mir zu aufwändig) würdest den wesentlichen Inhalt des Kappes vielleicht besser verstanden haben, lieber Rheinländer

Und wenn du nur einen Stockfish für die Ranglisten kennst, wollen wir erst mal sehen, wieviele Ranglisten außer Lc0 auch Ceres führen werden und von denen, die's tun, werden wir dann eine halbwegs Kappes- freie Einordnung bekommen. Von dir und ein paar Discord- Matches wahrscheinlich früher, aber wieviele Engines da außer Lc0 und Ceres jeweils mit den einen und den anderen eigenen und oder gegenseitig getauschten Netzen mitspielen werden, warte ich gerne auch erst mal ab.
Halte uns bitte unbedingt auf dem Laufenden, Lothar und danke dafür.

By Max Siegfried Date 2024-09-30 12:23

Dafür das die Ceres Netze super schwach sind, ist Platz 3 super.
Gut mit LC0s Netz wäre Ceres auf Platz 1 gelandet.
Dies hätte für ein deutlich gesteigertes Interesse und mehr Unterstützung von der Schach Gemeinschaft gesorgt.

By Max Siegfried Date 2024-09-30 12:26

Peter Martan schrieb:

Lothar Jung schrieb:

Lc0 hat zwei Engines unter den ersten vier SchachApps.

Na gut, aber wenn du so rechnest, hat SF eine Unmenge Engines unter den ersten 20 bis 50 (je nachdem, was du alles an Branches reinnimmst), und da sind dann nur 2 davon "Lc0- Engines"

Hast du schon versucht Ceres zivil zu installieren?

By Max Siegfried Date 2024-09-30 12:25

Lothar Jung schrieb:

Lc0 hat zwei Engines unter den ersten vier SchachApps.
Ceres verwendet sein eigenes Netz und eine andere Suche.
Bei Analysen dürften sich die Engines unterscheiden.

Inwiefern eine andere Suche?

Tiefer?
Breiter?
Besser für die lange intensive Analyse?
Achtet mehr auf Taktik?
Schneidet in Testsuites deutlich besser ab?
Hat schon jemand Ceres in Testsuites getestet?

By Lothar Jung Date 2024-09-30 15:59 Upvotes 1

Bei Ceres MCTS bei Lc0 PUNCT.

By Jörg Oster Date 2024-09-30 16:32 Upvotes 3

Ceres macht auch PUCT.