Not logged inCSS-Forum
Forum CSS-Online Help Search Login
CSS-Shop Impressum Datenschutz
Up Topic Hauptforen / CSS-Forum / Mit Verspätung SSDF 31.12.2023
- - By Lothar Jung Date 2024-06-15 22:45
https://www.ssdf.bosjo.net/comment.htm

Lc0 vor SF16
Parent - - By Andreas Mader Date 2024-06-18 10:14 Edited 2024-06-18 10:17 Upvotes 2
Lothar Jung schrieb:

Lc0 vor SF16


Ja.
Um 4 Punkte.
Bei einer Schwankungsbreite, die ca. 10x so hoch ist. Das sind wohl die beiden am häufigsten ignorierten Spalten in Ratinglisten.
Parent - - By Martin Steinwandter Date 2024-06-18 16:40
Wie sind denn die Bedingungen?  LC0 spielt auf einer 3060Ti und unter Hardware information werden pc und deren cpu aufgelistet. ABER soweit ich das verstehe spielen die Engines mit einem Kern. Wenn dem so ist, wäre diese Liste nicht wirklich brauchbar. Da ändert auch die lange Bedenkzeit daran nichts. Oder übersehe ich da etwas?
Parent - By Lothar Jung Date 2024-06-18 16:43
Die Engines spielen mit 8 Kernen.
Parent - - By Rainer Neuhäusler Date 2024-06-20 18:24 Edited 2024-06-20 19:02
Andreas Mader schrieb:

Lothar Jung schrieb:

Lc0 vor SF16


Ja.
Um 4 Punkte.
Bei einer Schwankungsbreite, die ca. 10x so hoch ist. Das sind wohl die beiden am häufigsten ignorierten Spalten in Ratinglisten.

In der Tat, wie ein verwunschener Schacht oder Brunnen, diese ominöse Spalte. Sie war schon immer da und wird auch immer bleiben, aber wer sie erwähnt, erntet nur stummes Entsetzen, vergleichbar dem Namen VOLDEMORT im Harry Potter Universum.

Gewarnt sei der Verwegene, der trotzdem einen Blick hineinwagt, er könnte den Glauben und die Freude an seinem Hobby verlieren. Beispiele:

- In der SSDF-Liste, als Weihnachtsüberraschung, der optische Leckerbissen Lc0 vor Stockfish. Vergiss es, nicht signifikant.
- im  CCRL Ranking 20 schöne hintereinander aufgelistete Engines von Stockfish bis Viridithas, mit den Rangplätzen 1-20. Vergiss es, das unterteilt sich nicht einmal in eine Handvoll Gruppen, innerhalb derer die Elowerte nicht signifikant sind.  Wie z.B. Platz 13-20, Igel bis Viridithas. 3557 + 19 = 3576 = Rangplatz 13 = Igel.
- die laufenden Berichterstattungen über Turniere, Testsuitenmarathons, Engine Updates, Ranglisten, neuronale Trainingsnetze... Vergiss die meisten, alle Jahre einmal reicht, die Error Bars bügeln fast alles gleich.

Wie man sieht, der Computerschachfreund macht nicht von ungefähr, mehr instinktiv als reflektiert, einen weiten Bogen um diese unheilvolle Spalte, denn tief unten lauert der Gleichmacher, der bösartige Statistikus.

CCRL, Juni 2024

                                                      Elo     Error Bar

1        Stockfish 20230613            3642  +12  −12
       
1        Torch v2                              3630  +16  −16
       
3        Dragon by Komodo 3.3       3626  +13  −13
       
4        Berserk 13                          3618  +17  −17
       
5        Obsidian 12.0                     3609  +18  −18
       
6        PlentyChess 1.0.0              3602  +19  −19
       
7        RubiChess 20240112         3600  +14  −14
       
8        Ethereal 14.25                    3599  +13  −13
       
9        Caissa 1.17                        3596  +17  −17
       
10      Seer 2.8.0                          3584  +14  −14
       
11      Alexandria 6.1.0                 3583  +26  −26
       
12      Chess Syst. Tal 2.0 Elo      3580  +12  −12
       
13      Igel 3.5.0                            3576  +12  −12
       
14 15 Clover 6.1                          3572  +14  −14
       
14 15  rofChade 3.1                      3572  +12  −12
       
16       Rebel EAS                         3567  +13  −13
       
17       Uralochka 3.40a                 3565  +13  −13
       
18      Koivisto 9.0                         3559  +11  −11
       
19 20     Revenge 3.0                   3557  +10  −10
       
19 20  Viridithas 12.0.0                 3557  +19  −19

.
Parent - By Andreas Mader Date 2024-06-20 19:03
Es ist sogar noch schlimmer. In 5 Prozent aller Fälle liegt die "wahre ELO-Zahl" außerhalb der angegebenen Schwankungsbreite. Jede zwanzigste Engine ist noch um einiges besser oder schlechter als die eine Zahl aussagt, an der sich alle festhängen, weil es so viel einfacher ist als mit Wahrscheinlichkeiten zu hantieren.

Der Mensch neigt zur Vereinfachung. Eine einzige Zahl bestimmt die Bewertung - oder ein einziger Stellungstest die Zahl.
Parent - By Olaf Jenkner Date 2024-06-20 19:13 Upvotes 1
Rainer Neuhäusler schrieb:
der bösartige Statistikus.

https://www.youtube.com/watch?v=m9qZUgxup4w
Up Topic Hauptforen / CSS-Forum / Mit Verspätung SSDF 31.12.2023

Powered by mwForum 2.29.3 © 1999-2014 Markus Wichitill