EPD  :
    Time : ms
                                                Max   Total   Time   Hash         
    Engine           Score   Found  Pos   ELO  Score   Rate    ms     Mb  Cpu     
1  SFS130424        16845    214   256  3906  19405  86.8%   5000   256    8
2  ShashChess35.2   16205    208   256  3757  19405  83.5%   5000   256    8
3  SFS130424        15230    197   256  3532  19405  78.5%   5000    32    1
4  Lc0.32-6147500   14795    190   256  3429  19405  76.2%   5000  1000    2
5  Lc0.32-6077500   14600    189   256  3384  19405  75.2%   5000  1000    2
6  Lc0.31-6077500   14595    189   256  3384  19405  75.2%   5000  1000    2
7  Lc0-6147500      14480    186   256  3357  19405  74.6%   5000  1000    2
8  Stockfish240412  14270    190   256  3307  19405  73.5%   5000   256    8
9  ShashChess35.2   13885    181   256  3222  19405  71.6%   5000    32    1

13  SF240424        12565    171   256  2916  19405  64.8%   5000    32    1

16  SF240412        11810    156   256  2740  19405  60.9%   5000    32    1

                                    Created with MEA
                                          by
                                       Ferdinand
                                         Mosca

Ich hab' hier mal nur die paar Zeilen aus der 8- threads- Liste in die obige der single thread- runs reinkopiert, das Tool fügt sie dann dort ein, wo sie den Punkten nach landen. Natürlich schneiden die Fische entsprechend besser mit der 8- fachen Threadanzahl ab, aber ob das jetzt das ist, was man sich unter ausgeglichener Hardware vorstellt, ist immer noch sehr Geschmackssache, es gibt keine wirklich ausgeglichene Hardware, wenn die eine Engine auf der CPU spielt und die andere auf der GPU und vor allem hängt die Gerechtigkeit dabei auch davon ab, bei welcher TC man spielt und welche Gegner teilnehmen. Und dann ist das Ganze ein einzelner Stellungstest und keine eng-eng-game playing rating list.
Was daran mich interessiert, ist das Abschneiden vergleichbarer Engines in ihren jüngsten Versionen zueinander mit konstanter Hardware- Leistung in einer gewissen statistischen Relevanz und Reproduzierbarkeit, 8 threads sind so interessant wie einer, letzteres gibt aber mehr Diskrimination, es ist dasselbe wie beim game playing, da kannst du auch sagen, single thread matches interessieren dich nicht, ok, dann schau dir aber auch keine Ranglisten an, bei denen single thread eng-eng gespielt wird. Im Stellungstest (vor allem bei dem mit MEA, EloStatTS ist da wieder etwas Anderes) kannst du ja auch einfach einzelne runs einzelner engines einfügen und andere rausnehmen, die einzelne Performance bleibt beim einzelnen run gleich, wenn dich der eine Vergleich nicht interessiert, schaust du dir einfach den anderen an. Ich will nur keine endlos langen Listen haben und schaue daher, dass ich einer bestimmten nur das drin habe, was mich gerade aktuell interessiert. Und was du aber auch bei der willkürlichen anderen Kombi oben siehst: SF dev. 240412 (den 240424 hab' ich noch nicht mit 8 threads laufen lassen) ist mit 8 threads immer noch unter der Lc0- Gruppe, natürlich würde er sie auf 30 Threads überholen, aber das wäre dann eben auch wieder keine ausgeglichene Hardware.
Und ShashChess, 4 primary variants bei diesen Stellungen und 5" bremsen ihn auf reduzierter Hardware mehr. als ihm helfen. Man kann das nicht mit den 3 Varianten vom Solista- SF vergleichen, weil der das nur bis Tiefe 16 und nur innerhalb der 20cp- Score- Range macht.
Du meinst die HTC- Stellungen oder ähnliche, wenn du bei denen wenigstens 15"/Stellung TC gibst, da ist MultiPV=4 für ShashChess ein Vorteil und da überholt er bei mir auch den Solista- SF mit 4 Random OP MultiPV, Depth 21 und Score 200.
Bei 5" und den 256 oben könnte ich das mal mit 8 threads und MultiPV=2 probieren, aber wenn ich so anfange, kann ich das dann auch noch gleich für Tal ein und aus und für verschiedene viele MCTS- Threads extra testen, mag einen als reinen ShashChess- Test interessieren, aber mich halt nicht zum Vergleich mit ein paar anderen Version anderer Engines gemeinsam, beim SFS hab' ich hier ja auch nur das eine default- setting laufen lassen. Du bist aber herzlich eingeladen, Reinhold, mit den Stellungen und den Engines deiner Wahl die Tests zu machen, die dich am meisten interessieren, in wie weit die dann wieder mit anderen vergleichbar sind, das ist die Gretchen- Frage, ich hab' kein Problem damit, die einzelnen Ergebnisse einzelner meiner Tests für sich (und mich) allein stehen zu lassen

Die 256 Stellungen mit MEA und solcher und ähnlicher Hardware- TC ist für mich ein dem game playing eher vergleichbarer Screening- Test als die anti engine puzzles allein, die Kombination mehrerer Tests gibt natürlich mehr Information und wen die eine nicht interessiert, muss sie sich ja nicht anschauen. Das mit dem game playing selbst ist sowieso auch immer nur bedingt vergleichbar, untereinander und mit Stellungstests erst recht, und wie gesagt, je nachdem mit welchem game playing, welcher Hardware- TC, welchen Gegnern und welchen Eröffnungsstellungen, davon hängt ab, ob mehr oder weniger vergleichbar.  Den Solista- SF kannst du default genau so zum game playing verwenden wie ShashChess, aus der error bar beim eng-eng-match mit den beiden zu kommen, hab' ich bei 500 Partien 3'+1" jedenfalls nicht geschafft, und das war auch mit single thread, weil ich damit wenigstens entsprechend viele concurrencies gleichzeitig laufen lassen kann.

In wie vielen Wochen können wir ungefähr mit LC0 BT5 rechnen?