TCEC/S9: Stufe 2

By Ralf Mueller Date 2016-06-14 09:29

Interessant, dass sowohl Stockfish als auch Houdini in Gruppe A mehr Punkte geholt haben als die Bestplatzierten in Gruppe B.
Oh, es wird ein neues Update von Jonny, Nirvana und Fire geben! Da kann man ja gespannt sein.

By Jörg Oster Date 2016-06-14 10:00

Ralf Mueller schrieb:

Ich nehme an, du meintest Komodo und Houdini ...

Ansonsten sage mir nochmal einer, Gruppe B sei die schwächere gewesen.
Es sieht wohl eher danach aus, dass z. B. Nirvana und Jonny deutlich 'underrated' sind/waren.

Auch schien mir in Gruppe B die Leistungsdichte deutlich höher zu sein.
Das zeigt sich auch daran, dass hier 9,5 Punkte nötig waren um sich für die nächste Runde zu qualifizieren,
während es in Gruppe A volle 2 Punkte weniger waren.

Allerdings sollte man das alles auch nicht überbewerten, da ja eh nur eine Momentaufnahme.

By Benno Hartwig Date 2016-06-14 10:32

> Es sieht wohl eher danach aus, dass z. B. Nirvana und Jonny deutlich 'underrated' sind/waren.

Woran machst du fest, dass diese Engines "underrated" waren und nicht die Konkurrenz "overratet"?
Mir fiel vor allem auf, dass sich SF schwer damit tat, sich als Kandidat für das Finale zu empfehlen.
Benno

By Michael Scheidl Date 2016-06-14 11:14

Ich glaube, daß SF. ohne Contempt gespielt hat. Jedenfalls war in den Settings nichts zu sehen und normalerweise ist der Default bei SF. Null. Wobei ich eigentlich denke daß es Seltenheitswert hat, wo sich das überhaupt ergebniswirksam auswirkt (in der Annahme, daß es der simple Drawscore-Ansatz ist und nicht einer wie bei Houdini?).

By Benno Hartwig Date 2016-06-14 10:30

Komodo (den meintest du wohl) hat sogar ausgesprochen stark dominiert! Mit 1,5 und 2,5 Punkten Vorsprung vor den 2. und 3.
Stockfish hatte nur 0,5 und 1,0 Punkte Vorsprung.
Und das, obwohl die Komodo-Gruppe schon ein gutes Stück stärker geratet war als die Stockfish-Gruppe.
Benno

By Benno Hartwig Date 2016-06-14 09:59 Edited 2016-06-14 10:02

Und Stage 2 wird uns auch neue Releases zeigen

:
"So far confirmed new and updated versions are submitted by Komodo, Stockfish, Nirvana, Andscacs, Fire, Ginkgo, Hannibal, Jonny, and Raptor." (Quelle)
Die Engine-Szene lebt!
Houdini andererseits finden wir (noch) nicht auf dieser Liste.

Benno

By Ralf Mueller Date 2016-06-14 10:04

Der neue Houdini war aber auch noch nicht für Stage 2 angekündigt.

By Benno Hartwig Date 2016-06-14 10:20 Edited 2016-06-14 10:34

Hätte ja sein können. Immerhin hieß es bei chessdom
"In later stages (Stage 2 or Stage 3) it will be upgraded to a Houdini 5 dev."
Aber es stimmt schon, die letzten 8 wird Houdini wohl auch mit der Version 4 erreichen. (Aber bis zum Finale sollte Robert nicht warten!)

Benno

By Michael Scheidl Date 2016-06-14 10:10

Zitat:

(...) updated versions are submitted by Komodo, Stockfish, Nirvana, Andscacs, Fire, Ginkgo, Hannibal, Jonny, and Raptor."

Sehr spannend!

Da kann es durchaus sein, daß der eine oder andere "bärenstarke" Oldie wie etwa Rybka, Gull oder Naum, ausscheiden wird. Einige der nachdrängenden aktuellen Entwicklungen sind sehr stark.

By Thomas Müller Date 2016-06-14 12:20

vermutlich gibt es das eine oder andere update
K10 denke ich
H5 evtl. noch nicht
SF auch

Bin gespannt wie sich hier Jonny und Nirvana schlagen
Fällt mir grad wieder auf...wieso ist F15 nicht dabei ?! egal.

8-Züge buch...hmm...könnte mehr remis geben, aber die gegner sind in summe auch ausgegleichner

gruß
thomas

By Benno Hartwig Date 2016-06-14 12:50

Updates gab es also schon einige:


Stage 1              Stage 2
-------------------------------
Komodo 9.42          10
Ginkgo 1.7           1.75
Hannibal 220416      100616
Raptor 2.2           2.3
Stockfish 210516     110616
Nirvana 160416       120616
Jonny 7.20           7.30 
Andscacs 0.86134b    0.86189b

By Michael Scheidl Date 2016-06-14 14:33

Wenn der alte Houdini 4 zweimal Pech hat, kann er rausfliegen. Wieso ist Dev-H5 nicht für Stufe 2 einsatzbereit?

By Benno Hartwig Date 2016-06-14 20:44

> Wieso ist Dev-H5 nicht für Stufe 2 einsatzbereit?

Weil Robert die Weiterentwicklung erst vor gefühlt 5 Minuten begonnen hat?

Benno

By Thomas Müller Date 2016-06-14 15:28

ui...mehr als ich gedacht hätte

By Tom Paul Date 2016-06-14 19:38

Michael Scheidl schrieb:

Es kommen 8 Züge lange Eröffnungsvorgaben zum Einsatz.

1 Komodo 9.42          3225 14.0  15 95.75 ·· 1  1  =  =  1  1  1  1  1  1  1  1  1  1  1 
1 Stockfish 210516     3221 12.0  15 76.50 ·· =  =  =  1  =  =  =  1  1  1  1  1  1  1  1

1.Es kommen 8 Züge lange Eröffnungsvorgaben zum Einsatz.
Du meinst bestimmt 8 Züge lange Mittelspielvorgaben.

2.Da sieht man wieder warum Komodo gewinnen wird, die Stockfish Entwickler bekommen es einfach nicht auf die Reihe sinnlosen Materialabtausch für eine +0.01 bessere Bewertung zu vermeiden und auch die 3-Fold Rep Vermeidung funktioniert nicht, nicht mal die einfache wo 20 andere 0.00, nicht 3-Fold Rep Züge vorhanden sind.

By Benno Hartwig Date 2016-06-14 20:47 Edited 2016-06-14 20:50

   Komodo 9.42          3225 14.0  15 95.75 ·· 1  1  =  =  1  1  1  1  1  1  1  1  1  1  1 
   Stockfish 210516     3221 12.0  15 76.50 ·· =  =  =  1  =  =  =  1  1  1  1  1  1  1  1

...und die erste Runde geht nach Punkten an: Komodo!
(wenn man es eben auch mal so betrachten möchte)

Gegen die "Schwachen" haben beide sicher gepunktet.
Aber gegen die Guten, gegen die auch-Weiterkommer, erreichte

Komodo:      6,0 : 1,0
Stockfish:   4,0 : 3,0

Benno

By Tom Paul Date 2016-06-15 05:48

Nr             White         Black             Termination       Mov WhiteEv BlackEv Start                  Duration ECO FinalFen                                       Opening
  1          Naum 4.6 1/2 1/2 Raptor 2.3        3-fold repetition  79    0.00 0.00    12:00:58 on 2016.06.14 03:50:49 D30 8/8/8/4k3/2Q5/1P5P/P1K2p2/4q3 w - - 60 80      QGD: 3.Nf3 Nf6
  2         Komodo 10 1/2 1/2 Ginkgo 1.75       3-fold repetition  98    0.00 0.00    15:52:49 on 2016.06.14 04:36:06 C15 5k2/1bb5/1pN5/p2K4/P7/8/8/4R3 b - - 85 98      French: Winawer, Alekhine Gambit, 5.a3 Be7 6.Nxe4 Nf6 7.Qd3
  3     Protector 1.9 1/2 1/2 Houdini 4         TCEC draw rule    137    0.00 0.02    20:29:58 on 2016.06.14 05:00:13 D31 8/3k4/6p1/3P3p/4PK1P/6B1/r7/8 w - - 10 138     QGD: Alatortsev, 5.Bf4 c6
  4       Chiron 3.01 1/2 1/2 Stockfish 110616  TCEC draw rule     50    0.00 0.00    01:31:11 on 2016.06.15 03:29:51 D63 8/5kp1/4p3/4Q3/3Pp1P1/pq2P3/5P1K/8 w - - 10 51 QGD: Orthodox, 7.Rc1 c6 8.a3

8 Engines haben ihr Partien gespielt und das 8 Züge tiefe Mittelspielbuch zeigt seine Remis Wirkung.

By Thomas Müller Date 2016-06-15 07:27

was hat das jetzt mit der frage von Benno zu tun, warum Fritz15 nicht bei TCEC dabei ist?

By Tom Paul Date 2016-06-16 07:04

Patrick Jansen schrieb:

Die erste Runde ist durch - jede Partie endete Remis.

Kein Wunder, es ist ja auch Catos Buch der remislichen Mittelspielvorgabestellungen.
Normalerweise macht sich ein 300 ELO Unterschied schon deutlich in der Eröffnung bemerkbar, indem eine Engine sich nicht so gut entwickelt oder Tempi verliert.
Witziger weise hat bei Strawpoll nur Cato und eine einzige andere Person für sein 8 Züge Buch gestimmt. Hahaha.

12 andere Personen haben für die 20 möglichen Eröffnungszüge gestimmt.
Cato tut ja immer so als ob jeder nur seine 8 Züge Mittelspielvorgabestellungen sehen will und es nur eine einzige Person gibt welche die 20 möglichen Eröffnungszüge sehen will.

Nr             White         Black             Termination       Mov WhiteEv BlackEv Start                  Duration ECO FinalFen                                                          Opening
  1          Naum 4.6 1/2 1/2 Raptor 2.3        3-fold repetition  79    0.00 0.00    12:00:58 on 2016.06.14 03:50:49 D30 8/8/8/4k3/2Q5/1P5P/P1K2p2/4q3 w - - 60 80                         QGD: 3.Nf3 Nf6
  2         Komodo 10 1/2 1/2 Ginkgo 1.75       3-fold repetition  98    0.00 0.00    15:52:49 on 2016.06.14 04:36:06 C15 5k2/1bb5/1pN5/p2K4/P7/8/8/4R3 b - - 85 98                         French: Winawer, Alekhine Gambit, 5.a3 Be7 6.Nxe4 Nf6 7.Qd3
  3     Protector 1.9 1/2 1/2 Houdini 4         TCEC draw rule    137    0.00 0.02    20:29:58 on 2016.06.14 05:00:13 D31 8/3k4/6p1/3P3p/4PK1P/6B1/r7/8 w - - 10 138                        QGD: Alatortsev, 5.Bf4 c6
  4       Chiron 3.01 1/2 1/2 Stockfish 110616  TCEC draw rule     50    0.00 0.00    01:31:11 on 2016.06.15 03:29:51 D63 8/5kp1/4p3/4Q3/3Pp1P1/pq2P3/5P1K/8 w - - 10 51                    QGD: Orthodox, 7.Rc1 c6 8.a3
  5   Hannibal 100616 1/2 1/2 Fire 5            TCEC draw rule     74    0.00 0.00    05:02:07 on 2016.06.15 04:24:32 E51 8/2b2pk1/6p1/3BPbP1/5K2/3N4/8/8 w - - 20 75                       Nimzo-Indian: 4.e3 O-O 5.Nf3 d5 6.a3
  6 Andscacs 0.86189b 1/2 1/2 Vajolet2 2.2.15   TCEC draw rule    129   -0.01 0.00    09:27:43 on 2016.06.15 04:43:36 D36 8/4r3/6B1/3k4/1P6/1PK5/8/8 w - - 75 130                           QGD: Exchange, Main Line, 9.Nf3 Re8 10.O-O h6
  7            Gull 3 1/2 1/2 Nirvana 120616    TCEC draw rule     50    0.03 0.00    14:12:22 on 2016.06.15 02:38:42 C47 8/1p4p1/p4k2/8/P6K/1PR5/2P5/4r3 w - - 10 51                       Four Knights: Scotch, 4...exd4 5.Nxd4 d6
  8         Rybka 4.1 1/2 1/2 Jonny 7.30        TCEC draw rule     46    0.00 0.00    16:52:05 on 2016.06.15 03:16:22 E12 8/p7/6R1/2p1kp1P/2P5/6P1/6K1/r7 b - - 10 46                       Queen's Indian: Petrosian, 6.cxd5 exd5 7.g3
  9        Raptor 2.3 1/2 1/2 Jonny 7.30        TCEC draw rule     54    0.00 0.00    20:09:34 on 2016.06.15 03:16:34 A43 1k2Q3/8/p2r4/8/1PP5/4KPq1/1P1p4/3R4 b - - 10 54                   Old Benoni: 2.d5 Nf6 3.Nf3 e6 4.Nc3
 10     Nirvana 120616 1/2 1/2 Rybka 4.1         TCEC draw rule    145    0.00 0.00    23:27:14 on 2016.06.15 04:57:48 B58 2r5/5k2/4p3/4Pp2/1B1N4/3K4/8/8 w - - 98 146                       Sicilian: Boleslavsky, 6...a6
 11    Vajolet2 2.2.15 1/2 1/2 Gull 3            3-fold repetition  31    0.00 0.00    04:26:04 on 2016.06.16 01:55:16 B06 4r1k1/1b3p2/3prnp1/2q1n1Qp/R1p1P2P/4NBN1/2P2PP1/3R2K1 b - - 11 31 Modern: 3.Nc3 d6 4.Be3 c6

By Patrick Jansen Date 2016-06-16 14:50

Nach 12 Partien endlich mal eine, die nicht Remis endete:

Stockfish 110616 vs. Hannibal 100616 1-0

By Benno Hartwig Date 2016-06-17 06:25 Edited 2016-06-17 06:31

Und nach gleich 17 Partien werden es immerhin 4 Siege einer Engine sein. (Stockfish, Houdini und 2 mal Komodo)
Remisquote dann 76%, meiner Meinung nach bei diesen Bedingungen nicht ungewöhnlich.

Benno
(einfach mal auf Komodos 280.01 vertrauend, aber ohne zu sehen, wie es weitergehen muss. Und auch die Entwicklung der Komodo-Bewertung irritiert, zumal Raptor jetzt 0.00 meint! ???)

By Tom Paul Date 2016-06-17 06:57

Benno Hartwig schrieb:

Und wenn du jetzt die 3 Engines mit ihren 300 ELO mehr (die eine 95% Chance auf einen Gewinn gegen 300 ELO schwächere haben) nicht betrachtest und dir mal die restlichen gleichstarken Engines anschaust, dann siehst du eine 100% Remisquote.

By Benno Hartwig Date 2016-06-17 07:04 Edited 2016-06-17 07:18

Stimmt: wenn ich die einen Ergebnisse weglasse, dann sehe ich nur noch die anderen Ergebnisse. SCNR
Außerdem:
- 300 Elo Differenz gab es nur ein mal, die anderen lagen um 200
- 300 Elo bedeuten eine Erfolgsquote von 85%, die Siegchance ist noch mal kleiner, da hier ja auch Remisen drinne sind.

Benno

By Tom Paul Date 2016-06-17 22:27

Bis auf die 3 Top Engines, wen wundert es?, gab es nur Remis.
Und die laufende Partie sieht auch danach aus.
Das sind schon die ersten ~10% aller Partien von Stage 2.

 Nr             White         Black             Termination       Mov WhiteEv BlackEv Start                  Duration ECO FinalFen                                                          Opening
  1          Naum 4.6 1/2 1/2 Raptor 2.3         3-fold repetition  79    0.00 0.00    12:00:58 on 2016.06.14 03:50:49 D30 8/8/8/4k3/2Q5/1P5P/P1K2p2/4q3 w - - 60 80                         QGD: 3.Nf3 Nf6
  2         Komodo 10 1/2 1/2 Ginkgo 1.75        3-fold repetition  98    0.00 0.00    15:52:49 on 2016.06.14 04:36:06 C15 5k2/1bb5/1pN5/p2K4/P7/8/8/4R3 b - - 85 98                         French: Winawer, Alekhine Gambit, 5.a3 Be7 6.Nxe4 Nf6 7.Qd3
  3     Protector 1.9 1/2 1/2 Houdini 4          TCEC draw rule    137    0.00 0.02    20:29:58 on 2016.06.14 05:00:13 D31 8/3k4/6p1/3P3p/4PK1P/6B1/r7/8 w - - 10 138                        QGD: Alatortsev, 5.Bf4 c6
  4       Chiron 3.01 1/2 1/2 Stockfish 110616   TCEC draw rule     50    0.00 0.00    01:31:11 on 2016.06.15 03:29:51 D63 8/5kp1/4p3/4Q3/3Pp1P1/pq2P3/5P1K/8 w - - 10 51                    QGD: Orthodox, 7.Rc1 c6 8.a3
  5   Hannibal 100616 1/2 1/2 Fire 5             TCEC draw rule     74    0.00 0.00    05:02:07 on 2016.06.15 04:24:32 E51 8/2b2pk1/6p1/3BPbP1/5K2/3N4/8/8 w - - 20 75                       Nimzo-Indian: 4.e3 O-O 5.Nf3 d5 6.a3
  6 Andscacs 0.86189b 1/2 1/2 Vajolet2 2.2.15    TCEC draw rule    129   -0.01 0.00    09:27:43 on 2016.06.15 04:43:36 D36 8/4r3/6B1/3k4/1P6/1PK5/8/8 w - - 75 130                           QGD: Exchange, Main Line, 9.Nf3 Re8 10.O-O h6
  7            Gull 3 1/2 1/2 Nirvana 120616     TCEC draw rule     50    0.03 0.00    14:12:22 on 2016.06.15 02:38:42 C47 8/1p4p1/p4k2/8/P6K/1PR5/2P5/4r3 w - - 10 51                       Four Knights: Scotch, 4...exd4 5.Nxd4 d6
  8         Rybka 4.1 1/2 1/2 Jonny 7.30         TCEC draw rule     46    0.00 0.00    16:52:05 on 2016.06.15 03:16:22 E12 8/p7/6R1/2p1kp1P/2P5/6P1/6K1/r7 b - - 10 46                       Queen's Indian: Petrosian, 6.cxd5 exd5 7.g3
  9        Raptor 2.3 1/2 1/2 Jonny 7.30         TCEC draw rule     54    0.00 0.00    20:09:34 on 2016.06.15 03:16:34 A43 1k2Q3/8/p2r4/8/1PP5/4KPq1/1P1p4/3R4 b - - 10 54                   Old Benoni: 2.d5 Nf6 3.Nf3 e6 4.Nc3
  10    Nirvana 120616 1/2 1/2 Rybka 4.1         TCEC draw rule    145    0.00 0.00    23:27:14 on 2016.06.15 04:57:48 B58 2r5/5k2/4p3/4Pp2/1B1N4/3K4/8/8 w - - 98 146                       Sicilian: Boleslavsky, 6...a6
  11   Vajolet2 2.2.15 1/2 1/2 Gull 3            3-fold repetition  31    0.00 0.00    04:26:04 on 2016.06.16 01:55:16 B06 4r1k1/1b3p2/3prnp1/2q1n1Qp/R1p1P2P/4NBN1/2P2PP1/3R2K1 b - - 11 31 Modern: 3.Nc3 d6 4.Be3 c6
  12            Fire 5 1/2 1/2 Andscacs 0.86189b 3-fold repetition  57    0.00 0.00    06:22:25 on 2016.06.16 04:05:25 A21 8/R5pk/6p1/5p2/1Qp2q1P/1P6/5PPK/8 w - - 9 58                      English: Kramnik-Shirov, 3.Nd5 Bc5
  13  Stockfish 110616   1 0   Hannibal 100616   TCEC win rule      66  123.53 7.98    10:28:54 on 2016.06.16 04:07:47 C10 1k6/8/R7/PP3K2/8/8/8/r7 w - - 11 67                               French: 3.Nc3 Nc6 4.Nf3 Nf6
  14         Houdini 4   1 0   Chiron 3.01       TCEC win rule      66    6.93 8.03    14:37:44 on 2016.06.16 03:24:54 E14 6k1/3R4/1pr3r1/p7/P2R4/1P2N3/4K1P1/8 b - - 6 66                   Queen's Indian: 4.e3 Bb7 5.Nc3
  15       Ginkgo 1.75 1/2 1/2 Protector 1.9     TB position        82    0.00 0.00    18:03:42 on 2016.06.16 04:20:03 A36 8/6N1/2kb4/5P2/7K/8/8/8 b - - 0 82                                English: Symmetrical, 5.a3 d6
  16          Naum 4.6   0 1   Komodo 10         TCEC win rule      57  -16.03 -250.00 22:24:47 on 2016.06.16 03:45:47 B06 8/2k1p3/2P5/1P6/p1P3n1/P1N2pb1/3K2p1/6B1 b - - 4 57               Modern: 3.Nc3 d6 4.Be3 a6
  17         Komodo 10   1 0   Raptor 2.3        TCEC win rule      95     M77 7.98    02:11:34 on 2016.06.17 04:36:48 D99 5k2/R7/5p2/3K4/6b1/8/5P2/8 w - - 47 96                            Grünfeld: Russian, Smyslov, Main Line, 9...Nb6 10.Rd1 Nc6 11.d5 Ne5
  18     Protector 1.9 1/2 1/2 Naum 4.6          TCEC draw rule     60    0.00 0.00    06:49:25 on 2016.06.17 03:24:22 D93 R7/5pk1/6p1/4K1P1/4PP2/p7/8/r7 b - - 10 60                        Grünfeld: 5.Bf4 O-O 6.e3 c6
  19       Chiron 3.01 1/2 1/2 Ginkgo 1.75       TCEC draw rule     86    0.00 0.00    10:14:48 on 2016.06.17 03:53:47 E15 R7/8/8/3ppK2/1k6/5P2/1p2r3/1B6 w - - 10 87                        Queen's Indian: Nimzowitsch, 5.b3 Bb7, 7...a5 8.O-O O-O
  20   Hannibal 100616 1/2 1/2 Houdini 4         TCEC draw rule     64    0.00 0.03    14:09:39 on 2016.06.17 03:37:34 A39 3k4/4np2/3p2p1/6Pp/1r1PK2P/2N5/P7/3R4 w - - 11 65                 English: Symmetrical, Main Line 7.d4, 8...Ng4 9.e3 d6
  21 Andscacs 0.86189b 1/2 1/2 Stockfish 110616  TCEC draw rule     51    0.01 0.00    17:48:17 on 2016.06.17 03:29:02 B04 8/2B2k2/5n2/8/7p/5q2/1PQ2P1K/8 w - - 10 52                        Alekhine: Modern, Fianchetto, 5.Bc4 Nb6 6.Bb3 Bg7

By Tobias Lagemann Date 2016-06-21 10:00

Hallo Tom,

wir sind jetzt bei nach 43 Partien bei 12 Vollpunktpartien. 6 davon gehen auf das Konto der 3 "starken" Engines (aus gerade mal 15 Partien). Der Elovorsprung scheint also entgegen erster Verlautbarungen doch zu wirken (besonders bei Komodo). Und auch die "schwächeren" Engines wollen sich einfach nicht damit abfinden, dass die ausgesuchten Startstellungen angeblich so unendlich remislich sind ...

Meine Testerei zu unausgewogenen Stellungen hat übrigens für Komodo 9.1 (mir ist der Aufwand jede neue Version durch die Stellungen laufen zu lassen, einfach zu hoch, daher wird es keine weiteren Komodo Einbindungen in den Turnierzyklus geben) zu keinem Turniersieg gereicht. Fern von langweiligen Remisstellungen ist Komodo kein Garant für Siege - da punktet Stockfish allemal konsequenter. Gerade läuft ein Turnier zur Grundstellung. Mal schauen, ob sich Komodo wenigstens da durchsetzen kann.

Tobias

By Tom Paul Date 2016-06-21 18:59

5 Stockfish 110616 3222 3.5 6 8.50 = ·· = = = = 1

Stockfish ist aktuell auf Platz 5 und kann noch in dieser Runde von Andscacs und Protector überholt werden und steht dann auf Platz 7!
Stockfish hat 5x Remis gespielt und nur 1x gewonnen.
Wenn das so weiter geht, dann landet Stockfish noch auf Platz 9 am Ende dieser Stage und ist draußen.
Stockfish hat aktuell 98 Entwickler, es wäre doch praktisch wenn jeder einmal einen Test fertigstellt zum Thema 3-fold Rep Vermeidung oder sinnloser Abtausch Vermeidung.
Ein einziger von den 98 Tests wird schon funktionieren.

By Tom Paul Date 2016-06-21 21:01

Tom Paul schrieb:

6 Stockfish 110616 3222 3.5 6 9.00

By Tobias Lagemann Date 2016-06-22 17:24

Och,

SF wird diese Runde überstehen.

Aber was wird in der nächsten geschehen?

Ich denke, dass es nicht allein an SF liegt, dass die Punkteausbeute so mager ist. Die anderen Engines haben im Hinblick auf "Zement anrühren" enorm zugelegt. Sie spielen zum einen recht vorsichtig, zum anderen können sie gut verteidigen. Da SF - so meine Wahrnehmung - seinerseits nicht sonderlich aggressiv zu werke geht, ist das Remis beinah vorprogrammiert.

Frage meinerseits: Wie läuft die SF-Testerei ab? Wird gegen einen breiten Pool anderer Engines getestet oder pickt man sich Rosinen heraus (z.B. Komodo, starke Vorgänger SFe)?

Tobias

By Tom Paul Date 2016-06-22 17:44

Tobias Lagemann schrieb:

Z.B. Contempt führt im Fishtest Stockfish vs Stockfish zu -1 ELO. Deshalb wird das nicht gemacht.
Und auch weil irgendwelche Leute argumentieren das Contempt schadet, gegen stärkere Engines, da frage ich mich immer: wie heißen diese stärkeren Engines?
Gegen schwächere Gegner führt ein Contempt zu einem ELO +, je nach Contempt Einstellung und gegnerischer Stärke auch zu einem verdammt dicken ELO +.
Und das dicke ELO + musst du auch noch am Ende zusammen zählen, wenn Stockfish mehrere Gegner hatte.
Also lieber 100 ELO schwächer spielen als -1 ELO gegen Stockfish zu riskieren.

By Tom Paul Date 2016-06-19 14:51

N Engine            Rtng Pts Gm   SB Ko Ho Va Jo St Gu Gi Fi An Ha Pr Ry Ch Ra Ni Na

 1 Komodo 10          3228 3.5  4 5.50 ··                =           1        1     1 

 2 Houdini 4          3181 3.0  4 4.50    ··                   1  =  =     1          

 3 Vajolet2 2.2.15    2978 2.5  4 4.50       ·· =     =        =        1             
 4 Jonny 7.30         2963 2.5  4 4.25       =  ··                      =     =  1    
 5 Stockfish 110616   3222 2.5  4 4.00             ·· =        =  1        =     
     
 6 Gull 3             3123 2.0  4 4.25       =     =  ··    =                    =    
 7 Ginkgo 1.75        3028 2.0  4 4.00 =                 ··       =  =     =          
 8 Fire 5             3082 2.0  4 3.25                =     ·· =  =     =             

 9 Andscacs 0.86189b  3004 1.5  4 3.50    0  =     =        =  ··                     
10 Hannibal 100616   3002 1.5  4 3.50    =        0     =  =     ··                  
11 Protector 1.9     3014 1.5  4 3.25 0  =              =           ··             = 
12 Rybka 4.1         3131 1.5  4 3.00       0  =           =           ··       =    
13 Chiron 3.01       3015 1.5  4 3.00    0        =     =                 ··       = 
14 Raptor 2.3        2903 1.5  4 2.75 0        =                             ·· =  = 
15 Nirvana 120616    3031 1.5  4 2.50          0     =                 =     =  ··   
16 Naum 4.6          3048 1.5  4 2.25 0                             =     =  =     ··

Stockfish nur auf Platz 5.
Komodo profitiert als positionelle Engine und dank des super SMP mal wieder am meisten von den vielen Kernen und der langen Bedenkzeit.
Selbst Houdini ist dank seiner Remis Vermeidung und der besseren Taktik auf Platz 2.
Bei der Remis Vermeidung, Taktik, SMP und positionelles Verständnis muss Stockfish noch ganz schön nachbessern.

By Benno Hartwig Date 2016-06-19 15:27 Edited 2016-06-19 15:38

...und, und das vor allem, sind es jeweils nur 4 Partien!
Aber Komodo hat, ganz wie in der 1. Runde, wirklich faszinierend stark gepunktet!
Benno
PS: Und Houdini macht Lust auf ein Version 5

By Benno Hartwig Date 2016-06-20 20:35 Edited 2016-06-20 20:39

Nach dem 5. Durchgang ein ähnliches Bild:

 N Engine            Rtng Pts Gm   SB Ko Ho Jo St Gu Va Fi An Ni Pr Ch Ry Gi Ha Na Ra

   1 Komodo 10         3228 4.0  5 8.00 ··                         1  =     =     1  1 

   2 Houdini 4         3181 3.5  5 8.00    ··       =        1     =  1        =       

   3 Jonny 7.30        2963 3.0  5 6.75       ··       =  =     1        =           = 
   4 Stockfish 110616  3222 3.0  5 6.50          ·· =        =        =  =     1       

   5 Gull 3            3123 2.5  5 7.00    =     =  ·· =  =     =                      
   6 Vajolet2 2.2.15   2978 2.5  5 6.00       =     =  ··    =  0        1             
   7 Fire 5            3082 2.5  5 6.00       =     =     ·· =           =     =       
   8 Andscacs 0.86189b 3004 2.5  5 6.00    0     =     =  =  ··             1          
   9 Nirvana 120616    3031 2.5  5 5.50       0     =  1        ··       =           = 
  10 Protector 1.9     3014 2.5  5 5.25 0  =                       ··       =     =  1 

  11 Chiron 3.01       3015 2.0  5 5.50 =  0     =                    ··    =     =    
  12 Rybka 4.1         3131 2.0  5 5.50       =  =     0  =     =        ··            
  13 Ginkgo 1.75       3028 2.0  5 5.25 =                    0     =  =     ·· =       
  14 Hannibal 100616   3002 2.0  5 5.00    =     0        =                 =  ·· =    
  15 Naum 4.6          3048 2.0  5 4.00 0                          =  =        =  ·· = 

  16 Raptor 2.3        2903 1.5  5 3.75 0     =                 =  0              =  ··

Komodo an der Spitze. direkt dahinter nur Houdini (was wohl die Nr. 5 zeigen wird?),
darüber hinaus nur Jonny (macht weiterhin neugierig) und Stockfish (immerhin 2 Siege weniger) mit positiver Bilanz.

Benno

By Benno Hartwig Date 2016-06-22 05:55 Edited 2016-06-22 06:33

Und nun

  Crosstable for TCEC Season 9 - Stage 2

   N Engine            Rtng Pts Gm    SB Ko Ho An Jo Fi St Gi Va Pr Ry Gu Ch Ni Ha Ra Na

   1 Komodo 10         3228 5.0  6 11.75 ··                =     1        =     1  1  1 

   2 Houdini 4         3181 4.0  6 11.00    ·· 1                 =  =  =  1     =       

   3 Andscacs 0.86189b 3004 3.5  6 10.00    0  ··    =  =  1  =                       1 
   4 Jonny 7.30        2963 3.5  6  9.75          ·· =  =     =     =        1     =    
   5 Fire 5            3082 3.5  6  9.50       =  =  ··             =  =     1  =       
   6 Stockfish 110616  3222 3.5  6  9.25       =  =     ··          =  =  =     1       

   7 Ginkgo 1.75       3028 3.0  6  8.75 =     0           ··    =     1  =     =       
   8 Vajolet2 2.2.15   2978 3.0  6  8.25       =  =           ··    1  =     0     =    
   9 Protector 1.9     3014 3.0  6  7.75 0  =              =     ··       =        1  = 

  10 Rybka 4.1         3131 2.5  6  8.50    =     =  =  =     0     ··       =          
  11 Gull 3            3123 2.5  6  8.25    =        =  =  0  =        ··    =          
  12 Chiron 3.01       3015 2.5  6  8.25 =  0           =  =     =        ··          = 
  13 Nirvana 120616    3031 2.5  6  6.50          0  0        1     =  =     ··    =    

  14 Hannibal 100616   3002 2.0  6  6.25 0  =        =  0  =                    ··    = 
  15 Raptor 2.3        2903 2.0  6  5.50 0        =           =  0           =     ·· = 
  16 Naum 4.6          3048 2.0  6  4.75 0     0                 =        =     =  =  ··

hat Komodo 3 "breaks" Vorsprung auf Stockfish und auch einen vollen Punkt auf den Tabellenzweiten.

Diverse Meldungen gab es ja, dass der aktuelle Stockfish auf eigenen Turnieren (teilweise deutlich) überlegen sei.
Und dies durchaus auch bei reichlich Ressourcen.
Bei TCEC scheint Komodo sowas nun einfach nicht bestätigen zu wollen.

Und Stockfish irgendwie auch nicht.

Benno

By Patrick Jansen Date 2016-06-22 09:34

Ich glaube ein Problem bei Stockfish und Fishtest könnte sein, die Engine ist auf kurze - viel zu kurze - Bedenkzeiten optimiert. Gleiches gilt eventuell auch für die Ressourcen, sprich auf wenige Threads optimiert.

By Benno Hartwig Date 2016-06-22 11:46

Mag sein, obwohl bei SF vor nicht langer Zeit mal gravierende Verbesserungen bei vielen Threads gemacht wurden.

Übersichtlich viele Threads und nicht so lange Zeiten mögen meist sogar eine sehr praxisnahe Anforderung sein.
Nach meinem Empfinden sind aber lange Zeiten und reichlich Ressourcen die Königsklasse.
Der Champion hier ist dann der Champion.
Ganz ähnlich, wie bei Menschen der Turnierzeiten-Weltmeister in meinen Augen der wichtigste Schach-Weltmeister ist.

Benno

By Jörg Oster Date 2016-06-22 12:12

Patrick Jansen schrieb:

Das ist halt wirklich eine Frage der Zeit und der Kosten. Leider!
Wer will sich schon seinen PC für Wochen, wenn nicht gar Monate, blockieren,
um eine Tuning-session mit langer BZ laufen zu lassen?
Und ohne eine Garantie auf Erfolg!

Siehe z. B. http://tests.stockfishchess.org/tests/view/5762651a0ebc5972faa16025 und http://tests.stockfishchess.org/tests/view/5762a1df0ebc5972faa16032
Und das, obwohl schon mit 30"+0.3" getunt ...

Manchmal benötige ich 3, 4 oder 5 Anläufe, bis ich einen erfolgversprechenden Testaufbau am Laufen habe!

Es ist leicht daher gesagt, jetzt nicht unbedingt auf dich gemünzt sondern auf so manch anderen,
das muss getunt werden. Und SMP muss getunt werden, usw.

Dazu kann ich eigentlich nur noch sagen: ja, dann mach doch mal!

By Benno Hartwig Date 2016-06-22 12:29

> ja, dann mach doch mal!

Ich finde, man darf auch mal eine Tatsache beschreiben, ohne dass man gleich gelobt, die Dinge zu verbessern.

By Jörg Oster Date 2016-06-22 13:54

Benno Hartwig schrieb:

Ich finde, man darf auch mal eine Tatsache beschreiben, ohne dass man gleich gelobt, die Dinge zu verbessern.

Das war auch mehr auf den einen (die wenigen) gemünzt, der (die) immer nur fordern,
und meinen, dass alles ganz einfach ist.

By Patrick Jansen Date 2016-06-22 14:09 Upvotes 1

Hatte mich auch nicht angesprochen gefühlt

Laut Liste hat Jörg bisher 712 Tests eingereicht. Mein Dank und Respekt dafür!

Ich bezeichne mich zwar als Heim- und Hobbycoder, aber wenn ich die Sourcen von Stockfish sehe steige ich aus, da komm ich nicht mit. Ich denk mir dann immer "Lass das mal die machen, die Ahnung davon haben und wissen was sie tun". Ich stelle dafür meine Hilfe in Form von Rechenleistung zur Verfügung - aktuell knapp 77500 CPU-Stunden und knapp 6 Millionen Spiele.

By Patrick Jansen Date 2016-06-22 12:37

Die Vermutung bzgl. Buch fand ich auch interessant: https://groups.google.com/d/msg/fishcooking/Mg-Cg3U-SKY/Otof-Pl2BAAJ

By Benno Hartwig Date 2016-06-23 11:20 Edited 2016-06-23 11:26

Nach jeweils 7 Partien:

   N Engine            Rtng Pts Gm    SB Ko Ho Jo An Fi St Va Gi Gu Ry Ni Ha Pr Ra Ch Na

   1 Komodo 10         3228 5.5  7 16.00 ··       =           =           1  1  1  =  1 

   2 Houdini 4         3181 4.5  7 14.75    ·· =  1              =  =     =  =     1    

   3 Jonny 7.30        2963 4.0  7 14.00    =  ··    =  =  =        =  1        =       
   4 Andscacs 0.86189b 3004 4.0  7 14.00 =  0     ·· =  =  =  1                       1 
   5 Fire 5            3082 4.0  7 13.50       =  =  ··    =     =  =  1  =             
   6 Stockfish 110616  3222 4.0  7 13.00       =  =     ··       =  =  =  1        =    

   7 Vajolet2 2.2.15   2978 3.5  7 12.25       =  =  =     ··    =  1  0        =       
   8 Ginkgo 1.75       3028 3.5  7 12.00 =        0           ·· 1  =     =  =     =    
   9 Gull 3            3123 3.5  7 11.50    =        =  =  =  0  ··    =              1 

  10 Rybka 4.1         3131 3.0  7 11.50    =  =     =  =  0  =     ·· =                
  11 Nirvana 120616    3031 3.0  7 10.25       0     0  =  1     =  =  ··       =       
  12 Hannibal 100616   3002 3.0  7 10.00 0  =        =  0     =           ·· 1        = 
  13 Protector 1.9     3014 3.0  7  9.25 0  =                 =           0  ·· 1  =  = 
  14 Raptor 2.3        2903 3.0  7  8.75 0     =           =           =     0  ·· 1  = 

  15 Chiron 3.01       3015 2.5  7  9.00 =  0           =     =              =  0  ·· = 

  16 Naum 4.6          3048 2.0  7  5.75 0        0              0        =  =  =  =  ··

Gull hat sich etwas nach vorn geschoben, meldet "Ansprüche" auf ein Weiterkommen an.
Und Stockfish hat immer noch nicht ausrufen können: "Schaut her, ich bin schon besonders stark!"

Die Remisquote jetzt 67,9%, das ist doch sehr OK

aber ich bin gespannt wie das wird in Stage 3 und Finale, wenn die Spielstärken dann "gleicher" sind.

Benno

By Michael Scheidl Date 2016-06-23 14:48 Upvotes 1

Zitat:

(...) aber ich bin gespannt wie das wird in Stage 3 und Finale

Das wird ein Alptraum, denn ein Octo-Turnier 150m+15s mit den acht stärksten wird eine Überfülle von Remispartien liefern und selbst die ausdauerndsten Kibitze überfordern. Zudem spielen immer und immer wieder dieselben gegeneinander, viele viele Wochen lang. Völlig falsche Entscheidung was das Turnierformat betrifft! Das öffentliche Interesse wird in den Keller fallen.

Umso mehr als die Finalpaarung ja schon feststeht, d.h. Stufe 3 ist nur eine nutzlose Zwischenphase.

By Benno Hartwig Date 2016-06-23 21:37

> Stufe 3 ist nur eine nutzlose Zwischenphase.

?
Stufe 3 ist vielleicht die bis dahin interessanteste Stufe!
Hier sehen wir konzentriert die "Guten".
Und sie spielen eine nette Anzahl von Partien.
Sie zeigt ob SF und K wirklich deutlich entrückt sind.
Und H5 möchte ich dann auch erleben.

Nur, ob es gut ist, auf eine Stufe 4 mit 4 Engines zu verzichten, ist fraglich.
Oder, ob man nicht lieber Stufe 2 schon mit 14 Teilnehmern
und Stufe 3 mit 6 Teilnehmern spielen sollte, könnte man fragen.

TCEC dauert eben lange. Und das soll es ja auch.
Wem das zu lang ist, der sollte vielleicht einfach woanders hin gucken.

Benno

By Jörg Oster Date 2016-06-23 23:09

Benno Hartwig schrieb:

Da freue ich mich auch drauf, vorausgesetzt, Houdini qualifiziert sich.
Wovon ich aber eigentlich ausgehe.
Und zwischen den Zeilen meine ich 'herausgehört' zu haben,
dass R. Houdart die Parallelisierung auf Lazy SMP umgestellt hat.
Das ist aber wirklich nur spekuliert. Man wird sehen ...

Benno Hartwig schrieb:

Nur, ob es gut ist, auf eine Stufe 4 mit 4 Engines zu verzichten, ist fraglich.
Oder, ob man nicht lieber Stufe 2 schon mit 14 Teilnehmern
und Stufe 3 mit 6 Teilnehmern spielen sollte, könnte man fragen.

TCEC dauert eben lange. Und das soll es ja auch.
Wem das zu lang ist, der sollte vielleicht einfach woanders hin gucken.

Zustimmung.

Außerdem kann ich so nebenher immer noch vieles erledigen,
ohne gleich allzuviel zu verpassen.

By Tom Paul Date 2016-06-23 23:38

Jörg Oster schrieb:

Benno Hartwig schrieb:

Zustimmung.

Außerdem kann ich so nebenher immer noch vieles erledigen,
ohne gleich allzuviel zu verpassen.

Ich habe da etwas von NUMA weiterhin + Lazy SMP gehört, somit besser als reines Lazy SMP.

By Michael Scheidl Date 2016-06-24 02:17 Upvotes 1

Zitat:

Wem das zu lang ist, der sollte vielleicht einfach woanders hin gucken.

Ja leider, was soll man machen? Notgedrungen spiele ich derzeit wieder selber auf Lichess. Dann kommen noch 100 Finalpartien mit 180m+15s, grusel. So dankenswert TCEC auch ist, gewisse Dinge kann ich nur als Seltsamkeiten einordnen.