Komodo 11.2 erschienen

By Benno Hartwig Date 2017-07-18 18:42

CEGT hat sich auf den Weg gemacht
http://cegt.forumieren.com/t846-testing-komodo-11-2-x64
Geschätzte 24 plus-Elo lassen natürlich aufhorchen. Mal schauen.

Noch stehen dort aber keine Resultate.
Benno

By Wolfgang Battig Date 2017-07-18 23:26

Benno Hartwig schrieb:

...
Noch stehen dort aber keine Resultate.
...

Wie denn auch, die Engine ist gerade mal einen Tag da. Und dass die "Coordination" da steht, heißt ja nicht, dass wir alles stehen und liegen lassen...

Wie auch immer, aktuell sind knapp 200 (von 800) Partien in vier Matches absolviert (Houdini kommt später) und die 11.2 liegt bei 70,6%. Die 11.01 lag gegen diese Gegner bei 65,5% (nach 4 x 200 Partien).

Das würde ein Plus von ca. 35 Punkten bedeuten, wenn <200 Partien denn irgendeine Bedeutung hätten...

By Tom Paul Date 2017-07-19 14:30 Edited 2017-07-19 14:32

Wolfgang Battig schrieb:

Benno Hartwig schrieb:

...
Noch stehen dort aber keine Resultate.
...

Wie denn auch, die Engine ist gerade mal einen Tag da. Und dass die "Coordination" da steht, heißt ja nicht, dass wir alles stehen und liegen lassen...

Das sind ja mindestens +50 ELO wie durch ein Wunder

.
Kann das mal jemand übersetzen:

Change log

Komodo 11.2 (July 17, 2017)
Removed one extension
Retuned search terms
Revised LMR
Revised Pruning
Revised Null Move
Revised Time Management
Revised Contempt
Changed Candidate Passed Pawns
Changed King Safety
Several speedups
Several Bugfixes
Made MP more NUMA-friendly
Revised Windowing
Revised Lazy Evaluation
Revised check and singular extensions
Revised Eval Scaling
Raised Knight value (to narrow bishop - knight gap)

Was tut man nicht alles um seine Engine zu verkaufen:
#1 Rated Chess engine CEGT, IPON, CCRL!

2017 World Computer Chess Champion

2017 World Computer Rapid Chess Champion

2017 World Computer Blitz

By Robert Schlüter Date 2017-07-20 17:38

Ist das ein Verkaufsarument Gag, nach 200 Partien wird schon prognosen abgegeben von 50 Elo plus !!!

Am ende werden erst die Toten gezählt.

Warte auf Komodo 12 dann heist es wahrscheinlich. nach einer Partie wenn Komodo gewinnt Die Sensation Performance konnte um 100% gesteigert werden:

Mfg
R.Schlüter

By Wolfgang Battig Date 2017-07-20 18:46 Upvotes 5

Robert Schlüter schrieb:

Mfg
R.Schlüter

Wenn Du mein Posting meinst kann ich nur sagen: Lies richtig (und vor allem ALLES!) bevor du so einen Quatsch schreibst. Und schreib nicht von Tom Paul ab. Von wegen +50 und so. Wie kommt ihr nur auf sowas?

Ich schrieb: "Das würde ein Plus von ca. 35 Punkten bedeuten, wenn <200 Partien denn irgendeine Bedeutung hätten... "
Also nix Prognose! Bestenfalls Angabe einer Tendenz mit (fast) maximaler Unsicherheit...

Abgesehen davon habe(n) ich/wir mit dem Komodo-Team nichts zu tun, müssen also kein Marketing machen. Verkaufsargument? Ich lach mich scheckig.

By Wolfgang Battig Date 2017-07-20 18:33

Tom Paul schrieb:

....
Das sind ja mindestens +50 ELO wie durch ein Wunder

Wie kommst Du auf +50? Tom-Paul-Rechnung?

By Benno Hartwig Date 2017-08-04 06:23 Edited 2017-08-04 06:26

CEGT 4/40 bescheinigt Komodo also einen guten Fortschritt, aber etwas weniger als erhofft:

Komodo 11.2 x64 1CPU  = ca. ELO 3331 out of 1600 games (+ 19)
Komodo 11.01 x64 1CPU =     ELO 3312 out of 2500 games

Vor Houdini und auch ganz knapp vor Stockfish 8
Aber ein gutes Stück hinter einer aktuelleren SF-Dev-Version.

1 Stockfish 20170522 x64 1CPU 3353 13 13 2000 74.5% 3146 43.7% 
2 Komodo 11.2 x64 1CPU        3338 19 19 1000 67.0% 3201 49.1% 
3 Stockfish 8.0 x64 1CPU      3334  9  9 4700 72.1% 3147 45.3% 
4 Houdini 5.0 x64 1CPU        3320  9  9 4600 67.3% 3176 50.4%

Benno

By Wolfgang Battig Date 2017-08-04 12:42

Die "zeitgleiche" Stockfish-Dev. vom 23.7. zeigt keine Verbesserung zu der aus Mai
http://cegt.forumieren.com/t652-testing-stockfish-x-development-versions#1872

By Benno Hartwig Date 2017-07-21 19:57

Ein erstes Rating fand ich hier bei FastGM
http://fastgm.de/60-0.60.html
Komodo 11.2 knapp vor Stockfish 8
und stattliche 34 Elo vor Komodo 11.01!

Benno

By Stefan Pohl Date 2017-07-22 13:34

Benno Hartwig schrieb:

Ein erstes Rating fand ich hier bei FastGM
<a class='urs' href='http://fastgm.de/60-0.60.html'>http://fastgm.de/60-0.60.html</a>
Komodo 11.2 knapp vor Stockfish 8
und stattliche 34 Elo vor Komodo 11.01!

Benno

War etwa so zu erwarten. Das Komodoteam bezieht sich bei seinen Schätzungen bzgl. Elozuwachs auf mittellange Bedenkzeiten (so in der Gegend von IPON). Insofern sollte im Bullet schon etwas mehr Eloplus herumkommen, als vom Komodoteam geschätzt.(+24 Elo). Und bei langen Bedenkzeiten umgekehrt logischerweise weniger. Sobald Andreas auch seine beiden anderen Ranglisten mit Komodo 11.2 bestückt hat, wissen wir mehr.

By Guenter Stertenbrink Date 2017-07-22 16:08

wuerde die Elo-Differenz von einer Komodo-Version zur naechsten bei niedrigerer Bedenkzeit
hoeher ausfallen, wieso hat Komodo dann bei hoeherer Bedenkzeit eine bessere Elo ?

By Benno Hartwig Date 2017-07-22 17:07

Stefan hat schon recht: Die Tendenz ist generell schon sehr deutlich, dass zwei Engines bei kürzeren Zeiten eine größere Elo-Differenz erspielen als bei längeren Zeiten.
Das ist auch bei Komodo-Versionen zu erwarten.

Allerdings war ich nicht so optimistisch und dachte, wir sollten sehr zufrieden sein, wenn sich diese 24 Elo bei sehr kurzen Zeiten wenigstens zeigen.

Benno

By Stefan Pohl Date 2017-07-23 12:45

Tja, das FGRL Ergebnis für die mittlere Bedenkzeit ist da (10'+6“, kein Pondern, also in etwa IPON-Tempo). Das ist allerdings ernüchternd. Nur +5 Elo zu Komodo 11.01. Selbst der 300 Partien Head-to-head gegen Houdini 5 konnte von Komodo 11.2 nicht gewonnen werden.

http://www.fastgm.de/10min.html

By Benno Hartwig Date 2017-07-23 18:22

Immerhin hat sich Komodo dort an die Tabellenspitze gesetzt.
Und das hat ja auch Charme.

Benno

By Stefan Pohl Date 2017-07-24 10:50 Upvotes 1

Benno Hartwig schrieb:

Immerhin hat sich Komodo dort an die Tabellenspitze gesetzt.
Und das hat ja auch Charme.

Benno

Schon. Nur ist Andreas bei seinen beiden Listen mit den längeren Bedenkzeiten bzgl. Komodo/Stockfish leider inkonsequent. Er testet zwar jede Menge Zwischenversionen von Komodo (10.1, 10.2, 10.3, 10.4 usw.), aber keine von Stockfish. Daher ist hier ein Vergleich bzgl. der Nummer eins nicht wirklich fair. Ein aktueller Stockfish wäre sicher besser als Komodo 11.2. Stockfish 8 kam noch in 2016...
Fair wäre es, wenn jedesmal, wenn ein neuer Komodo getestet wird, Andreas dann auch die gleich alte Stockfish-DEV testen würde (es ist ja klar, daß niemand ALLE Stockfish-DEVs testen kann). Oder, man würde sich auch beim Komodo-testen auf die vollen Versionsnummern (9,10,11,usw.) beschränken.

By Guenter Stertenbrink Date 2017-07-24 12:25 Edited 2017-07-24 13:23 Upvotes 1

hier werden alle SF-versionen getestet:

https://nextchessmove.com/dev-builds

allerdings nur in Partien gegen SF7

SF8:+72.5 Elo [fastgm:3479-3388=91,3231-3155=76,3150-3087=63 , hmm-mehr bei niedrigerer Bedenkzeit)
SF-2017-07-24 : +135.1 Elo

------------------------------------
diff. 1m,10m,60m
Komodo 11-10 : 61,38,45
Stockfish 8-7 : 91,76,63
Andscacs 91-86 : 105,74,91

1min : 90
60min : 60
3600 min : 40
150d : 27

dem Remistod entgegen

By Stefan Pohl Date 2017-07-24 14:00

Guenter Stertenbrink schrieb:

hier werden alle SF-versionen getestet:

<a class='ura' href='https://nextchessmove.com/dev-builds'>https://nextchessmove.com/dev-builds</a>

allerdings nur in Partien gegen SF7

SF8:+72.5 Elo [fastgm:3479-3388=91,3231-3155=76,3150-3087=63 , hmm-mehr bei niedrigerer Bedenkzeit)
SF-2017-07-24 : +135.1 Elo

------------------------------------
diff. 1m,10m,60m
Komodo 11-10 : 61,38,45
Stockfish 8-7 : 91,76,63
Andscacs 91-86 : 105,74,91

1min : 90
60min : 60
3600 min : 40
150d : 27

dem Remistod entgegen

Sehr cool, die Seite kannte ich noch gar nicht, danke!

Ultra-Bullet Speed. 30''+300ms (geeicht an 1600 kn/s). Das ist wirklich sehr, sehr schnell. Aber dafür viele Partien und sehr viele Testruns.
Da bin ich ja froh, daß ich für meine Stockfish-Tests in Zukunft (wenn das neue Eröffnungsvorgabeset mal steht und ich die gamebase neu ausgespielt habe...) doch deutlich längere Bedenkzeiten haben werde (3'+1''), denn sonst könnte ich meine Stockfishtests ja auch einstellen. Aber so sollte meine Bedenkzeit in etwa die fünffache Bedenkzeit sein, von dem, was hier genutzt wird. Und ich spiele ja nur gegen nicht-Stockfishe, also eben kein selfplay. Ich hoffe, so bleibt meine Testerei doch noch interessant und relevant. Trotz dieser tollen Testarbeit auf dieser Website.

Stefan (SPCC)

By Guenter Stertenbrink Date 2017-07-24 14:38

ja, zeitnahe Tests in ausreichender Zahl gegen ander Engines sind auch nuetzlich.

War da doch noch irgendwas - bislang unerklaert - zwischen Dez.. und Maerz ,
wo die Stockfish Versionen im selfplay zulegten, nicht aber in Partien gegen
andere Engines oder in Testpositionen.

By Stefan Pohl Date 2017-07-24 14:09 Edited 2017-07-24 14:11

Guenter Stertenbrink schrieb:

dem Remistod entgegen

Gerade sehr prägnant von Larry Kaufman auf talkchess auf den Punkt gebracht:

"...the general rule that rating gains contract with greater TC due to more draws."

So isses. Wobei natürlich die schneller werdende Hardware äquivalent zu "greater TimeControl" ist. Logischerweise. Bullet auf einem Monsterrechner ist halt gleich Blitz auf dem Normal-Rechner. Und gleich Turnierzeit auf dem Uralt-Rechner. Und gleich Fernschach auf dem Brettcomputer...

By Benno Hartwig Date 2017-07-25 07:37

> Bullet auf einem Monsterrechner ist halt gleich Blitz auf dem Normal-Rechner. Und gleich Turnierzeit auf dem Uralt-Rechner. Und gleich Fernschach auf dem Brettcomputer...

Schön gesagt!
Oder auch: Die Großrechner von gestern sind die Telefone von heute.
(Gestern! Nicht vorgestern!)

By Thorsten Czub Date 2017-07-24 16:52

Wie genau heißt denn der stärkste stockfish ?

By Clemens Keck Date 2017-07-24 17:17

also ich habe die letzte Komodo beta vor der 11.2 gründlich getestet mit 10 cpu und 30min+10sec.
24 Elo Rückstand zur Stockfish beta vom 18. Juni 2017 sind rausgekommen.
Ganz deutlich merkt man die Steigerung von Komodo auch bei den engine Turnieren auf infinitychess

Seit 11.2 , jetzt auch mit der 11.2.1 ist ganz oft Komodo auf dem Siegerpodest mit dabei.

C.K.

By Peter Unger Date 2017-07-28 14:15

und jetzt als 11.2.2.

http://www.talkchess.com/forum/viewtopic.php?t=64745