Hallo Frank,
[quote="Frank Quisinsky"]
Das Junior im Engine-Engine Vergleich gegen die TOPs abfällt ist eigentlich klar, die Partien gehen im Endspiel, meist im frühen Endspiel verloren. Möchte die Partien sehen wo Junior im frühen Mittelspiel verliert.
[/quote]
das habe ich auch mal gedacht. Bin leider im Laufe meines vorgenannten DJ13-Tests eines besseren belehrt worden. Du wirst in den downloadbaren PGNs etliche Partien finden, in denen Junior bereits im Mittelspiel überspielt wurde. Meiner Ansicht nach ist Junior taktisch einfach zu schwach, um an der Spitze mithalten zu können - und das zeigt sich eben auch unter den vermeintlich "Junior-freundlichen" Bedingungen meines Tests. Ich würde sogar soweit gehen zu sagen, dass bei mindestens bei der Hälfte aller Junior-Verluste in diesen Matches der Grundstein zur Niederlage bereits im Mittelspiel gelegt wurde.
Junior ist für mich nachwievor eine faszinierende Engine und ich bereue den Kauf nicht (auch wenn er mit 60 Euro nicht gerade günstig war im Vergleich zu anderen, wo es mehr Leistung fürs Geld gibt). Trotzdem muss ich nach diesem Test das Fazit ziehen, dass der derzeitige Weltmeister in der Oberklasse der Engine nicht mitzumischen vermag. In der Klasse der Engines um 2800 Elo (nach IPON-Liste) spielt er meistens auf Augenhöhe mit, aber damit hat er dann seinen Zenit erreicht.
Hier die Ergebnisse:
vs. Houdini (Zwischenstand): 13,5-42,5 (24,1%)
vs. Critter (Endstand): 20,5-39,5 (34,2%)
vs. Stockfish (Endstand): 22-38 (36,7%)
vs. Rybka (Endstand): 18-42 (30%)
vs. Naum (Endstand): 28-32 (46,7%)
vs. Chiron (Endstand): 28-32 (46,7%)
vs. Komodo (Endstand): 18-42 (30%)
vs. Fritz (Endstand): 29,5-30,5 (49,2%)
Gegen Rybka gelang Junior in allen 60 Partien nicht ein einziger Sieg!
Nochmal der Vergleich zur IPON:
Houdini 2.0 STD : 150 (+ 14,= 34,-102), 20.7 %
Critter 1.4a : 150 (+ 12,= 45,- 93), 23.0 %
Stockfish 2.2.2 JA : 150 (+ 15,= 43,- 92), 24.3 %
Deep Rybka 4.1 : 150 (+ 10,= 47,- 93), 22.3 %
Naum 4.2 : 150 (+ 22,= 59,- 69), 34.3 %
Chiron 1.1a : 150 (+ 32,= 54,- 64), 39.3 %
Komodo 4 : 150 (+ 8,= 37,-105), 17.7 %
Fritz 13 32b : 150 (+ 35,= 50,- 65), 40.0 %
Außer gegen Houdini fallen Juniors Ergebnisse also im Schnitt ca. 10% besser aus. Doch diese Verbesserung würde ich eher der längeren Bedenkzeit zuschreiben, die allgemein für eine höhere Remisquote sorgt. Warum diese Verbesserung bei Houdini so stark abweicht, kann man nicht genau sagen. Möglicherweise statistischer Ausreißer (würde sich mit mehr Partien wieder begradigen) oder aber Houdini skaliert auf MP und mit langen BZ sogar besser als alle anderen. Naja, aus so wenigen Partien sollte man keine voreiligen Schlüsse ziehen.
Viele Grüße
Timo
Hallo Timo,
dass wären neue Anhaltspunkte für mich denn mir liegen nur begrenzt Partien mit so langen Zeitkontrollen vor. Bei den ca. 8.000 40-Minuten Partien die Junior Versionen in der SWCR gespielt haben konnte ich nicht beobachten, dass die Engine im Mittelspiel überdurchschnittlich durch taktische Probleme auffällt. Die Ergebnisse müssen ja auch immer ins Verhältnis zur Spielstärke gesetzt werden.
Was ich beobachten konnte ist, dass Junior sehr eigen mit den Eröffnungszügen umgeht. Lasse Junior mal ohne Buch spielen und vergleiche die gefundenen Züge mit Kommentaren zu der Eröffnungstheorie. Hierbei fällt auf, dass Junior überproportional von der Theorie bedingt abweicht, Varianten selbst errechnet die eher als kristisch kommentriert sind. Und genau das zieht sich durch die gesamte frühe Partiephase, spielt hier also wirklich anders als andere Engines, oftmals sehr riskant. Insofern könnte es durchaus passen was Du beschreibst bzw. wäre auch wieder logisch. Kritische Züge bedingen oftmals, gerade im Computerschach, taktische Lücken.
Werde mir Deine Partien anschauen und mal ein wenig analysieren, muss mal suchen ob Du diese zum Download anbietest. Konnte Dein Event nur bedingt verfolgen, da ich selbst im Moment ziemlich viel um die Ohren habe. Finde es Klasse, dass Du aber der Junior-Storry aufschlüsselst. Es ist immer interessant etwas festzustellen, gerade wenn es sich um Engines handelt die anders spielen als die anderen.
Viele Grüße
Frank
Hallo Frank,
Junior ist wirklich außergewöhnlich und findet Züge, die keine andere Engine vorschlägt. Manchmal sind darunter einige Perlen, die tatsächlich zu einem schönen Gewinn führen. Aber gegen die Top-Engines geht diese riskante Spielweise eben auch öfter nach hinten los - Junior wird in der Folge dann taktisch einfach überfahren. Gegen schwächere Gegner klappt es eben häufiger, da diese nicht so oft in der Lage sind, Junior den vermeintlichen Fehler taktisch nachzuweisen.
Viele Grüße
Timo
Ergänzung:
Inzwischen ist auch das Match gegen Houdini zu einem Ende gekommen. Junior gelang es, insgesamt 15 Punkte und damit 25% zu holen.
By Frank Brenner
Date 2012-03-04 14:02
Hi Timo,
ein sehr aufschlussreiches Match.
Hast du lust weiter zu machen? Junior durch Shredder oder Fritz ersetzen
Was mir gerade einfällt. Am interesantesten könnte vielleicht nochmal das gleiche Match sein mit Blitzzeiten so wie bei Ingo, also die gleichen Eröffnungen.
Ja ich weiß, ingo hat das schon gemacht, aber so können wir gucken wie stark die Abhängigkeit von der Eröffnungsposition ist, und ein 5+3 Match dürfte ja in 1-2 Tagen durch sein.
Gruß
Frank
Hallo Frank,
eigentlich bin ich kein Freund von schnellen Bedenkzeiten und deshalb auch wenig motiviert, so einen Test zu machen. Andererseits wären die Resultat vielleicht doch von einigem Nutzen.
Möglich wären zwei Tests:
a) jetzige Bedenkzeit / 5, somit 25min/50Z+20min/40Z+(3min+3s)
b) Bedenkzeit aus a) / 5, somit 5min/50Z+4min/40Z+1min (bei allen Zeitkontrollen ein Aufschlag von 2s pro Zug)
Der Zeitaufschlag ist zwar nicht korrekt durch 5 dividiert worden, aber m.A.n. nötig, damit es nicht zu "blitzartig" wird.
Wäre sicherlich ganz interessant, denn Zeitkontrolle b) kommt der IPON am nächsten, a) ist das ca. 5-fache davon und das bereits abgeschlossene Match wäre nochmal das 5-fache (bzw. das 25-fache zu b).
Muss mal in mich gehen, ob ich dazu zu einem späteren Zeitpunkt Lust habe. Momentan habe ich erst einmal eine andere Matchserie gestartet:
http://forum.computerschach.de/cgi-bin/mwf/topic_show.pl?tid=4467Viele Grüße
Timo
Dank Michael Scheidls unermüdlichem Einsatz haben wir nun alle Partien zusammengefasst in eine Datei (als PGN und CBV):
http://www.team-oh.de/Computerschach/files/DJ13Test_TH2012.zipVielen Dank Michael für diesen Super-Service!
Anmerkung: Die ersten 3 Partien gegen Stockfish fehlen, offenbar hat die GUI die nicht korrekt hochgeladen. Das könnte passiert sein, als ich wg. eines Absturzes das Match gegen Stockfish wieder in Gang bringen musste.
Viele Grüße
Timo