ProDeo 1.87: 80 Testpartien

By Thomas Müller Date 2013-12-19 20:44

wenn man die "approx" addiert könnte/sollte ein plus von 40 rauskommen ?!?

Code:

Changes (technical)

    Added knowledge to King Safety (approx 4 elo)
    Added LMP (late move pruning) (approx 10 elo)
    Null windowing in aspiration search (approx 2 elo)
    Restored the [Right to Move = 100] parameter (approx 12 elo) This "tempo penalty" suddenly works a lot better now that we moved to full Nullmove search.
    Added a second condition to the tempo pernalty namely, subtract 10% from the mobilty score. Its reason is found on the logic that mobility often is a temporarily advantage that can be undone by a couple of moves and sometimes even by the next move (approx 10 elo).
     The 10% was an educated guess that worked quite well from the start but needs some serious tuning plus (perhaps) a maximum to the penalty. Furthermore what's on the menu for a next version is to include a similar correction for King Safety and Passed Pawns. Like Mobility they often produce big scores while sometimes much of it is undone by the next move.
     Some code speed-up (approx 1-2 elo)

By Michael Scheidl Date 2013-12-19 21:17

Ja eben, leider. Zwar beinhaltete mein Test ein relativ kleines P.D.-Eigenbuch gegen ein deutlich größeres allgemeines Buch, aber letzteres ist auf Variationsbreite und keineswegs auf Top-Performance ausgelegt; die max. Tiefe von 14 Zügen wird unter Arena selten erreicht. Also ich denke, da sollte das P.D.-Buch ok gewesen sein (trägt übrigens ein Filedatum von März 2013, wird also auch noch hin und wieder gepflegt).

Mir ist kein technischer Setup-Fehler bewußt. Pro Deo spielte (wie übrigens auch Crafty) als Winboardengine mit den Kommandozeilenparametern "w8 ProDeo.eng". Sollte gepaßt haben.

3m+1s ist auf fast 3 Ghz auch nicht mehr sonderlich kurz. Nach grober Durchsicht der Logs hat P.D. meist zwischen 11...13 HZ. tief gerechnet. Unauffällig. Es gibt natürlich den 32 Bit-Nachteil, aber dieser ist ja in den Vergleichsratings bereits enthalten.

By Guest Date 2013-12-20 12:00

Code:

Es fällt auf, daß die neue Version alle Einzelmatches, auch gegen die deutlich geringer bewertete Engine Rodin [2395] verloren hat.

komisch...

Code:

Ich fürchte, bei dieser Version ist irgendetwas schief gegangen.

mein bauchgefühl sagt das gleiche...

By Wolfgang Battig (CEGT) Date 2013-12-22 17:09

Guest schrieb:

Code:

Es fällt auf, daß die neue Version alle Einzelmatches, auch gegen die deutlich geringer bewertete Engine Rodin [2395] verloren hat.

komisch...

Code:

Ich fürchte, bei dieser Version ist irgendetwas schief gegangen.

mein bauchgefühl sagt das gleiche...

Nur damit dieser Quatsch nicht so stehenbleibt und ProDeo in falschem Licht erscheint:

CEGT 40/20
Pro Deo 1.8.7: 2530 - 301 games (starts with +10 to v. 1.8.5!)
Nix dolles wie schon länger bei ProDeo, aber von >100 Punkten Minus zu den Vorversionen kann keine Rede sein, trotz erst 300 Partien (Error Bar +-33)

Details hier: http://www.husvankempen.de/nunn/40_40%20Rating%20List/40_40%20BestVersion/673.html

By Guest Date 2013-12-22 17:16

Wo bitte schrieb ich etwas von: 100 Punkten Minus

By Wolfgang Battig (CEGT) Date 2013-12-22 19:51 Edited 2013-12-22 20:16

Guest schrieb:

Wo bitte schrieb ich etwas von: 100 Punkten Minus

Michael Scheidls Partien ergaben eine Performance von 2417 (Zitat: "Die Performance lag nur bei ca. 2417"), d.h. 123 Punkte hinter der 1.86 (das sind > 100).
Daraus schloss Michael: "Ich fürchte, bei dieser Version ist irgendetwas schief gegangen"

und darauf bist Du eingegangen (von wegen "Bauchgefühl" usw.). Ich ging davon aus, dass Du das Posting auf das Du dich beziehst auch komplett gelesen hast. Natürlich
hast weder Du noch Michael konkret von "> minus 100" gesprochen, das ergibt sich aus den Zahlen.

@Moderation: Bitte meine erste Antwort auf das zitierte Posting von "Guest" löschen, weil voreilig abgeschickt, danke

@Wolfgang: erledigt

By Frank Rahde Date 2013-12-22 20:15

Du hast 10 Minuten Zeit, ein Posting zu editieren.
Gruß, Frank

By Wolfgang Battig (CEGT) Date 2013-12-22 21:34

Frank Rahde schrieb:

Du hast 10 Minuten Zeit, ein Posting zu editieren.
Gruß, Frank

wenn es noch auf "unbestätigt" steht geht das m.W. nicht, oder?

By Frank Rahde Date 2013-12-22 22:04

Ach so. Wolfgang, kommste vielleicht als Stammposter zurück?

Wäre praktisch und schön.

By Michael Scheidl Date 2013-12-22 20:52

Aha, danke, dann bin ich beruhigt. Diese Unterperformance in meinem Kurztest mit immerhin 5*16=80 Partien hatte mich etwas irritiert.

By Thorsten Czub Date 2013-12-25 19:43

ich kann beim neuen prodeo keinen fortschritt zu vorherigen versionen feststellen:

36: ProDeo1.84 [buch] 131.0/441 000000=00 000000000 000000000 000=00000 000000000 000000000 00=000000 000=00000 =000000=0 0000=0000 000000000 0=0=00010 00000=000 0=001=00= 0000=0000 00=00000= 000000000 0000010=0 000000000 000=0000= 00=000=00 1000=000= 000001000 01000=001 =0==00=10 00=000000 ==0=0=00= 0=00=0110 =00000=00 0=00010== =00=0=0=0 00000100= =====0110 001011=00 001=0==00 ········· 001010=00 ==1000=10 1111=0111 =1001==0= 0=0101010 ===10=11= ==1111=11 =01111101 1=1=01=1= 111=11=11 111111=11 1=11==110 1=1111111 =11111=1= 17681.
37: ProDeo 1.85 130.5/441 0000000=1 000=00000 000000000 00000000= 00=000000 000000000 000000000 001000=00 000000000 000000000 000000000 ==0000000 000000000 00000000= 000000000 000000000 011000=00 000000=00 000=0000= 001000000 01====00= 000000000 1=00101=1 110000=01 01000=00= 01=000000 000=0==00 000==0000 0000=000= 000000001 0=00001== ==1001==1 101000=0= 100001100 001==0=0= 110101=11 ········· 10=0====1 =01010110 11=11001= 0=1011=10 1=111100= ==01=11=0 11==111=1 =11110111 1=01=1==1 111100011 1==01==== ==11=1=11 11=1=10=1 18253.
38: ProDeo183c 122.5/441 000000000 00000=0=0 000000000 000000000 000000000 000=00000 100000000 000000=00 000000000 000000=00 000000000 010=0000= 000000000 00000=000 =00000000 0000000=0 000000010 0000=0000 0000=0000 =00010000 00=000==0 =000=0=00 0=0=0=000 =00=00010 0=1000000 00=0000=0 001000=10 00000000= 0001011== 00=0====0 00000=010 =00000010 =000000== =00=0==0= 101100000 ==0111=01 01=1====0 ········· 10=0=0=00 10=01=00= 011=11101 0=1==1=1= 0110110=1 1=0=111=1 1=11=01=0 1==11=111 111101011 111111==0 11=11111= 111=11111 16116.
39: Discocheck_4.1_sse4.2 119.5/441 000000000 100000000 000000000 000000=00 00=00=000 000000000 0=0000000 0000000=0 =00=00000 000000000 000000000 0000000=0 000000000 000000000 00000000= 00000=000 000000000 000=00000 0000=0000 0000=0=00 100000000 000000000 0100=0000 =0=0==1=0 000000000 00000=010 00==0=000 100=00==0 00==0000= 1000=001= 0000000=0 01000=0=0 =000==1== =10=01=01 1100==0=1 0000=1000 =10101001 01=1=1=11 ········· 1===1=000 1===0=11= 1==1=1=01 =110=1==1 000110111 =1=111=01 ==1=11110 01=00=111 1=1111=11 =111=1111 =11110111 15463.
40: ProDeo1.87 116.0/441 000000000 0=0=00000 000000000 00000=000 =00000000 =00000000 000000000 000000000 00=000000 =000=000= =0000=000 00000000= 000000000 0000000=0 000=0000= 000000000 0=000===0 =0=000=00 0=00000== 000000=1= 0000=0000 000000=01 =0000=110 000=000== 0=0=000=1 00000000= 000000=00 1=0001000 0=0000=00 00==00000 110000000 000=0=10= 10011=0=0 00000=1=0 101000000 =0110==1= 00=00110= 01=10=11= 0===0=111 ········· 10==11=10 =0=1=1=== 11==10=10 110=10==1 =111111=0 011100111 ==11=010= 01001101= 101=101== ==10111=1 16539.
41: Now2t 110.5/441 000000000 000000000 000000000 0=0=00000 000010000 000000000 =00=000=0 000000000 000000000 000000000 0=0000000 000000000 000000000 0000000=0 000000000 00000000= 000000000 =0=000000 =0000=000 =000=0==0 00=0=00=0 0=1=00000 000000000 =0000==00 0000001== =000==0== 00=000000 0000=00=0 0===000=0 0=1=01000 00000011= 0000==101 =0000=001 10000001= 00=00001= 1=1010101 1=0100=01 100=00010 0===1=00= 01==00=01 ········· =01=====1 1=1011==1 ==1=111=1 00=011111 011110=== 11110=11= =0111==11 0=101=101 10==111=1 14718.
42: ProDeo 1.74 [offizielle Version] 97.5/441 000=0=000 000=000=0 000000000 000000000 00=000000 000=00000 000=00000 000000000 000==0000 000000000 000000000 000000000 000000000 000000=00 000000000 000000000 000000000 000000=00 0=00=000= 0=0=00001 0000000== 000000000 00000100= 0==001000 =00000000 =000=0000 ==0000000 =01=001=0 =00000001 =0000=000 0=010=000 101=0=000 000010000 =0000000= 0000=0000 ===01=00= 0=000011= 1=0==0=0= 0==0=0=10 =1=0=0=== =10=====0 ········· 00=1=0101 011011010 101==1=1= 011=11=1= 10111=111 11=00=101 111110111 001011=1= 12759.

11025 Partien gespielt / Turnier beendet
Name des Turniers: Arena Turnier
Ort/ Land: ORION9, Deutschland
Spielstufe: Turnier 40/3
Hardware: Intel(R) Core(TM) i3 CPU M 390 @ 2.67GHz mit 3.8 GB Speicher
Betriebssystem: Windows 7 Home Premium Home Edition Service Pack 1 (Build 7601) 64 bit
PGN-Datei: C:\schach\arena_3.0\Arena.pgn
Internetseite:
E-Mail Adresse:

die vollständige tabelle kann ich in diesem forum nicht posten da sie die maximale datenlänge überschreitet.

eigentlich dachte ich wir leben im 21. Jahrhundert. aber bei der css ist man wohl noch im 19. jahrhundert.
wahrscheinlich zünden die auch noch kerzen an zum advent.

By Guest Date 2013-12-25 20:59

wenns eine gescheite tabelle wäre!
ist der anwender im 19. Jhr. oder arena ?
Aber so ?!

By Guest Date 2013-12-25 21:04

habe gerade mal nachgeschaut...
Arena kann das sehr wohl anders darstellen, also sitzt das Problem mal wieder vor dem Rechner?!
Vermutlich hast du nicht mal Kerzen

By Thorsten Czub Date 2013-12-25 22:46

Dieses forum hat eine Begrenzung der Zeichen die man eingeben kann. Daher kann ich die Tabelle im ganzen leider nicht posten.
Das Turnier hat nämlich 50 Teilnehmer. Und jeder Teilnehmer spielt 441 Partien oder so. Habe deswegen nur die Ergebnisse der Rebell Programme gepostet.

Vielleicht sollten wir nen Link setzen auf den Server der NSA. Der erlaubt größere Datenmengen.

By Frank Rahde Date 2013-12-25 23:34

Bitte versuche es nochmal mit deiner Tabelle. Hab die erlaubte Zeichenmenge mal um 8000 erhöht.

Gruß, Frank

By Thorsten Czub Date 2013-12-25 23:37

Frank das wesentliche ist ja vermittelt. Der neue 187 ist wohl schwächer als die älteren Versionen. Ed hat das wegen seiner neuen testmethode wohl nicht gemerkt.

By Guest Date 2013-12-25 23:58

ok...dann geb ich den tipp...
Die Tabelle muss ja gar nicht so viele Zeichen haben!!
Stell es in den Optionen einfach anders ein!
Reiter "Tabelle" wenn ein Turnier gestartet wird

Auszug aus der Hilfe bei Arena 3:

Code:

Für die HTML Tabelle existieren einige Optionen: 

"Land einfügen": Dies zeigt das Land, aus dem der Teilnehmer kommt, in der Tabelle an. 
"Flaggen verwenden": Es werden die Flaggen statt der Ländernamen gezeigt. 
"Flaggen von Webseite": Lädt die Flaggendateien nicht vom lokalen Rechner, sondern von der Arena Webseite. Dies ist wichtig, wenn Sie Turniere im Internet veröffentlichen. 
"Englische Sprache verwenden": Zeigt Texte in der Tabelle nicht in deutsch, sondern in englisch. Sinnvoll, wenn man für ein internationales Publikum Ergebnisse veröffentlichen möchte. 
"Kurze Einzelergebnisse" zeigt nicht den Verlauf der Ergebnisse an, z. B.: 100=10, sondern 
2-3-1. Dies bedeutet, 2 Siege, 3 Verlustpartien und ein Remis. Platzsparend. 
"Nur Punkte" bedeutet, das das Format auf die Darstellung "Erzielte Punkte/Gesamtpunkte" hier also z.B. "2,5/6" geändert wird. 
"Zeige PGN Dateiname": Schreibt den Namen der Ausgabe Datei mit den Partien des Turniers in die HTML-Datei. 
"PGN-URL": Hier können Sie die Internet Adresse der PGN Datei angeben, wenn Sie z.B. das Turnier und die PGN Datei veröffentlichen möchten. 
"Autor einfügen": Fügt Ihren Namen in die HTML-Datei ein. Der Name wird aus den Benutzerdaten entnommen. 
"Benchmark zeigen": Zeigt den Benchmark - Wert des Geschwindigkeitstests an. 
"Webseite des Autors eingeben": Fügt Ihre Webseite in die HTML-Datei ein. Der Name wird aus den Benutzerdaten gelesen

By Kurt Utzinger Date 2013-12-27 18:42

Guest schrieb:

habe gerade mal nachgeschaut...
Arena kann das sehr wohl anders darstellen, also sitzt das Problem mal wieder vor dem Rechner?!
Vermutlich hast du nicht mal Kerzen

J, ja, der Thorsten hat schon lange die Gabe, unleserliche Tabellen zu posten, dabei
ginge es doch auch anders ... und damit übersichtlicher, denn wen interessiert es
schon, ob Engine X gegen Y so 50 mal eine Null gemacht hat.
Mfg
Kurt

By Thorsten Czub Date 2013-12-28 00:49

die einzelergebnisse sind schon interessant. vielleicht nicht gerade bei prodeo, aber bei den anderen engines kann man so sehr gut angstgegner sehen.

By Chess Player Date 2013-12-28 19:42

Ich fasse das mal kurz zusammen, damit es leserlich wird.

Zitat:

Code:

ich kann beim neuen prodeo keinen fortschritt zu vorherigen versionen feststellen:

36: ProDeo1.84 [buch]                131.0/441 
37: ProDeo 1.85                      130.5/441 
38: ProDeo183c                       122.5/441 
39: Discocheck_4.1_sse4.2            119.5/441 
40: ProDeo1.87                       116.0/441 
41: Now2t                            110.5/441 
42: ProDeo 1.74 [offizielle Version] 97.5/441

Und letztendlich sind wir wieder beim Thema: Was sollte ich von der Platte putzen...und was behalten...

By Thorsten Czub Date 2013-12-28 20:30

Chess Player schrieb:

Ich fasse das mal kurz zusammen, damit es leserlich wird.

Zitat:

Code:

ich kann beim neuen prodeo keinen fortschritt zu vorherigen versionen feststellen:

<code>36: ProDeo1.84 [buch] 131.0/441
37: ProDeo 1.85 130.5/441
38: ProDeo183c 122.5/441
39: Discocheck_4.1_sse4.2 119.5/441
40: ProDeo1.87 116.0/441
41: Now2t 110.5/441
42: ProDeo 1.74 [offizielle Version] 97.5/441 </code>

Und letztendlich sind wir wieder beim Thema: Was sollte ich von der Platte putzen...und was behalten...

ich denke es ist nun an Ed seine testmethode noch einmal zu verifizieren.
ich mag dieses x gegen x+1 sowieso nicht. man misst dabei nicht ob was stärker wird sondern nur
ob eine engine ANDERS spielt als x.
wenn man dann nicht mit zeitkontrolle spielt sondern, wie ich ed verstanden habe, mit festgesetzten knoten, fällt das vielleicht unter den tisch.