Interesse an LOS in der IPON?

By Ingo Bauer Date 2011-01-13 22:28 Edited 2011-01-13 22:34

Hallo

Besteht Interesse an LOS (Likelihood of superiority, Wahrscheinlichkeit der Überlegenheit). Das heißt ein Prozentzahl, wie wahrscheinlich es ist, das eine Engine besser ist als eine andere.

Bsp:

                         Ho De Ho St Ry St Cr
Houdini 1.5                 99 99100100100100
Deep Rybka 4              0    67 99 99 99 99
Houdini 1.03a             0 32    99 99 99 99
Stockfish 2.01 JA         0  0  0    98 98 99
Rybka 3 mp                0  0  0  1    61 87
Stockfish 1.9.1 JA        0  0  0  1 38    79
Critter 0.90 SSE42        0  0  0  0 12 20

Mit 99% Wahrscheinlichkeit ist Houdini 1.5 besser als Deep Rybka 4, mit 67% ist Deep Rybka 4 besser als H1.03a, mit 99% ist H1.03a besser als Stockfish 2.0.1, mit 98% ist St2.0.1 besser als R3, mit 61% ist R3 besser als Stockfish 1.9.1, mit 79% ist Stock1.9.1 besser als Critter 0.9 ... oder auch R3 ist mit 87% Wahrscheinlichkeit besser als Critter 0.90 ... die Datei als Ganzes ist natürlich viel größer und unübersichtlicher.

Ich denke mir, das sagt manchem vielleicht mehr als Errorbars oder gar Ratings!? Wenn Interesse besteht kann ich die mitliefern ...
(die volle LOS Datei liegt zur Ansicht als Bsp mit im individual.7z Download auf meiner Seite)

Gruß
Ingo

By Ingo Bauer Date 2011-01-13 22:58

Nochmal Hallo,

In der IPON könnte das dann so aussehen:

     Name                      Elo    +    -   games scor oppo.  draws LOS
 
   1 Houdini 1.5              3006   14   14  2500   82%  2746   23%   99% 
   2 Deep Rybka 4             2952   11   11  3600   77%  2745   30%   99%
   3 Stockfish 2.01 JA        2918   14   13  2200   74%  2742   33%   99%
   4 Critter 0.90 SSE42       2892   12   12  2700   69%  2757   36%   99%
   5 Komodo64 1.3 JA          2827   12   12  2300   61%  2752   36%   78%
   6 Naum 4.2                 2821    9    9  4700   61%  2742   39%   99%
   7 Deep Shredder 12         2800    8    8  5900   59%  2738   37%   97%
   8 Gull 1.1                 2788   11   11  2800   54%  2763   37%   90%
   9 Deep Fritz 12 32b        2779    9    9  4900   56%  2741   38%   66%
  10 Deep Sjeng c't 2010 32b  2776   11   11  2900   52%  2763   37%   99%
  11 spark-1.0 SSE42          2752   12   12  2600   48%  2764   40%   50%
     HIARCS 13.2 MP 32b       2752   12   12  2400   49%  2758   39%   99%
  13 Zappa Mexico II          2713    7    7  7300   48%  2725   38%   99%
  14 Protector 1.3.2 JA       2700    8    8  5300   45%  2739   38%   99%
  15 Deep Onno 1-2-70         2684   10   10  3900   41%  2751   38%   60%
  16 Hannibal 1.0a            2682   10   11  3300   40%  2752   34%   71%
  17 Deep Junior 12           2679   11   11  3000   38%  2764   30%   90%
  18 Toga II 1.4 beta5c BB    2670    7    8  7000   42%  2728   39%   99%
  19 Umko 1.1 SSE42           2631   12   12  2800   31%  2768   34%   97%
  20 Jonny 4.00 32b           2615   11   11  3100   30%  2762   30%   57%
  21 Loop 13.6/2007           2614    8    8  5800   34%  2732   35%   96%
  22 Crafty 23.3 JA           2601   11   11  3100   28%  2763   30%   99%
  23 Spike 1.2 Turin 32b      2582    7    8  7500   31%  2724   33%

Interessant: Jonny/Loop, Deep Fritz/Deep Sjeng!

Ich denke ich mache das für die Top Engine pro Autor Liste ...

Gruß
Ingo

By Frank Quisinsky Date 2011-01-15 13:03

Hi Ingo,

weiß nicht, so viele Infos gibt uns die Statistik nicht, dennoch eine gute Idee.

Benno hat doch mal eine Wahrscheinlichkeitsberechnung erstellt.
Das war interessant und könnte vielleicht irgendwie mit Ratinglisten verknüpft werden.

Müsste mal seinen Beitrag heraussuchen.

Viele Grüße
Frank