komodo Cash Cow 10.4 Tests

Testing Stockfish 8 x64
Thanks to Critter    

1. # PLAYER                 :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)     W    D    L  D(%)  OppAvg
     1 Stockfish 8 x64        :    3297     12  2594.5    3300  78.6      95  2238  713  349  21.6    3055
     2 Komodo 10.2 x64        :    3265     38   100.0     220  45.5      64    37  126   57  57.3    3297
     3 Houdini 5              :    3255     36    97.0     220  44.1     100    27  140   53  63.6    3297
     4 Shredder 13            :    3117     42    58.0     220  26.4      63    28   60  132  27.3    3297
     5 Equinox 3.30 x64       :    3107     42    55.5     220  25.2      88    32   47  141  21.4    3297
     6 Andscacs 0.872 x64     :    3069     46    47.0     220  21.4      62    32   30  158  13.6    3297
     7 Ginkgo 1.8 x64         :    3059     45    45.0     220  20.5      64    24   42  154  19.1    3297
     8 Gull 3 x64             :    3046     47    42.5     220  19.3      61    24   37  159  16.8    3297
     9 Hannibal 1.7 x64       :    3036     48    40.5     220  18.4      78    24   33  163  15.0    3297
    10 Jonny 8.00 x64         :    3008     49    35.5     220  16.1      53    19   33  168  15.0    3297
    11 Fizbo 1.8 x64          :    3005     50    35.0     220  15.9      63    15   40  165  18.2    3297
    12 Critter 1.6a x64       :    2993     52    33.0     220  15.0      57    22   22  176  10.0    3297
    13 Booot 6.1              :    2987     50    32.0     220  14.5      53    18   28  174  12.7    3297
    14 Fritz 15               :    2983     50    31.5     220  14.3      73    13   37  170  16.8    3297
    15 Chiron 3.01 x64        :    2960     51    28.0     220  12.7      72    20   16  184   7.3    3297
    16 Protector 1.9.0 x64    :    2937     54    25.0     220  11.4     ---    14   22  184  10.0    3297
   

White advantage = -0.17 +/- 6.41
Draw rate (equal opponents) = 30.68 % +/- 1.02

[You must be registered and logged in to see this link.]

Komodo 10.4 64-bit

2017.03.15

Houdini 4 Pro x64

Old-Desktop Computer

1/2-1/2

[You must be registered and logged in to see this link.]

by yanub 1
3 min 2 core perfect 2017 test book syzgyz end game torbu 4 i7 3820 4ghz play 360 games

150 games fnish
[You must be registered and logged in to see this link.]

Match against latest Stockfish ultimaiq compile of 6march
AMD x6 1090T, TC 3m2s, 4cores, ponder off, privat book 25 lines
+57 -20 =123 for Stockfish
so 40,75% for Komodo 10.4
against Houdini 5 it was 48% (150 games, see other thread)

Will continu testing with TC 15m10s

Code:
Komodo10.4 - SF060317uc 4x Blitz 3m+2s                              
1   Stockfish 060317 64 POPCNT  +57/=123/-20 59.25%  118.5/200
2   Komodo 10.4 64-bit          +20/=123/-57 40.75%   81.5/200    

Komodo 10.4 SF060317uc
[You must be registered and logged in to see this link.]

---

[You must be registered and logged in to see this link.]


Program                          Elo    +   -   Games   Score   Av.Op.  Draws

  1 Stockfish 180317 64            :   50   70  69    42    57.1 %      0   57.1 %
  2 Komodo 10.4 64-bit             :    0   69  70    42    42.9 %     50   57.1 %

  1 Stockfish 180317 64            :   50   42 (+ 12,= 24,-  6), 57.1 %
  2 Komodo 10.4 64-bit             :    0   42 (+  6,= 24,- 12), 42.9 %


After 42 games:

Each Stockfish-version plays 1000 games against Komodo 10.4, Houdini 5, Shredder 13, Fizbo 1.9, Gull 3, Fire 4, and Critter 1.6a.
 
Latest update: 2017/03/23: Komodo 10.4
 
Download the individual statistics [You must be registered and logged in to see this link.]
 
     Program                    Elo    +    -   Games   Score   Av.Op.  Draws
   1 BrainFish 161009 numa    : 3467    8    8  7000    85.0 %   3151   24.7 %
   2 BrainFish 161128 x64     : 3462    8    8  7000    81.3 %   3187   30.5 %
   3 asmFish 161207 x64       : 3425    7    7  7000    78.1 %   3187   33.6 %
   4 asmFish 170211 x64       : 3425    7    7  7000    76.9 %   3200   33.3 %
   5 asmFish 161217 x64       : 3424    7    7  7000    78.0 %   3187   32.9 %
   6 asmFish 170202 x64       : 3424    7    7  7000    76.9 %   3200   33.6 %
   7 asmFish 170310 x64       : 3424    7    7  7000    76.8 %   3200   33.8 %
   8 asmFish 170301 x64       : 3423    7    7  7000    76.8 %   3200   33.8 %
   9 asmFish 170109 x64       : 3423    7    7  7000    76.8 %   3200   33.9 %
  10 asmFish 161004 x64       : 3421    8    8  7000    81.5 %   3151   29.2 %
  11 asmFish 170122 x64       : 3420    7    7  7000    76.5 %   3200   33.6 %
  12 Stockfish 161212 x64     : 3407    7    7  7000    76.4 %   3187   35.8 %
  13 Stockfish 170305 x64     : 3404    7    7  7000    74.9 %   3200   35.5 %
  14 Stockfish 170214 x64     : 3402    7    7  7000    74.7 %   3200   35.2 %
  15 Stockfish 170105 x64     : 3402    7    7  7000    74.7 %   3200   36.0 %
  16 Stockfish 170113 x64     : 3401    7    7  7000    74.6 %   3200   35.7 %
  17 Stockfish 170223 x64     : 3400    7    7  7000    74.6 %   3200   35.4 %
  18 Stockfish 170129 x64     : 3399    7    7  7000    74.4 %   3200   36.6 %
  19 Stockfish 161120 x64     : 3394    7    7  7000    75.1 %   3187   35.7 %
  20 Stockfish 161127 x64     : 3392    7    7  7000    74.9 %   3187   36.2 %
  21 Stockfish 8 161101       : 3390    5    5 12000    73.0 %   3203   37.2 %
  22 Houdini 5 x64            : 3364    3    3 28000    52.0 %   3344   48.4 %
  23 Komodo 10.4 x64          : 3349    7    7  7000    67.8 %   3209   36.1 % (new)
  24 Komodo 10.3 x64          : 3327    4    4 20000    49.7 %   3325   41.5 %
  25 Komodo 10.1 x64          : 3322    7    7  8000    65.0 %   3203   33.3 %
  26 Komodo 10.2 x64          : 3314    4    4 15000    54.2 %   3278   38.8 %
  27 Houdini 4 x64            : 3194    5    5 11000    44.7 %   3240   34.7 %
  28 Shredder 13 x64          : 3180    3    3 29000    29.3 %   3345   34.9 %
  29 Fizbo 1.9 x64            : 3170    4    4 20000    28.2 %   3346   29.1 %
  30 Gull 3 x64               : 3128    3    3 33000    24.3 %   3344   32.0 %
  31 Fire 4 x64               : 3118    3    3 33000    23.2 %   3345   31.7 %
  32 Critter 1.6a x64         : 3111    3    3 33000    22.6 %   3345   28.7 %
  33 Equinox 3.3 x64          : 3093    4    4 19000    24.5 %   3312   31.7 %
  34 Mars 3.41 x64            : 3092    6    6 10000    30.7 %   3256   34.5 %
Below you find a diagram of the progress of Stockfish in my tests since the end of 2016. 
And below that diagram, the older diagrams.
 
You can save the diagrams (as a JPG-picture (in originial size)) on your PC with mouseclick (right button) and then choose "save image"...
The Elo-ratings of older Stockfish dev-versions in the Ordo-calculation can be a little different to the Elo-"dots" in the diagram, because the results/games of new Stockfish dev-versions - when getting part of the Ordo-calculation - can change the Elo-ratings of the opponent engines and that can change the Elo-ratings of older Stockfish dev-versions (in the Ordo-calculation / ratinglist, but not in the diagram, where all Elo-"dots" are the rating of one Stockfish dev-version at the moment, when the testrun of that Stockfish dev-version was finished).

LondonFrau wrote:

---

[You must be registered and logged in to see this link.]


Program                          Elo    +   -   Games   Score   Av.Op.  Draws

  1 Stockfish 180317 64            :   50   70  69    42    57.1 %      0   57.1 %
  2 Komodo 10.4 64-bit             :    0   69  70    42    42.9 %     50   57.1 %

  1 Stockfish 180317 64            :   50   42 (+ 12,= 24,-  6), 57.1 %
  2 Komodo 10.4 64-bit             :    0   42 (+  6,= 24,- 12), 42.9 %


After 42 games:

1 Stockfish 180317 64            :   42   48  47    82    56.1 %      0   61.0 %
  2 Komodo 10.4 64-bit             :    0   47  48    82    43.9 %     42   61.0 %

  1 Stockfish 180317 64            :   42   82 (+ 21,= 50,- 11), 56.1 %
  2 Komodo 10.4 64-bit             :    0   82 (+ 11,= 50,- 21), 43.9 %

Games: [You must be registered and logged in to see this link.]

1 Stockfish 180317 64            :   42   42  42   100    56.0 %      0   62.0 %
  2 Komodo 10.4 64-bit             :    0   42  42   100    44.0 %     42   62.0 %

  1 Stockfish 180317 64            :   42  100 (+ 25,= 62,- 13), 56.0 %
 
  2 Komodo 10.4 64-bit             :    0  100 (+ 13,= 62,- 25), 44.0 %


100 games

[You must be registered and logged in to see this link.]

StockFish Tests by PaulieD

i7 6700HQ | 4 @ 2.6-3.5 | Win10x64-16GB | Gui = CuteChess 0.9.4
Book = TopGM_2move.pgn | Hash = 8MB | Cores = 1 |  Hyper Threading On
| Ponder = No | TB = No | Time 20 '+ 2" ( =66 secs)

Here we can see K10.4's Strength over 10.3 (+39 Elo)
Surprisingly the SF (+20 Elo) over Cfish, H5.01 and above K10.4 (+55 Elo)
ASM (+13 Elo) over SF Default Verion

Code:

      # PLAYER:       RATING ERROR PLAYED (%) WDLD   (%)
   1 SF 06/03/17 ASMPD: 3262 10 1500 60.0 460 881 159 58.7
   2 SF 18/03/17:       3249 8  1500 58.0 421 897 182 59.8
   3 CFish 24/03/17:    3229 10 1500 54.7 373 896 231 59.7
   4 Houdini 5.01 Pro:  3203 10 1500 50.5 357 801 342 53.4
   5 Komodo 10.4:       3148 10 1500 41.5 245 755 500 50.3
   6 Komodo 10.3:       3109 10 1500 35.3 193 672 635 44.8