Hi everybody,

Here you'll find some of the tests I realized (sometime a little bit weird, strange or unnecessary).

The idea is to let you make the conclusion ...


------------------------------------------------------------------------------------------------------


Test 001 :

How is playing Deep Rybka 4.1 (x64) against Deep Rybka 4.1 960 (x64)? Is there a difference ?

Code:


Games Completed = 4000 of 4000 (Avg game length = 6.667 sec)
Settings = RR/32MB/Book/[b]500ms+50ms[/b]/M 1000cp for 12 moves, D 150 moves/EPD:[b]openings.epd[/b](4000)

 1.  Deep Rybka 4.1             1953.5/4000   1062-1155-1783     (L: m=571 t=1 i=0 a=583)   (D: r=1312 i=281 f=133 s=10 a=47)   (tpm=52.2 d=8.8 nps=127344)

 2.  Deep Rybka 4.1 960         2046.5/4000   1155-1062-1783     (L: m=483 t=0 i=0 a=579)   (D: r=1312 i=281 f=133 s=10 a=47)   (tpm=52.3 d=8.8 nps=129394)


Deep Rybka 4.1 960 scores 51,16 %.

Is this only a statistical margin ?
Is this a strength difference ?
Is this a little error margin in the opening book (openings.epd) ?
...

Have a nice debate ...

I see ...
Everybody is very interested in it !! lol

Here is the second one ...

Test 002 :

Testing all the Rybka I have ... Every one plays 10 games against each other ...


Very strange : Rybka 1.0 beta and Rybka 3 (32bits) losed nearly all the games on time ... Why these and not the others ?

Code:

Games Completed = 2530 of 2530 (Avg game length = 4.154 sec)
Settings = RR/32MB/500ms+100ms/M 1000cp for 12 moves, D 150 moves/EPD:openings.epd(4000)
Time = 13225 sec elapsed, 0 sec remaining

 1.  Deep Rybka 4.1 960  (x64)   197.5/220   188-13-19     (L: m=3 t=0 i=0 a=10)   (D: r=11 i=2 f=4 s=0 a=2)   (tpm=99.9 d=10.3 nps=146209)
 2.  Deep Rybka 4.1      (x64)   199.0/220   190-12-18     (L: m=4 t=0 i=0 a=8)   (D: r=10 i=4 f=3 s=0 a=1)   (tpm=99.9 d=10.1 nps=144130)
 3.  Deep Rybka 4        (x64)   203.0/220   193-7-20     (L: m=4 t=0 i=0 a=3)   (D: r=11 i=4 f=3 s=0 a=2)   (tpm=101.2 d=9.3 nps=155383)
 4.  Deep Rybka 3        (x64)   174.0/220   162-34-24     (L: m=23 t=1 i=0 a=10)   (D: r=14 i=4 f=3 s=0 a=3)   (tpm=71.0 d=7.4 nps=160439)
 5.  Deep Rybka 3 Dynamic (x64)   170.0/220   162-42-16     (L: m=32 t=0 i=0 a=10)   (D: r=5 i=5 f=2 s=1 a=3)   (tpm=70.5 d=7.1 nps=158199)
 6.  Deep Rybka 3 Human  (x64)   175.5/220   168-37-15     (L: m=28 t=0 i=0 a=9)   (D: r=10 i=1 f=2 s=0 a=2)   (tpm=70.4 d=7.1 nps=160688)
 7.  Deep Rybka 3 960    (x64)   181.5/220   168-25-27     (L: m=19 t=0 i=0 a=6)   (D: r=16 i=6 f=3 s=0 a=2)   (tpm=70.9 d=7.3 nps=159102)
 8.  Rybka 3              (x64)   165.0/220   153-43-24     (L: m=23 t=0 i=0 a=20)   (D: r=15 i=6 f=3 s=0 a=0)   (tpm=71.0 d=6.8 nps=101443)
 9.  Rybka 3              (w32)   5.0/220     5-215-0     (L: m=0 t=215 i=0 a=0)   (D: r=0 i=0 f=0 s=0 a=0)   (tpm=671.7 d=4.8 nps=30733)
10.  Deep Rybka 2.4      (w32)   75.5/220   66-135-19     (L: m=91 t=0 i=0 a=44)   (D: r=11 i=4 f=2 s=1 a=1)   (tpm=25.9 d=4.4 nps=136641)
11.  Deep Rybka 2.3.2a    (x64)   73.5/220   61-134-25     (L: m=93 t=27 i=0 a=14)   (D: r=17 i=4 f=3 s=1 a=0)   (tpm=35.9 d=3.4 nps=180402)
12.  Deep Rybka 2.3.2    (w32)   64.0/220   50-142-28     (L: m=88 t=43 i=0 a=11)   (D: r=18 i=5 f=4 s=1 a=0)   (tpm=41.9 d=3.6 nps=115994)
13.  Deep Rybka 2.3.1    (w32)   81.0/220   70-128-22     (L: m=115 t=0 i=0 a=13)   (D: r=17 i=4 f=0 s=0 a=1)   (tpm=26.4 d=3.8 nps=133438)
14.  Deep Rybka 2.3 LK    (w32)   86.0/220   75-123-22     (L: m=86 t=0 i=0 a=37)   (D: r=13 i=4 f=4 s=0 a=1)   (tpm=25.4 d=4.3 nps=137683)
15.  Deep Rybka 2.3      (w32)   72.0/220   63-139-18     (L: m=92 t=0 i=0 a=47)   (D: r=11 i=5 f=1 s=1 a=0)   (tpm=25.5 d=4.2 nps=136310)
16.  Deep Rybka 2.2n2    (w32)   83.0/220   70-124-26     (L: m=85 t=0 i=0 a=39)   (D: r=18 i=5 f=2 s=0 a=1)   (tpm=26.6 d=4.1 nps=64323)
17.  Deep Rybka 2.2      (w32)   81.5/220   66-123-31     (L: m=94 t=0 i=0 a=29)   (D: r=19 i=5 f=5 s=1 a=1)   (tpm=26.5 d=4.3 nps=212690)
18.  Rybka 2.1q          (w32)   90.0/220   75-115-30     (L: m=90 t=0 i=0 a=25)   (D: r=20 i=7 f=2 s=0 a=1)   (tpm=29.6 d=4.6 nps=146051)
19.  Rybka 2.1c          (w32)   82.0/220   68-124-28     (L: m=92 t=0 i=0 a=32)   (D: r=18 i=7 f=2 s=0 a=1)   (tpm=31.2 d=5.7 nps=326153)
20.  Rybka 1.2n          (w32)   87.5/220   75-120-25     (L: m=98 t=0 i=0 a=22)   (D: r=21 i=1 f=3 s=0 a=0)   (tpm=31.2 d=5.4 nps=370012)
21.  Rybka 1.2f          (w32)   87.5/220   74-119-27     (L: m=93 t=0 i=0 a=26)   (D: r=20 i=4 f=3 s=0 a=0)   (tpm=30.8 d=5.3 nps=343584)
22.  Rybka 1.1            (w32)   91.0/220   80-118-22     (L: m=79 t=0 i=0 a=39)   (D: r=13 i=7 f=2 s=0 a=0)   (tpm=31.5 d=5.3 nps=303266)
23.  Rybka 1.0 beta      (w32)   5.0/220    5-215-0     (L: m=0 t=215 i=0 a=0)   (D: r=0 i=0 f=0 s=0 a=0)   (tpm=1513.1 d=9.5 nps=101056)


Test 001:

Code:

Score is 51.1625%

 50.57422% -  51.75077%
 68% confidence

 49.98595% -  52.33905%
 95% confidence

 49.39767% -  52.92733%
 99.7% confidence


 LOS = 0.9761606

- But in general, Rybka 4.1 and Rybka 4.1 960 are the same strength, just Rybka 4.1 960 can play Chess960 (also called Fischer Random Chess)


Test 002:

Rybka 3 (w32) (tpm=671.7 d=4.8 nps=30733)
Rybka 3 is running in a very low speed, This is mainly regarding the number of cores that Rybka3 uses.

Thanks Vladimir ;-)

I know Rybka 960 is also designed for FRC "a contrario" Rybka classic.
And it's why, as you, I thought they were the same strength ...


Test 3 :

Code:


Games Completed = 360 of 360 (Avg game length = 21.570 sec)
Settings = RR/32MB/1000ms+200ms/M 1000cp for 12 moves, D 150 moves/EPD:openings.epd(4000)
Time = 9721 sec elapsed, 0 sec remaining

 1.  Deep Rybka 4.1 960  (x64)   59.5/80   48-9-23     (L: m=4 t=0 i=0 a=5)   (D: r=11 i=3 f=5 s=1 a=3)   (tpm=202.4 d=12.3 nps=150171)
 2.  Deep Rybka 4.1      (x64)   57.0/80   46-12-22     (L: m=3 t=0 i=0 a=9)   (D: r=16 i=5 f=0 s=0 a=1)   (tpm=202.6 d=11.6 nps=150485)
 3.  Deep Rybka 4        (x64)   63.0/80   54-8-18     (L: m=2 t=0 i=0 a=6)   (D: r=14 i=1 f=1 s=0 a=2)   (tpm=204.8 d=11.0 nps=161604)
 4.  Deep Rybka 3        (x64)   36.5/80   28-35-17     (L: m=22 t=0 i=0 a=13)   (D: r=8 i=2 f=5 s=0 a=2)   (tpm=159.1 d=9.4 nps=152538)
 5.  Deep Rybka 3 Dynamic (x64)   31.5/80   20-37-23     (L: m=29 t=0 i=0 a=8)   (D: r=13 i=2 f=7 s=0 a=1)   (tpm=159.1 d=9.5 nps=135860)
 6.  Deep Rybka 3 Human  (x64)   35.0/80   22-32-26     (L: m=18 t=0 i=0 a=14)   (D: r=12 i=9 f=4 s=1 a=0)   (tpm=158.9 d=9.1 nps=136691)
 7.  Deep Rybka 3 960    (x64)   40.5/80   27-26-27     (L: m=19 t=0 i=0 a=7)   (D: r=16 i=4 f=6 s=0 a=1)   (tpm=159.2 d=9.3 nps=143033)
 8.  Rybka 3              (x64)   26.0/80   18-46-16     (L: m=26 t=0 i=0 a=20)   (D: r=9 i=1 f=5 s=0 a=1)   (tpm=158.1 d=8.5 nps=91596)
 9.  Deep Rybka 2.3.2a    (x64)   11.0/80   3-61-16     (L: m=47 t=6 i=0 a=8)   (D: r=7 i=5 f=3 s=0 a=1)   (tpm=65.3 d=7.7 nps=319097)



Thanks Tennison. but what is your point from running these tests?