basis/math/statistics/statistics-tests.factor

   1 USING: arrays kernel math math.functions math.order ranges
   2 math.vectors sequences tools.test ;
   3 IN: math.statistics
   4
   5 { 3 } [ { 1 2 3 4 5 } 1 power-mean ] unit-test
   6 { t } [ { 1 2 3 4 5 } [ 2 power-mean ] [ quadratic-mean ] bi 1e-10 ~ ] unit-test
   7 { 1 } [ { 1 } mean ] unit-test
   8 { 0 } [ { } mean ] unit-test
   9 { 3/2 } [ { 1 2 } mean ] unit-test
  10 { 0.0 } [ { 0 0 0 } geometric-mean ] unit-test
  11 { t } [ { 2 2 2 2 } geometric-mean 2.0 .0001 ~ ] unit-test
  12 { 1.0 } [ { 1 1 1 } geometric-mean ] unit-test
  13 { t } [ 1000 1000 <array> geometric-mean 1000 .01 ~ ] unit-test
  14 { t } [ 100000 100000 <array> geometric-mean 100000 .01 ~ ] unit-test
  15
  16 { 1 } [ { 1 1 1 } harmonic-mean ] unit-test
  17 { 12/7 } [ { 1 2 4 } harmonic-mean ] unit-test
  18
  19 { 5+1/4 } [ { 1 3 5 7 } contraharmonic-mean ] unit-test
  20 { 18 } [ { 4 8 15 16 23 42 } 0 trimmed-mean ] unit-test
  21 { 15+1/2 } [ { 4 8 15 16 23 42 } 0.2 trimmed-mean ] unit-test
  22 { 3 } [ { 1 3 3 3 3 5 } 0.2 winsorized-mean ] unit-test
  23
  24 { 2470 } [ 20 <iota> sum-of-squares ] unit-test
  25 { 2470 } [ 20 <iota> >array sum-of-squares ] unit-test
  26 { 371 } [ 4 10 [a..b] sum-of-squares ] unit-test
  27 { 371 } [ 4 10 [a..b] >array sum-of-squares ] unit-test
  28
  29 { 36100 } [ 20 <iota> sum-of-cubes ] unit-test
  30 { 36100 } [ 20 <iota> >array sum-of-cubes ] unit-test
  31 { 2989 } [ 4 10 [a..b] sum-of-cubes ] unit-test
  32 { 2989 } [ 4 10 [a..b] >array sum-of-cubes ] unit-test
  33
  34 { 562666 } [ 20 <iota> sum-of-quads ] unit-test
  35 { 562666 } [ 20 <iota> >array sum-of-quads ] unit-test
  36 { 25235 } [ 4 10 [a..b] sum-of-quads ] unit-test
  37 { 25235 } [ 4 10 [a..b] >array sum-of-quads ] unit-test
  38
  39 { 0 } [ { 1 } range ] unit-test
  40 { 89 } [ { 1 2 30 90 } range ] unit-test
  41 { 2 } [ { 1 2 3 } median ] unit-test
  42 { 5/2 } [ { 1 2 3 4 } median ] unit-test
  43
  44 { 1 } [ { 1 2 3 4 } 0 kth-smallest ] unit-test
  45 { 3 } [ { 1 2 3 4 } 2 kth-smallest ] unit-test
  46
  47 { 4 } [ { 1 2 3 4 } 0 kth-largest ] unit-test
  48 { 2 } [ { 1 2 3 4 } 2 kth-largest ] unit-test
  49
  50 [ { 1 2 3 4 } 30 kth-largest ] [ bounds-error? ] must-fail-with
  51 [ { 1 2 3 4 } 2 [ [ ] compare ] kth-object ] [ bounds-error? ] must-fail-with
  52 { 3 } [ { 1 2 3 4 } 2 [ before? ] kth-object ] unit-test
  53
  54 { 1 } [ { 1 } mode ] unit-test
  55 { 3 } [ { 1 2 3 3 3 4 5 6 76 7 2 21 1 3 3 3 } mode ] unit-test
  56
  57 [ { } median ] must-fail
  58 [ { } upper-median ] must-fail
  59 [ { } lower-median ] must-fail
  60
  61 { 2 } [ { 1 2 3 4 } lower-median ] unit-test
  62 { 3 } [ { 1 2 3 4 } upper-median ] unit-test
  63 { 3 } [ { 1 2 3 4 5 } lower-median ] unit-test
  64 { 3 } [ { 1 2 3 4 5 } upper-median ] unit-test
  65
  66 { 1 } [ { 1 } lower-median ] unit-test
  67 { 1 } [ { 1 } upper-median ] unit-test
  68 { 1 } [ { 1 } median ] unit-test
  69
  70 { 1 } [ { 1 2 } lower-median ] unit-test
  71 { 2 } [ { 1 2 } upper-median ] unit-test
  72 { 3/2 } [ { 1 2 } median ] unit-test
  73
  74 { 1 } [ { 1 2 3 } sample-var ] unit-test
  75 { 16 } [ { 4 6 8 10 10 12 14 16 } sample-var ] unit-test
  76
  77 { 16 } [ { 4 6 8 10 12 14 16 } population-var ] unit-test
  78 { 1.0 } [ { 7 8 9 } sample-std ] unit-test
  79 { 2/3 } [ { 7 8 9 } 0 var-ddof ] unit-test
  80 { 2/3 } [ { 7 8 9 } population-var ] unit-test
  81 { 1 } [ { 7 8 9 } 1 var-ddof ] unit-test
  82 { 1 } [ { 7 8 9 } sample-var ] unit-test
  83 { 2 } [ { 7 8 9 } 2 var-ddof ] unit-test
  84 { 0 } [ { 7 8 9 } 3 var-ddof ] unit-test
  85
  86 { t } [ { 7 8 9 } 0 std-ddof 0.816496580927726 .0001 ~ ] unit-test
  87 { t } [ { 7 8 9 } population-std 0.816496580927726 .0001 ~ ] unit-test
  88 { 1.0 } [ { 7 8 9 } 1 std-ddof ] unit-test
  89 { 1.0 } [ { 7 8 9 } sample-std ] unit-test
  90 { 1.0 } [ { 7 8 9 } sample-std ] unit-test
  91 { t } [ { 7 8 9 } 2 std-ddof 1.414213562373095 .0001 ~ ] unit-test
  92 { 0.0 } [ { 7 8 9 } 3 std-ddof ] unit-test
  93
  94 { t } [ { 1 2 3 4 } sample-ste 0.6454972243679028 - .0001 < ] unit-test
  95
  96 { t } [ { 23.2 33.4 22.5 66.3 44.5 } sample-std 18.1906 - .0001 < ] unit-test
  97
  98 { 0 } [ { 1 } sample-var ] unit-test
  99 { 0.0 } [ { 1 } sample-std ] unit-test
 100 { 0.0 } [ { 1 } sample-ste ] unit-test
 101
 102 { 2 } [ { 1 3 5 7 } mean-dev ] unit-test
 103 { 4/5 } [ { 1 3 3 3 5 } median-dev ] unit-test
 104
 105 {
 106     H{
 107         { 97 2 }
 108         { 98 2 }
 109         { 99 2 }
 110     }
 111 } [
 112     "aabbcc" histogram
 113 ] unit-test
 114
 115 { H{ { 1 1/2 } { 2 1/6 } { 3 1/3 } } }
 116 [ { 1 1 1 1 1 1 2 2 3 3 3 3 } normalized-histogram ] unit-test
 117
 118 { 0 } [ { 1 } { 1 } sample-cov ] unit-test
 119 { 2/3 } [ { 1 2 3 } { 4 5 6 } population-cov ] unit-test
 120
 121 { 0.75 } [ { 1 2 3 4 } dup sample-corr ] unit-test
 122 { 1.0 } [ { 1 2 3 4 } dup population-corr ] unit-test
 123 { -0.75 } [ { 1 2 3 4 } { -4 -5 -6 -7 } sample-corr ] unit-test
 124
 125 { { 1 2 4 7 } } [ { 1 1 2 3 } cum-sum ] unit-test
 126 { { 1 1 2 6 } } [ { 1 1 2 3 } cum-product ] unit-test
 127 { { 5 3 3 1 } } [ { 5 3 4 1 } cum-min ] unit-test
 128 { { 1 3 3 5 } } [ { 1 3 1 5 } cum-max ] unit-test
 129 { { 1.0 1.5 2.0 } } [ { 1.0 2.0 3.0 } cum-mean ] unit-test
 130
 131 { t }
 132 [
 133     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile1 [ >float ] map
 134     { 15.0 40.0 43.0 } .00001 v~
 135 ] unit-test
 136
 137 { t }
 138 [
 139     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile3 [ >float ] map
 140     { 15.0 40.0 42.0 } .00001 v~
 141 ] unit-test
 142
 143 { t }
 144 [
 145     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile4 [ >float ] map
 146     { 13.0 39.5 42.25 } .00001 v~
 147 ] unit-test
 148
 149 { t }
 150 [
 151     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile5 [ >float ] map
 152     { 20+1/4 40 42+3/4 } .00001 v~
 153 ] unit-test
 154
 155 { t }
 156 [
 157     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile6 [ >float ] map
 158     { 15.0 40.0 43.0 } .00001 v~
 159 ] unit-test
 160
 161 { t }
 162 [
 163     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile7 [ >float ] map
 164     { 25.5 40.0 42.5 } .00001 v~
 165 ] unit-test
 166
 167 { t }
 168 [
 169     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile8 [ >float ] map
 170     { 18.5 40.0 42.83333333333334 } .00001 v~
 171 ] unit-test
 172
 173 { t }
 174 [
 175     { 6 7 15 36 39 40 41 42 43 47 49 } { 1/4 1/2 3/4 } quantile9 [ >float ] map
 176     { 18.9375 40.0 42.8125 } .00001 v~
 177 ] unit-test
 178
 179 { 75 } [
 180     { 7 7 31 31 47 75 87 115 116 119 119 155 177 } midhinge
 181 ] unit-test
 182
 183 { 0x1.02eb63cff3f8p0 } [ { 1 2 3 } entropy ] unit-test
 184
 185 { 1.0 } [ 0.5 binary-entropy ] unit-test
 186
 187 { { -4 13 -5 2 4 } } [ { 1 -3 10 5 7 11 } differences ] unit-test
 188
 189 { t t } [
 190     { 6.5 3.8 6.6 5.7 6.0 6.4 5.3 } standardize
 191     [ mean 0 1e-10 ~ ] [ sample-var 1 1e-10 ~ ] bi
 192 ] unit-test
 193
 194 { t t } [
 195     { { 1 -1 2 } { 2 0 0 } { 0 1 -1 } } standardize-2d
 196     flip
 197     [ [ mean ] map { 0 0 0 } 1e-10 v~ ]
 198     [ [ sample-var ] map { 1 1 1 } 1e-10 v~ ] bi
 199 ] unit-test
 200
 201 { { 0 0 0 } } [ { 1 1 1 } standardize ] unit-test
 202
 203 { { 0 1/4 1/2 3/4 1 } } [ 5 <iota> rescale ] unit-test
 204
 205
 206 {
 207     { 2 2 2 1 0 5 6 7 7 7 7 }
 208 } [
 209     { 30 30 30 20 10 40 50 60 60 60 60 } rank-values
 210 ] unit-test
 211
 212 {
 213     { 1 0 2 3 4 }
 214 }
 215 [ { 3 1 4 15 92 } rank-values ] unit-test
 216
 217 { { 1 1 2 3 3 4 } }
 218 [ { 1 2 3 3 2 3 } [ odd? ] cum-count ] unit-test
 219
 220 { { 0 0 1 2 2 3 } }
 221 [ { 1 2 3 3 2 3 } [ 3 = ] cum-count ] unit-test
 222
 223 { { 0 1 3 6 } }
 224 [ { 1 2 3 4 } cum-sum0 ] unit-test
 225
 226 { { 1 2 6 } }
 227 [ { 2 3 4 } cum-product1 ] unit-test
 228
 229 { { 1 } } [
 230     { 1 2 3 4 5 10 21 12 12 12 12203 3403 030 3022 2 2 }
 231     { 1/1000 } quantile5
 232 ] unit-test
 233
 234 { 15+1/2 } [ { 4 8 15 16 23 42 } trimean ] unit-test
 235
 236 { 0 } [ { } dcg ] unit-test
 237 { 0.0 } [ { } ndcg ] unit-test
 238
 239 { 0.0 } [ { 0 } dcg ] unit-test
 240 { 0.0 } [ { 0 } ndcg ] unit-test
 241
 242 { t } [ { 3 2 3 0 1 2 } dcg 6.861126688593501 1e-6 ~ ] unit-test
 243 { t } [ { 3 2 3 0 1 2 } ndcg 0.9608081943360615 1e-6 ~ ] unit-test