CompaRNA - on-line benchmarks of RNA structure prediction methods
Home

Methods
Datasets
Rankings
RNA 2D Atlas

Help
FAQ

Contact us
RSS feeds
Twitter

Table of contents:

  1. Overview

  2. Performance Plots

  3. Performance of MXScarna(seed) - scored higher in this pairwise comparison

  4. Performance of MaxExpect - scored lower in this pairwise comparison

  5. Compile and download dataset for MXScarna(seed) & MaxExpect [.zip] - may take several seconds...


Overview

Metric MXScarna(seed) MaxExpect
MCC 0.637 > 0.598
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020 > 0.592 ± 0.017
Sensitivity 0.535 < 0.581
Positive Predictive Value 0.759 > 0.616
Total TP 23071 < 25051
Total TN 25247346 > 25237094
Total FP 10057 < 18864
Total FP CONTRA 971 < 2151
Total FP INCONS 6356 < 13448
Total FP COMP 2730 < 3265
Total FN 20022 > 18042
P-value 3.56938820447e-08

^top




Performance plots


  1. Comparison of performance of MXScarna(seed) and MaxExpect. Positive Predictive Value (PPV) is plotted against sensitivity. Each dot represents a single test of each method. See tables below for raw data (individual counts for MXScarna(seed) and MaxExpect).

  2. Average Matthews Correlation Coefficients (MCC) with 95% confidence intervals (CIs) were plotted for different RNA families, for which at least 3 members were present in the benchmarking dataset. 'n' denotes the number of MCCs used to calculate the average and CI. See tables below for raw data (individual counts for MXScarna(seed) and MaxExpect).

  3. Comparison of average Matthews Correlation Coefficients (MCCs) for MXScarna(seed) and MaxExpect. The whiskers correspond to 95% confidence intervals (CIs). 'n' denotes the number of MCCs used to calculate average MCCs and CIs. See tables below for raw data (individual counts for MXScarna(seed) and MaxExpect).

^top





Performance of MXScarna(seed) - scored higher in this pairwise comparison

1. Total counts & total scores for MXScarna(seed)

Total Base Pair Counts
Total TP 23071
Total TN 25247346
Total FP 10057
Total FP CONTRA 971
Total FP INCONS 6356
Total FP COMP 2730
Total FN 20022
Total Scores
MCC 0.637
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020
Sensitivity 0.535
Positive Predictive Value 0.759
Nr of predictions 431

^top



2. Individual counts for MXScarna(seed) [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.67 0.51 0.88 38 34148 6 0 5 1 37
ASE_00002 0.68 0.53 0.87 39 35466 7 1 5 1 34
ASE_00004 0.52 0.41 0.65 40 47833 24 4 18 2 57
ASE_00005 0.72 0.57 0.92 67 57897 8 2 4 2 50
ASE_00006 0.51 0.41 0.63 38 47526 25 3 19 3 55
ASE_00007 0.82 0.75 0.90 83 59593 12 4 5 3 27
ASE_00009 0.68 0.57 0.81 38 26059 10 1 8 1 29
ASE_00010 0.70 0.63 0.76 52 49702 27 4 12 11 30
ASE_00012 0.64 0.55 0.75 68 73829 26 4 19 3 55
ASE_00014 0.67 0.52 0.87 55 54222 9 0 8 1 51
ASE_00017 0.49 0.41 0.59 26 50996 36 2 16 18 38
ASE_00018 0.77 0.64 0.91 86 80507 11 2 6 3 48
ASE_00020 0.50 0.36 0.71 45 73857 21 6 12 3 81
ASE_00021 0.49 0.36 0.66 57 104110 34 4 25 5 103
ASE_00022 0.66 0.58 0.75 72 82932 31 5 19 7 52
ASE_00023 0.27 0.20 0.37 25 84188 47 2 40 5 102
ASE_00025 0.53 0.42 0.67 30 78561 28 0 15 13 41
ASE_00026 0.74 0.65 0.85 72 59600 18 5 8 5 38
ASE_00028 0.69 0.60 0.78 76 84569 29 5 16 8 50
ASE_00029 0.24 0.18 0.32 22 82960 50 6 40 4 100
ASE_00030 0.65 0.46 0.91 67 85417 9 3 4 2 78
ASE_00031 0.31 0.23 0.43 29 86668 41 3 36 2 97
ASE_00032 0.20 0.15 0.28 18 80135 55 0 47 8 100
ASE_00033 0.77 0.67 0.89 81 64889 14 3 7 4 40
ASE_00035 0.75 0.66 0.86 78 70409 18 3 10 5 40
ASE_00036 0.60 0.50 0.73 66 75764 28 3 22 3 66
ASE_00037 0.86 0.79 0.94 87 59247 9 2 4 3 23
ASE_00038 0.69 0.56 0.84 57 53560 14 1 10 3 44
ASE_00040 0.69 0.59 0.80 78 78906 22 4 15 3 55
ASE_00041 0.80 0.72 0.90 78 57543 12 2 7 3 30
ASE_00042 0.68 0.52 0.87 76 90013 14 1 10 3 69
ASE_00044 0.85 0.78 0.93 82 54527 9 3 3 3 23
ASE_00045 0.64 0.58 0.72 46 47214 28 4 14 10 34
ASE_00046 0.76 0.66 0.87 68 50325 13 1 9 3 35
ASE_00047 0.74 0.60 0.92 78 74220 8 2 5 1 52
ASE_00052 0.64 0.55 0.75 62 61342 24 3 18 3 50
ASE_00053 0.60 0.47 0.76 63 79318 24 4 16 4 70
ASE_00057 0.71 0.57 0.88 77 82127 14 4 7 3 57
ASE_00064 0.82 0.71 0.94 63 45384 7 1 3 3 26
ASE_00066 0.71 0.57 0.88 74 72306 11 3 7 1 56
ASE_00068 0.67 0.52 0.88 44 37625 8 1 5 2 41
ASE_00069 0.62 0.49 0.79 69 82941 22 3 15 4 71
ASE_00074 0.81 0.70 0.94 83 67808 9 2 3 4 36
ASE_00075 0.49 0.35 0.69 56 108730 31 3 22 6 106
ASE_00076 0.42 0.32 0.55 38 68196 33 2 29 2 80
ASE_00077 0.77 0.70 0.85 60 45079 14 4 7 3 26
ASE_00078 0.79 0.72 0.87 60 43002 13 2 7 4 23
ASE_00079 0.41 0.33 0.52 33 55548 32 1 29 2 67
ASE_00080 0.37 0.30 0.47 37 71552 44 6 36 2 86
ASE_00081 0.76 0.67 0.87 65 49695 13 2 8 3 32
ASE_00082 0.35 0.24 0.50 28 70444 31 1 27 3 88
ASE_00083 0.71 0.56 0.89 62 62411 11 1 7 3 48
ASE_00084 0.71 0.59 0.85 58 53560 14 1 9 4 41
ASE_00087 0.31 0.21 0.46 30 88345 36 0 35 1 114
ASE_00090 0.66 0.54 0.81 55 55543 16 2 11 3 46
ASE_00092 0.56 0.43 0.73 49 63479 21 2 16 3 64
ASE_00096 0.41 0.30 0.55 35 63482 31 1 28 2 80
ASE_00099 0.83 0.73 0.96 87 64529 7 2 2 3 33
ASE_00100 0.54 0.41 0.70 31 82171 27 1 12 14 45
ASE_00102 0.47 0.34 0.63 57 117765 36 5 28 3 109
ASE_00104 0.82 0.73 0.93 87 64167 10 2 5 3 32
ASE_00105 0.51 0.38 0.70 42 64201 21 5 13 3 69
ASE_00107 0.78 0.68 0.91 86 73058 12 2 7 3 41
ASE_00108 0.54 0.43 0.68 27 46931 25 0 13 12 36
ASE_00111 0.68 0.54 0.86 31 50050 23 0 5 18 26
ASE_00112 0.32 0.25 0.42 29 75397 42 7 33 2 87
ASE_00114 0.50 0.45 0.55 35 45387 40 4 25 11 42
ASE_00115 0.54 0.43 0.68 43 54552 23 1 19 3 58
ASE_00116 0.35 0.27 0.46 18 31587 22 1 20 1 48
ASE_00118 0.39 0.30 0.50 31 60664 34 3 28 3 71
ASE_00119 0.30 0.24 0.38 26 62767 43 2 40 1 82
ASE_00120 0.72 0.57 0.92 54 46912 7 0 5 2 40
ASE_00121 0.77 0.63 0.94 58 45088 5 0 4 1 34
ASE_00122 0.66 0.58 0.75 51 43297 20 1 16 3 37
ASE_00123 0.67 0.53 0.85 45 38450 10 2 6 2 40
ASE_00125 0.68 0.51 0.90 45 39290 7 1 4 2 43
ASE_00128 0.66 0.54 0.82 54 53235 15 1 11 3 46
ASE_00129 0.68 0.53 0.88 59 62768 11 1 7 3 52
ASE_00131 0.63 0.47 0.83 40 39292 10 1 7 2 45
ASE_00132 0.48 0.40 0.57 38 50336 31 4 25 2 57
ASE_00134 0.73 0.62 0.86 59 50334 13 1 9 3 36
ASE_00135 0.40 0.32 0.51 35 63121 35 4 30 1 74
ASE_00136 0.78 0.67 0.91 62 48137 9 1 5 3 30
ASE_00137 0.53 0.43 0.66 42 48452 25 2 20 3 56
ASE_00138 0.73 0.63 0.85 51 40410 13 3 6 4 30
ASE_00139 0.48 0.35 0.67 36 54231 19 0 18 1 68
ASE_00140 0.47 0.34 0.65 42 70811 26 3 20 3 83
ASE_00142 0.79 0.70 0.89 86 67064 14 3 8 3 36
ASE_00145 0.58 0.40 0.85 44 70073 9 0 8 1 67
ASE_00146 0.78 0.66 0.92 82 70787 10 2 5 3 42
ASE_00148 0.47 0.28 0.80 43 112521 12 0 11 1 111
ASE_00151 0.79 0.71 0.88 70 51923 13 7 3 3 28
ASE_00153 0.60 0.48 0.76 35 57584 26 0 11 15 38
ASE_00154 0.61 0.50 0.76 53 65271 18 4 13 1 54
ASE_00155 0.54 0.35 0.83 50 93468 12 0 10 2 92
ASE_00161 0.69 0.64 0.75 56 53553 29 4 15 10 31
ASE_00163 0.79 0.70 0.89 65 53228 11 2 6 3 28
ASE_00165 0.56 0.43 0.74 43 52917 19 1 14 4 58
ASE_00168 0.59 0.48 0.72 31 60683 27 0 12 15 33
ASE_00169 0.47 0.34 0.65 36 57236 22 1 18 3 71
ASE_00170 0.71 0.62 0.82 58 48757 16 2 11 3 35
ASE_00171 0.59 0.49 0.71 46 48451 22 1 18 3 48
ASE_00172 0.59 0.46 0.75 49 58931 19 4 12 3 57
ASE_00174 0.54 0.42 0.69 46 61008 24 3 18 3 63
ASE_00175 0.71 0.55 0.91 59 59966 9 1 5 3 48
ASE_00176 0.46 0.35 0.60 38 59968 27 1 24 2 72
ASE_00179 0.57 0.49 0.66 41 44191 24 4 17 3 43
ASE_00180 0.72 0.61 0.85 61 51288 14 2 9 3 39
ASE_00181 0.59 0.45 0.76 48 57567 19 3 12 4 58
ASE_00182 0.35 0.24 0.51 33 84190 33 3 29 1 103
ASE_00183 0.65 0.52 0.81 59 61352 17 0 14 3 54
ASE_00184 0.69 0.55 0.86 56 54550 12 0 9 3 46
ASE_00185 0.23 0.16 0.32 21 73470 46 8 37 1 107
ASE_00186 0.72 0.62 0.84 82 78905 21 2 14 5 50
ASE_00187 0.58 0.43 0.78 49 68572 17 1 13 3 66
ASE_00189 0.63 0.57 0.70 58 63107 35 5 20 10 44
ASE_00190 0.53 0.42 0.67 38 45394 23 5 14 4 52
ASE_00191 0.82 0.70 0.96 43 29601 4 0 2 2 18
ASE_00192 0.29 0.23 0.38 30 84588 51 6 42 3 103
ASE_00194 0.60 0.50 0.71 60 73452 32 5 19 8 59
ASE_00196 0.66 0.52 0.85 39 31580 9 0 7 2 36
ASE_00197 0.67 0.55 0.82 80 89156 20 2 15 3 65
ASE_00198 0.75 0.61 0.93 62 52583 8 1 4 3 40
ASE_00203 0.56 0.47 0.68 45 46599 24 1 20 3 51
ASE_00204 0.62 0.53 0.72 59 67814 30 6 17 7 53
ASE_00205 0.71 0.59 0.85 53 45994 12 0 9 3 37
ASE_00209 0.77 0.65 0.92 57 43009 7 0 5 2 31
ASE_00210 0.69 0.54 0.90 35 27222 5 0 4 1 30
ASE_00212 0.67 0.54 0.82 80 93864 20 2 15 3 68
ASE_00213 0.65 0.48 0.86 32 27224 6 0 5 1 34
ASE_00214 0.74 0.63 0.87 65 56205 13 2 8 3 38
ASE_00215 0.38 0.26 0.54 26 48468 23 2 20 1 73
ASE_00216 0.69 0.59 0.81 48 39281 14 3 8 3 34
ASE_00217 0.81 0.71 0.93 64 40401 8 2 3 3 26
ASE_00221 0.78 0.69 0.89 81 64529 13 2 8 3 36
ASE_00222 0.47 0.27 0.82 42 112050 10 0 9 1 115
ASE_00227 0.28 0.21 0.38 28 78930 47 1 44 2 105
ASE_00228 0.62 0.51 0.76 44 46913 18 2 12 4 42
ASE_00229 0.72 0.62 0.84 54 42422 13 1 9 3 33
ASE_00231 0.49 0.40 0.60 38 47832 27 5 20 2 58
ASE_00232 0.63 0.57 0.71 48 38435 23 4 16 3 36
ASE_00234 0.23 0.17 0.32 22 75398 48 3 43 2 107
ASE_00237 0.56 0.48 0.66 27 45712 30 2 12 16 29
ASE_00238 0.54 0.39 0.76 44 64203 17 3 11 3 70
ASE_00240 0.61 0.49 0.74 46 46603 19 1 15 3 47
ASE_00241 0.80 0.72 0.89 63 43885 11 2 6 3 24
ASE_00242 0.82 0.75 0.90 84 60982 12 2 7 3 28
ASE_00245 0.17 0.09 0.33 7 55257 20 3 11 6 71
ASE_00246 0.60 0.48 0.74 32 48162 25 0 11 14 35
ASE_00247 0.59 0.48 0.72 31 54242 28 0 12 16 33
ASE_00248 0.81 0.72 0.92 82 62392 11 2 5 4 32
ASE_00250 0.60 0.49 0.73 64 78915 25 4 20 1 67
ASE_00252 0.47 0.35 0.64 58 115350 37 4 28 5 110
ASE_00254 0.67 0.59 0.77 48 36794 17 1 13 3 34
ASE_00255 0.61 0.50 0.74 65 74603 26 5 18 3 65
ASE_00257 0.72 0.58 0.90 56 50978 9 4 2 3 41
ASE_00258 0.15 0.11 0.21 6 26768 24 4 18 2 48
ASE_00259 0.59 0.48 0.73 58 73073 28 1 21 6 63
ASE_00263 0.52 0.39 0.68 47 70431 25 3 19 3 73
ASE_00264 0.28 0.14 0.56 14 49116 15 0 11 4 86
ASE_00267 0.75 0.65 0.86 57 45084 12 2 7 3 31
ASE_00270 0.39 0.27 0.56 35 72328 32 0 27 5 93
ASE_00274 0.60 0.48 0.77 49 55547 18 1 14 3 54
ASE_00277 0.60 0.48 0.75 44 48146 19 1 14 4 47
ASE_00279 0.78 0.65 0.93 66 53230 8 2 3 3 35
ASE_00280 0.73 0.62 0.85 61 51931 14 1 10 3 37
ASE_00281 0.79 0.68 0.91 60 44485 9 2 4 3 28
ASE_00282 0.48 0.35 0.65 45 77746 26 3 21 2 82
ASE_00283 0.68 0.56 0.82 60 61703 16 2 11 3 47
ASE_00284 0.67 0.54 0.84 58 58242 14 2 9 3 50
ASE_00285 0.51 0.40 0.64 49 68930 30 2 25 3 73
ASE_00286 0.68 0.58 0.82 53 46600 15 1 11 3 39
ASE_00287 0.67 0.54 0.84 56 54879 14 2 9 3 47
ASE_00288 0.64 0.54 0.77 50 45991 18 2 13 3 43
ASE_00289 0.54 0.42 0.70 66 100931 31 3 25 3 91
ASE_00292 0.77 0.65 0.92 90 81712 11 3 5 3 48
ASE_00294 0.67 0.51 0.87 88 114380 16 2 11 3 83
ASE_00295 0.76 0.63 0.92 82 73831 10 2 5 3 49
ASE_00296 0.68 0.54 0.87 78 91716 15 3 9 3 67
ASE_00297 0.62 0.50 0.77 49 52911 18 0 15 3 49
ASE_00298 0.55 0.42 0.72 47 67463 21 4 14 3 66
ASE_00299 0.32 0.24 0.42 24 49398 34 1 32 1 76
ASE_00303 0.29 0.20 0.43 19 67852 30 7 18 5 76
ASE_00305 0.73 0.68 0.77 58 54540 28 4 13 11 27
ASE_00313 0.39 0.20 0.75 18 62457 17 0 6 11 71
ASE_00316 0.27 0.17 0.41 17 107839 35 3 21 11 81
ASE_00318 0.63 0.54 0.74 64 80113 37 6 17 14 54
ASE_00321 0.74 0.69 0.79 61 54538 25 4 12 9 27
ASE_00327 0.28 0.18 0.43 16 57254 24 1 20 3 73
ASE_00328 0.73 0.66 0.80 74 72679 31 5 13 13 38
ASE_00329 0.34 0.24 0.48 15 40724 21 11 5 5 48
ASE_00330 0.28 0.17 0.47 15 56248 24 0 17 7 75
ASE_00332 0.74 0.63 0.88 87 81711 15 2 10 3 51
ASE_00335 0.72 0.66 0.78 76 75369 33 6 15 12 40
ASE_00337 0.35 0.24 0.50 17 39306 24 2 15 7 54
ASE_00338 0.31 0.19 0.50 19 66392 21 2 17 2 79
ASE_00339 0.44 0.34 0.58 40 80131 37 3 26 8 79
ASE_00340 0.51 0.45 0.59 38 45992 31 3 23 5 47
ASE_00342 0.81 0.72 0.91 83 62390 11 3 5 3 32
ASE_00343 0.27 0.20 0.35 23 83371 49 4 38 7 90
ASE_00346 0.61 0.49 0.75 48 48141 18 2 14 2 49
ASE_00353 0.69 0.56 0.86 60 57900 13 1 9 3 47
ASE_00359 0.37 0.26 0.51 21 42737 24 1 19 4 59
ASE_00360 0.78 0.63 0.98 41 29361 2 0 1 1 24
ASE_00361 0.66 0.46 0.94 59 75403 7 1 3 3 68
ASE_00362 0.76 0.66 0.88 60 48137 12 2 6 4 31
ASE_00363 0.77 0.63 0.94 59 51297 7 1 3 3 35
ASE_00364 0.70 0.57 0.87 60 54216 12 1 8 3 45
ASE_00366 0.58 0.48 0.70 47 58586 23 6 14 3 51
ASE_00367 0.79 0.71 0.88 61 43002 11 2 6 3 25
ASE_00369 0.71 0.58 0.86 62 55873 13 1 9 3 45
ASE_00370 0.81 0.71 0.92 60 41840 8 1 4 3 24
ASE_00372 0.57 0.45 0.71 45 51940 21 2 16 3 55
ASE_00374 0.79 0.68 0.91 60 44784 9 2 4 3 28
ASE_00375 0.50 0.39 0.64 43 60311 26 1 23 2 67
ASE_00376 0.65 0.55 0.76 58 56877 21 2 16 3 47
ASE_00377 0.72 0.58 0.89 62 57560 11 1 7 3 45
ASE_00379 0.76 0.66 0.87 59 45988 12 2 7 3 30
ASE_00380 0.51 0.40 0.65 40 54884 24 1 21 2 59
ASE_00382 0.79 0.71 0.88 60 41837 11 2 6 3 24
ASE_00383 0.78 0.67 0.91 70 54538 10 2 5 3 35
ASE_00384 0.72 0.61 0.85 56 48450 13 1 9 3 36
ASE_00385 0.55 0.47 0.64 38 41846 24 3 18 3 43
ASE_00386 0.75 0.61 0.92 59 50339 8 1 4 3 37
ASE_00387 0.60 0.50 0.71 52 55872 25 2 19 4 52
ASE_00388 0.74 0.64 0.85 57 45686 14 2 8 4 32
ASE_00390 0.78 0.68 0.89 58 42130 10 2 5 3 27
ASE_00393 0.68 0.57 0.82 53 47830 15 1 11 3 40
ASE_00394 0.73 0.62 0.87 58 46904 12 1 8 3 35
ASE_00395 0.82 0.71 0.94 60 41552 7 1 3 3 24
ASE_00396 0.75 0.66 0.85 55 41551 12 2 8 2 28
ASE_00397 0.74 0.61 0.90 64 54544 10 2 5 3 41
ASE_00398 0.65 0.52 0.82 54 55879 15 0 12 3 50
ASE_00400 0.45 0.37 0.56 39 57900 33 2 29 2 67
ASE_00401 0.55 0.40 0.76 51 76961 19 0 16 3 75
ASE_00402 0.83 0.74 0.94 63 42419 7 1 3 3 22
ASE_00403 0.71 0.57 0.90 61 55877 10 1 6 3 46
ASE_00404 0.78 0.67 0.90 57 43008 10 2 4 4 28
ASE_00406 0.79 0.68 0.93 64 48759 8 2 3 3 30
ASE_00411 0.59 0.48 0.72 43 49395 20 2 15 3 46
ASE_00412 0.55 0.42 0.72 44 58250 20 1 16 3 61
ASE_00413 0.68 0.57 0.82 46 44495 14 1 9 4 35
ASE_00414 0.19 0.16 0.24 15 46298 48 3 44 1 80
ASE_00415 0.39 0.31 0.48 32 54880 36 3 31 2 71
ASE_00416 0.69 0.60 0.80 76 77326 23 3 16 4 51
ASE_00417 0.78 0.63 0.95 63 54549 5 0 3 2 37
ASE_00418 0.71 0.55 0.91 41 38736 6 0 4 2 34
ASE_00419 0.59 0.49 0.72 50 54877 20 3 16 1 53
ASE_00420 0.16 0.11 0.23 7 43335 29 5 18 6 56
ASE_00422 0.58 0.49 0.69 46 46904 24 3 18 3 48
ASE_00423 0.81 0.72 0.90 79 56865 13 3 6 4 30
ASE_00426 0.42 0.36 0.48 39 60994 42 3 39 0 69
ASE_00427 0.56 0.41 0.76 19 40730 18 1 5 12 27
ASE_00428 0.69 0.60 0.80 75 76542 22 5 14 3 50
ASE_00430 0.55 0.45 0.68 44 46906 24 1 20 3 53
ASE_00431 0.27 0.22 0.34 21 46299 40 8 32 0 74
ASE_00434 0.62 0.55 0.71 60 68180 34 5 20 9 50
ASE_00437 0.58 0.50 0.69 67 79304 33 2 28 3 68
ASE_00438 0.41 0.32 0.54 37 65997 33 6 26 1 79
ASE_00441 0.32 0.24 0.43 27 64198 40 4 32 4 85
ASE_00443 0.15 0.08 0.27 4 26781 18 0 11 7 46
ASE_00447 0.80 0.72 0.90 83 60286 12 2 7 3 33
ASE_00448 0.80 0.72 0.88 81 64169 14 2 9 3 31
ASE_00451 0.77 0.66 0.88 83 70782 14 2 9 3 42
ASE_00454 0.05 0.03 0.09 2 43342 25 1 20 4 61
CRW_00013 0.33 0.21 0.53 24 103695 23 4 17 2 91
CRW_00016 0.31 0.19 0.51 23 77376 24 7 15 2 97
CRW_00610 0.16 0.09 0.32 7 36293 15 1 14 0 74
CRW_00613 0.00 0.00 0.00 0 34956 24 7 17 0 78
CRW_00614 0.00 0.00 0.00 0 121749 22 4 18 0 57
CRW_00618 0.18 0.10 0.32 6 56261 13 1 12 0 55
CRW_00619 0.00 0.00 0.00 0 165006 19 2 17 0 73
CRW_00620 0.00 0.00 0.00 0 150963 16 0 12 4 63
CRW_00621 0.00 0.00 0.00 0 153149 34 7 25 2 71
CRW_00623 0.00 0.00 0.00 0 129785 17 1 9 7 83
CRW_00633 0.45 0.27 0.74 29 63507 14 0 10 4 77
CRW_00634 0.47 0.30 0.74 28 64582 18 0 10 8 66
CRW_00670 0.47 0.26 0.86 31 70089 7 0 5 2 89
CRW_00671 0.56 0.37 0.84 43 62784 10 0 8 2 74
CRW_00672 0.43 0.28 0.67 31 72344 17 0 15 2 80
CRW_00674 0.22 0.14 0.37 17 83390 29 5 24 0 107
CRW_00676 0.03 0.02 0.07 2 93500 31 4 22 5 113
CRW_00692 0.03 0.01 0.06 1 68619 22 0 15 7 89
PDB_00827 0.00 0.00 0.00 0 27011 17 1 16 0 81
PDB_00919 0.27 0.21 0.35 22 44191 40 3 37 0 81
RFA_00597 0.71 0.66 0.76 72 97808 43 8 15 20 37
RFA_00598 0.72 0.68 0.77 69 84576 40 5 16 19 32
RFA_00599 0.54 0.51 0.57 57 101375 62 5 38 19 54
RFA_00600 0.53 0.49 0.57 49 120209 62 10 27 25 51
RFA_00601 0.74 0.73 0.75 83 99124 49 4 24 21 31
RFA_00602 0.69 0.68 0.69 79 101361 50 5 30 15 37
RFA_00606 0.53 0.51 0.56 20 21285 25 4 12 9 19
RFA_00620 0.20 0.18 0.23 7 21915 33 7 16 10 32
RFA_00621 0.34 0.18 0.64 14 46338 14 0 8 6 62
RFA_00623 0.42 0.23 0.75 18 43932 10 1 5 4 60
RFA_00624 0.27 0.18 0.39 11 30107 20 0 17 3 50
RFA_00626 0.89 0.87 0.92 76 56533 29 2 5 22 11
RFA_00627 0.83 0.79 0.87 69 56874 36 1 9 26 18
RFA_00628 0.85 0.81 0.89 70 57212 38 2 7 29 16
RFA_00630 0.82 0.78 0.86 68 56874 33 2 9 22 19
RFA_00639 0.31 0.31 0.31 27 54527 69 10 51 8 60
RFA_00805 0.78 0.72 0.84 108 133257 31 1 20 10 42
RFA_00814 0.95 0.93 0.97 38 25161 22 0 1 21 3
RFA_00815 0.96 0.93 1.00 38 24493 15 0 0 15 3
RFA_00816 0.96 0.93 1.00 38 23182 15 0 0 15 3
RFA_00817 0.94 0.88 1.00 36 21909 12 0 0 12 5
RFA_00818 0.64 0.68 0.61 28 20255 30 11 7 12 13
RFA_00819 0.94 0.90 0.97 37 27928 26 0 1 25 4
RFA_00820 0.88 0.88 0.87 141 151363 51 0 21 30 19
RFA_00830 0.61 0.59 0.63 91 152484 92 2 51 39 63
SRP_00002 0.84 0.82 0.87 84 45053 19 0 13 6 18
SRP_00006 0.84 0.82 0.86 83 45657 22 0 13 9 18
SRP_00009 0.82 0.80 0.83 82 46566 28 0 17 11 20
SRP_00011 0.77 0.77 0.78 80 46257 31 0 23 8 24
SRP_00012 0.86 0.84 0.89 85 46264 26 0 11 15 16
SRP_00015 0.87 0.85 0.89 84 46266 25 0 10 15 15
SRP_00016 0.92 0.89 0.95 97 47793 15 0 5 10 12
SRP_00018 0.84 0.74 0.95 60 38440 16 0 3 13 21
SRP_00019 0.76 0.65 0.88 59 35979 18 0 8 10 32
SRP_00024 0.81 0.75 0.88 65 37601 13 0 9 4 22
SRP_00026 0.80 0.73 0.88 64 36783 15 0 9 6 24
SRP_00027 0.83 0.76 0.90 66 37055 14 0 7 7 21
SRP_00030 0.84 0.78 0.91 69 36780 11 0 7 4 19
SRP_00031 0.84 0.78 0.91 69 36239 11 0 7 4 20
SRP_00037 0.84 0.77 0.92 67 36512 13 0 6 7 20
SRP_00050 0.92 0.91 0.94 90 44754 20 0 6 14 9
SRP_00053 0.89 0.87 0.90 82 45059 25 0 9 16 12
SRP_00060 0.93 0.91 0.95 91 44455 15 0 5 10 9
SRP_00061 0.93 0.91 0.95 91 44754 15 0 5 10 9
SRP_00066 0.85 0.83 0.86 83 45355 25 0 13 12 17
SRP_00069 0.66 0.58 0.77 49 34389 25 3 12 10 36
SRP_00070 0.45 0.37 0.55 45 126674 45 7 30 8 76
SRP_00073 0.66 0.61 0.72 43 39000 31 4 13 14 28
SRP_00079 0.68 0.66 0.71 58 41823 39 0 24 15 30
SRP_00085 0.81 0.79 0.82 80 45354 30 0 17 13 21
SRP_00086 0.91 0.90 0.93 90 44156 17 0 7 10 10
SRP_00087 0.32 0.34 0.31 20 37336 53 16 29 8 38
SRP_00088 0.77 0.69 0.86 61 34120 13 1 9 3 28
SRP_00089 0.80 0.73 0.88 66 35703 13 1 8 4 24
SRP_00090 0.78 0.71 0.86 64 35437 14 1 9 4 26
SRP_00091 0.59 0.48 0.73 46 52912 29 3 14 12 49
SRP_00099 0.55 0.56 0.55 53 44753 48 3 41 4 42
SRP_00102 0.90 0.88 0.93 89 44455 16 0 7 9 12
SRP_00103 0.91 0.89 0.92 91 45352 17 0 8 9 11
SRP_00104 0.53 0.49 0.57 34 34393 37 5 21 11 35
SRP_00117 0.81 0.78 0.83 80 45355 24 0 16 8 22
SRP_00123 0.78 0.76 0.81 69 36500 24 3 13 8 22
SRP_00124 0.60 0.55 0.64 47 37055 30 6 20 4 38
SRP_00127 0.55 0.42 0.71 50 72320 24 3 17 4 69
SRP_00130 0.74 0.70 0.77 68 49682 35 1 19 15 29
SRP_00136 0.57 0.54 0.61 38 44191 37 9 15 13 33
SRP_00142 0.89 0.87 0.90 81 45966 25 0 9 16 12
SRP_00143 0.84 0.83 0.85 84 49671 26 0 15 11 17
SRP_00144 0.87 0.86 0.87 81 46572 28 0 12 16 13
SRP_00148 0.60 0.51 0.72 44 50025 27 0 17 10 43
SRP_00152 0.88 0.86 0.89 89 45653 21 0 11 10 14
SRP_00153 0.86 0.85 0.88 91 46867 22 0 13 9 16
SRP_00157 0.56 0.53 0.60 38 44190 39 5 20 14 34
SRP_00158 0.25 0.18 0.35 21 124191 44 8 31 5 94
SRP_00160 0.42 0.32 0.54 42 86242 46 0 36 10 88
SRP_00171 0.83 0.83 0.84 73 45364 36 0 14 22 15
SRP_00173 0.78 0.70 0.86 63 38153 15 0 10 5 27
SRP_00174 0.77 0.71 0.84 61 38708 15 0 12 3 25
SRP_00175 0.58 0.49 0.69 41 44492 33 2 16 15 43
SRP_00178 0.89 0.88 0.89 90 45652 23 0 11 12 12
SRP_00179 0.87 0.86 0.88 90 45954 23 0 12 11 15
SRP_00181 0.80 0.79 0.80 81 45955 30 0 20 10 21
SRP_00182 0.84 0.83 0.85 84 45957 25 0 15 10 17
SRP_00184 0.78 0.77 0.79 77 45958 34 0 21 13 23
SRP_00188 0.54 0.51 0.58 40 31056 32 7 22 3 39
SRP_00197 0.92 0.90 0.94 91 49358 24 0 6 18 10
SRP_00198 0.90 0.87 0.92 90 50942 24 0 8 16 13
SRP_00199 0.89 0.88 0.91 92 50939 21 0 9 12 13
SRP_00201 0.94 0.93 0.96 103 47788 11 0 4 7 8
SRP_00202 0.89 0.85 0.93 100 54178 16 0 7 9 17
SRP_00203 0.83 0.83 0.83 87 48723 25 0 18 7 18
SRP_00204 0.87 0.85 0.88 87 49042 25 0 12 13 15
SRP_00206 0.94 0.93 0.96 100 47791 14 0 4 10 8
SRP_00208 0.91 0.88 0.95 89 46571 20 0 5 15 12
SRP_00228 0.89 0.87 0.90 83 45359 23 0 9 14 12
SRP_00230 0.68 0.57 0.81 51 39558 23 3 9 11 39
SRP_00234 0.84 0.76 0.93 65 36245 14 0 5 9 21
SRP_00239 0.49 0.52 0.48 48 50302 62 6 47 9 45
SRP_00240 0.76 0.75 0.77 77 48105 33 3 20 10 25
SRP_00241 0.50 0.51 0.49 42 45970 54 8 36 10 40
SRP_00247 0.51 0.54 0.49 47 47182 55 8 41 6 40
SRP_00252 0.65 0.63 0.67 56 49057 40 2 26 12 33
SRP_00253 0.62 0.62 0.62 56 49364 48 5 30 13 34
SRP_00254 0.35 0.36 0.34 22 32321 49 10 32 7 39
SRP_00255 0.74 0.76 0.73 71 47489 40 1 25 14 23
SRP_00257 0.62 0.55 0.69 59 50955 29 4 22 3 49
SRP_00260 0.50 0.47 0.53 47 47806 44 6 36 2 53
SRP_00265 0.63 0.59 0.68 43 41265 35 7 13 15 30
SRP_00267 0.89 0.89 0.90 85 44457 21 0 9 12 11
SRP_00276 0.93 0.91 0.94 100 50615 13 0 6 7 10
SRP_00278 0.73 0.69 0.77 72 45963 26 0 21 5 33
SRP_00282 0.27 0.32 0.23 20 43279 76 19 47 10 43
SRP_00286 0.51 0.36 0.71 63 136937 37 1 25 11 111
SRP_00287 0.48 0.35 0.65 57 141690 43 2 29 12 105
SRP_00290 0.48 0.35 0.65 47 100504 36 2 23 11 88
SRP_00292 0.50 0.36 0.70 62 137461 38 1 26 11 111
SRP_00294 0.60 0.45 0.82 75 129194 27 1 16 10 92
SRP_00299 0.78 0.77 0.80 76 44158 28 0 19 9 23
SRP_00300 0.88 0.86 0.90 81 44163 23 0 9 14 13
SRP_00301 0.58 0.47 0.73 40 32585 26 2 13 11 46
SRP_00302 0.51 0.44 0.58 36 41554 39 3 23 13 45
SRP_00308 0.82 0.73 0.91 64 36245 15 0 6 9 24
SRP_00317 0.89 0.87 0.92 85 45058 22 0 7 15 13
SRP_00321 0.76 0.75 0.78 81 47482 30 0 23 7 27
SRP_00322 0.79 0.75 0.83 82 48417 26 0 17 9 27
SRP_00323 0.85 0.83 0.87 89 47176 22 0 13 9 18
SRP_00328 0.64 0.60 0.69 51 39547 31 4 19 8 34
SRP_00329 0.63 0.60 0.65 51 39825 35 4 23 8 34
SRP_00330 0.80 0.80 0.81 76 49992 29 2 16 11 19
SRP_00331 0.55 0.48 0.64 42 37609 30 1 23 6 45
SRP_00332 0.95 0.93 0.97 99 50301 15 0 3 12 7
SRP_00335 0.35 0.44 0.29 17 35186 58 21 21 16 22
SRP_00337 0.78 0.71 0.84 65 35434 14 1 11 2 26
SRP_00339 0.78 0.78 0.78 73 44458 27 4 16 7 21
SRP_00340 0.58 0.56 0.60 46 41251 43 4 27 12 36
SRP_00347 0.93 0.93 0.94 89 46570 18 0 6 12 7
SRP_00361 0.77 0.77 0.77 69 41815 33 5 16 12 21
SRP_00368 0.90 0.88 0.92 86 43863 19 0 7 12 12
SRP_00371 0.76 0.71 0.82 58 36244 22 2 11 9 24
SRP_00382 0.53 0.38 0.74 64 141691 31 0 23 8 106
TMR_00173 0.41 0.31 0.54 13 42171 18 2 9 7 29
TMR_00357 0.19 0.13 0.28 12 82985 38 4 27 7 80
TMR_00601 0.67 0.62 0.72 26 58960 30 1 9 20 16
TMR_00603 0.78 0.70 0.88 30 60344 30 0 4 26 13
TMR_00611 0.48 0.35 0.65 36 61370 19 4 15 0 66
TMR_00696 0.35 0.25 0.51 28 85023 34 3 24 7 86

^top



Performance of MaxExpect - scored lower in this pairwise comparison

1. Total counts & total scores for MaxExpect

Total Base Pair Counts
Total TP 25051
Total TN 25237094
Total FP 18864
Total FP CONTRA 2151
Total FP INCONS 13448
Total FP COMP 3265
Total FN 18042
Total Scores
MCC 0.598
Average MCC ± 95% Confidence Intervals 0.592 ± 0.017
Sensitivity 0.581
Positive Predictive Value 0.616
Nr of predictions 431

^top



2. Individual counts for MaxExpect [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.63 0.61 0.66 46 34121 30 2 22 6 29
ASE_00002 0.71 0.67 0.74 49 35445 20 2 15 3 24
ASE_00004 0.71 0.69 0.74 67 47804 25 9 15 1 30
ASE_00005 0.66 0.57 0.75 67 57881 28 0 22 6 50
ASE_00006 0.55 0.55 0.55 51 47494 47 10 31 6 42
ASE_00007 0.73 0.68 0.79 75 59590 27 0 20 7 35
ASE_00009 0.36 0.34 0.38 23 26045 39 4 34 1 44
ASE_00010 0.79 0.78 0.80 64 49690 30 3 13 14 18
ASE_00012 0.50 0.44 0.57 54 73825 45 2 39 4 69
ASE_00014 0.42 0.42 0.44 44 54184 65 2 55 8 62
ASE_00017 0.18 0.20 0.16 13 50959 82 24 44 14 51
ASE_00018 0.54 0.51 0.57 69 80479 55 1 52 2 65
ASE_00020 0.60 0.57 0.64 72 73807 43 6 35 2 54
ASE_00021 0.60 0.54 0.68 86 104069 48 4 37 7 74
ASE_00022 0.49 0.45 0.54 56 82924 54 4 44 6 68
ASE_00023 0.66 0.65 0.68 82 84134 42 5 34 3 45
ASE_00025 0.28 0.30 0.27 21 78529 108 9 47 52 50
ASE_00026 0.56 0.52 0.60 57 59590 43 2 36 5 53
ASE_00028 0.72 0.69 0.76 87 84551 37 5 23 9 39
ASE_00029 0.60 0.56 0.64 68 82922 40 5 33 2 54
ASE_00030 0.64 0.60 0.69 87 85365 40 3 36 1 58
ASE_00031 0.72 0.68 0.76 86 86623 35 1 26 8 40
ASE_00032 0.56 0.55 0.57 65 80086 55 7 42 6 53
ASE_00033 0.33 0.30 0.38 36 64885 61 3 56 2 85
ASE_00035 0.39 0.36 0.42 42 70400 65 4 54 7 76
ASE_00036 0.51 0.48 0.53 64 75734 60 8 49 3 68
ASE_00037 0.45 0.40 0.50 44 59252 47 0 44 3 66
ASE_00038 0.75 0.70 0.81 71 53540 25 2 15 8 30
ASE_00040 0.53 0.50 0.56 66 78886 58 3 48 7 67
ASE_00041 0.45 0.42 0.48 45 57536 52 4 45 3 63
ASE_00042 0.48 0.46 0.52 66 89972 66 2 60 4 79
ASE_00044 0.74 0.73 0.74 77 54511 32 4 23 5 28
ASE_00045 0.65 0.65 0.66 52 47199 34 6 21 7 28
ASE_00046 0.66 0.57 0.76 59 50325 21 0 19 2 44
ASE_00047 0.59 0.56 0.61 73 74186 47 2 44 1 57
ASE_00052 0.59 0.52 0.67 58 61338 35 3 26 6 54
ASE_00053 0.63 0.59 0.68 79 79284 44 3 35 6 54
ASE_00057 0.61 0.60 0.61 81 82082 56 8 44 4 53
ASE_00064 0.39 0.39 0.38 35 45359 64 6 51 7 54
ASE_00066 0.54 0.52 0.58 67 72274 51 1 48 2 63
ASE_00068 0.62 0.56 0.69 48 37605 27 2 20 5 37
ASE_00069 0.66 0.62 0.70 87 82903 41 5 33 3 53
ASE_00074 0.52 0.51 0.54 61 67782 55 4 49 2 58
ASE_00075 0.69 0.63 0.75 102 108675 41 2 32 7 60
ASE_00076 0.51 0.49 0.53 58 68156 54 2 49 3 60
ASE_00077 0.56 0.53 0.58 46 45071 39 4 29 6 40
ASE_00078 0.72 0.66 0.79 55 43001 20 1 14 5 28
ASE_00079 0.54 0.51 0.57 51 55522 39 2 36 1 49
ASE_00080 0.57 0.54 0.60 66 71521 49 6 38 5 57
ASE_00081 0.79 0.71 0.87 69 49691 11 1 9 1 28
ASE_00082 0.80 0.73 0.88 85 70403 25 0 12 13 31
ASE_00083 0.73 0.68 0.78 75 62385 26 2 19 5 35
ASE_00084 0.78 0.75 0.82 74 53538 21 1 15 5 25
ASE_00087 0.70 0.65 0.77 93 88289 34 1 27 6 51
ASE_00090 0.67 0.67 0.67 68 55509 41 4 30 7 33
ASE_00092 0.76 0.71 0.81 80 63447 23 3 16 4 33
ASE_00096 0.47 0.45 0.50 52 63442 53 4 48 1 63
ASE_00099 0.77 0.70 0.86 84 64522 19 0 14 5 36
ASE_00100 0.32 0.32 0.32 24 82141 105 5 45 55 52
ASE_00102 0.56 0.51 0.62 85 117718 56 5 47 4 81
ASE_00104 0.70 0.66 0.76 78 64158 28 2 23 3 41
ASE_00105 0.44 0.41 0.47 45 64166 58 6 44 8 66
ASE_00107 0.74 0.69 0.79 88 73041 26 1 23 2 39
ASE_00108 0.49 0.49 0.49 31 46908 62 3 29 30 32
ASE_00111 0.26 0.28 0.25 16 50022 66 11 37 18 41
ASE_00112 0.74 0.72 0.77 83 75358 33 4 21 8 33
ASE_00114 0.53 0.48 0.60 37 45389 38 2 23 13 40
ASE_00115 0.70 0.68 0.72 69 54519 35 4 23 8 32
ASE_00116 0.32 0.30 0.34 20 31567 42 4 35 3 46
ASE_00118 0.49 0.47 0.51 48 60632 49 3 43 3 54
ASE_00119 0.82 0.81 0.83 87 62730 20 2 16 2 21
ASE_00120 0.59 0.54 0.65 51 46892 30 3 25 2 43
ASE_00121 0.25 0.25 0.25 23 45059 70 6 62 2 69
ASE_00122 0.69 0.64 0.76 56 43291 18 0 18 0 32
ASE_00123 0.53 0.51 0.56 43 38426 39 2 32 5 42
ASE_00125 0.72 0.66 0.79 58 39267 23 0 15 8 30
ASE_00128 0.75 0.71 0.80 71 53212 26 1 17 8 29
ASE_00129 0.72 0.69 0.75 77 62733 30 3 22 5 34
ASE_00131 0.63 0.59 0.67 50 39265 33 1 24 8 35
ASE_00132 0.68 0.64 0.72 61 50318 28 4 20 4 34
ASE_00134 0.40 0.41 0.40 39 50305 62 8 51 3 56
ASE_00135 0.66 0.63 0.68 69 63089 39 1 31 7 40
ASE_00136 0.80 0.76 0.83 70 48121 22 0 14 8 22
ASE_00137 0.65 0.62 0.67 61 48425 35 1 29 5 37
ASE_00138 0.62 0.59 0.64 48 40395 29 7 20 2 33
ASE_00139 0.63 0.58 0.69 60 54198 33 0 27 6 44
ASE_00140 0.69 0.64 0.75 80 70770 29 4 22 3 45
ASE_00142 0.69 0.65 0.74 79 67054 32 3 25 4 43
ASE_00145 0.58 0.57 0.59 63 70018 48 4 40 4 48
ASE_00146 0.63 0.57 0.69 71 70773 35 1 31 3 53
ASE_00148 0.71 0.69 0.72 107 112427 45 3 38 4 47
ASE_00151 0.71 0.66 0.76 65 51917 27 5 16 6 33
ASE_00153 0.57 0.59 0.54 43 57551 71 8 28 35 30
ASE_00154 0.58 0.58 0.58 62 65234 49 4 41 4 45
ASE_00155 0.53 0.51 0.54 73 93394 64 10 51 3 69
ASE_00161 0.36 0.36 0.36 31 53543 59 8 46 5 56
ASE_00163 0.32 0.30 0.33 28 53217 64 4 52 8 65
ASE_00165 0.45 0.45 0.46 45 52878 53 5 47 1 56
ASE_00168 0.18 0.22 0.15 14 60630 98 28 54 16 50
ASE_00169 0.47 0.40 0.54 43 57212 40 1 35 4 64
ASE_00170 0.72 0.68 0.77 63 48746 25 2 17 6 30
ASE_00171 0.72 0.70 0.74 66 48427 24 6 17 1 28
ASE_00172 0.73 0.69 0.78 73 58902 27 1 20 6 33
ASE_00174 0.50 0.49 0.51 53 60972 52 8 42 2 56
ASE_00175 0.70 0.66 0.73 71 59934 32 2 24 6 36
ASE_00176 0.61 0.55 0.68 61 59941 32 4 25 3 49
ASE_00179 0.58 0.57 0.59 48 44171 34 5 29 0 36
ASE_00180 0.70 0.68 0.73 68 51267 30 7 18 5 32
ASE_00181 0.70 0.64 0.76 68 57540 27 3 19 5 38
ASE_00182 0.60 0.58 0.61 79 84126 53 5 45 3 57
ASE_00183 0.71 0.67 0.75 76 61324 31 0 25 6 37
ASE_00184 0.72 0.71 0.73 72 54516 30 1 26 3 30
ASE_00185 0.75 0.70 0.81 90 73425 27 1 20 6 38
ASE_00186 0.67 0.62 0.72 82 78889 39 3 29 7 50
ASE_00187 0.40 0.38 0.43 44 68532 66 6 53 7 71
ASE_00189 0.67 0.65 0.69 66 63095 34 1 28 5 36
ASE_00190 0.60 0.57 0.63 51 45370 35 3 27 5 39
ASE_00191 0.52 0.51 0.53 31 29587 33 2 26 5 30
ASE_00192 0.51 0.47 0.55 63 84552 57 6 45 6 70
ASE_00194 0.48 0.45 0.50 54 73428 58 8 46 4 65
ASE_00196 0.78 0.77 0.79 58 31553 19 2 13 4 17
ASE_00197 0.60 0.57 0.64 82 89125 52 2 44 6 63
ASE_00198 0.84 0.77 0.91 79 52563 14 2 6 6 23
ASE_00203 0.72 0.70 0.75 67 46576 28 4 18 6 29
ASE_00204 0.66 0.62 0.70 69 67798 34 6 23 5 43
ASE_00205 0.62 0.62 0.62 56 45965 39 7 28 4 34
ASE_00209 0.40 0.39 0.43 34 42991 46 5 41 0 54
ASE_00210 0.65 0.66 0.64 43 27194 24 6 18 0 22
ASE_00212 0.61 0.57 0.65 84 93832 50 1 44 5 64
ASE_00213 0.72 0.71 0.73 47 27197 20 3 14 3 19
ASE_00214 0.80 0.78 0.82 80 56182 27 3 15 9 23
ASE_00215 0.60 0.58 0.63 57 48425 38 5 29 4 42
ASE_00216 0.55 0.54 0.56 44 39262 35 9 25 1 38
ASE_00217 0.38 0.34 0.41 31 40395 49 5 39 5 59
ASE_00221 0.63 0.56 0.71 65 64529 30 1 25 4 52
ASE_00222 0.58 0.56 0.60 88 111955 58 4 54 0 69
ASE_00227 0.56 0.54 0.58 72 78879 52 7 45 0 61
ASE_00228 0.53 0.53 0.53 46 46885 42 11 29 2 40
ASE_00229 0.73 0.69 0.78 60 42409 23 1 16 6 27
ASE_00231 0.62 0.59 0.64 57 47806 35 4 28 3 39
ASE_00232 0.65 0.65 0.65 55 38419 32 10 19 3 29
ASE_00234 0.60 0.55 0.66 71 75358 43 2 35 6 58
ASE_00237 0.00 0.00 0.00 0 45677 93 28 48 17 56
ASE_00238 0.71 0.66 0.77 75 64163 29 2 21 6 39
ASE_00240 0.68 0.65 0.72 60 46582 29 1 22 6 33
ASE_00241 0.57 0.54 0.61 47 43879 35 1 29 5 40
ASE_00242 0.63 0.60 0.67 67 60975 34 1 32 1 45
ASE_00245 0.90 0.86 0.94 67 55207 36 0 4 32 11
ASE_00246 0.36 0.37 0.36 25 48135 68 14 31 23 42
ASE_00247 0.62 0.63 0.63 40 54221 65 7 17 41 24
ASE_00248 0.40 0.36 0.44 41 62388 53 2 50 1 73
ASE_00250 0.64 0.58 0.70 76 78894 37 0 33 4 55
ASE_00252 0.60 0.57 0.63 95 115289 64 2 54 8 73
ASE_00254 0.38 0.35 0.41 29 36786 46 5 36 5 53
ASE_00255 0.56 0.54 0.59 70 74572 52 4 45 3 60
ASE_00257 0.58 0.56 0.61 54 50951 41 3 32 6 43
ASE_00258 0.78 0.78 0.78 42 26742 18 7 5 6 12
ASE_00259 0.49 0.42 0.57 51 73063 42 3 36 3 70
ASE_00263 0.69 0.68 0.71 81 70386 35 3 30 2 39
ASE_00264 0.54 0.51 0.58 51 49053 48 1 36 11 49
ASE_00267 0.66 0.61 0.70 54 45073 32 1 22 9 34
ASE_00270 0.81 0.78 0.84 100 72271 24 1 18 5 28
ASE_00274 0.62 0.57 0.68 59 55524 30 5 23 2 44
ASE_00277 0.43 0.43 0.42 39 48113 55 9 44 2 52
ASE_00279 0.49 0.48 0.51 48 53207 48 7 39 2 53
ASE_00280 0.51 0.49 0.54 48 51914 45 8 33 4 50
ASE_00281 0.73 0.69 0.76 61 44471 28 0 19 9 27
ASE_00282 0.44 0.44 0.45 56 77690 69 5 64 0 71
ASE_00283 0.75 0.72 0.79 77 61678 27 3 18 6 30
ASE_00284 0.68 0.66 0.71 71 58211 37 4 25 8 37
ASE_00285 0.80 0.75 0.86 92 68899 25 3 12 10 30
ASE_00286 0.40 0.38 0.42 35 46581 58 2 47 9 57
ASE_00287 0.72 0.68 0.76 70 54854 28 2 20 6 33
ASE_00288 0.32 0.31 0.33 29 45967 62 6 54 2 64
ASE_00289 0.60 0.54 0.66 85 100897 47 3 40 4 72
ASE_00292 0.47 0.43 0.52 60 81694 59 1 55 3 78
ASE_00294 0.73 0.66 0.81 113 114342 31 0 26 5 58
ASE_00295 0.62 0.54 0.70 71 73819 33 3 27 3 60
ASE_00296 0.44 0.41 0.47 59 91680 69 7 60 2 86
ASE_00297 0.75 0.72 0.77 71 52883 24 3 18 3 27
ASE_00298 0.52 0.50 0.54 56 67425 50 1 46 3 57
ASE_00299 0.55 0.54 0.57 54 49360 45 3 38 4 46
ASE_00303 0.61 0.62 0.60 59 67797 51 9 31 11 36
ASE_00305 0.65 0.60 0.70 51 54542 33 1 21 11 34
ASE_00313 0.66 0.67 0.64 60 62387 55 9 25 21 29
ASE_00316 0.57 0.54 0.60 53 107791 74 4 32 38 45
ASE_00318 0.64 0.63 0.65 74 80087 44 14 25 5 44
ASE_00321 0.71 0.65 0.78 57 54542 22 1 15 6 31
ASE_00327 0.79 0.76 0.82 68 57208 34 5 10 19 21
ASE_00328 0.67 0.63 0.73 70 72675 40 4 22 14 42
ASE_00329 0.64 0.68 0.60 43 40683 52 8 21 23 20
ASE_00330 0.64 0.66 0.62 59 56185 51 6 30 15 31
ASE_00332 0.51 0.49 0.54 68 81683 62 2 57 3 70
ASE_00335 0.62 0.58 0.66 67 75364 42 6 29 7 49
ASE_00337 0.39 0.41 0.38 29 39263 60 5 43 12 42
ASE_00338 0.68 0.63 0.74 62 66346 38 3 19 16 36
ASE_00339 0.64 0.59 0.70 70 80100 37 2 28 7 49
ASE_00340 0.74 0.74 0.73 63 45970 27 7 16 4 22
ASE_00342 0.62 0.58 0.67 67 62381 34 1 32 1 48
ASE_00343 0.68 0.68 0.69 77 83324 49 8 27 14 36
ASE_00346 0.43 0.41 0.45 40 48117 56 4 44 8 57
ASE_00353 0.57 0.57 0.58 61 57864 49 4 41 4 46
ASE_00359 0.25 0.24 0.26 19 42704 55 5 50 0 61
ASE_00360 0.29 0.28 0.31 18 29344 46 9 32 5 47
ASE_00361 0.54 0.53 0.56 67 75347 55 10 42 3 60
ASE_00362 0.58 0.58 0.58 53 48114 41 2 36 3 38
ASE_00363 0.58 0.55 0.60 52 51274 41 2 32 7 42
ASE_00364 0.74 0.70 0.78 74 54190 29 1 20 8 31
ASE_00366 0.41 0.42 0.41 41 58553 60 6 53 1 57
ASE_00367 0.55 0.51 0.59 44 42997 38 1 29 8 42
ASE_00369 0.63 0.63 0.64 67 55841 39 1 36 2 40
ASE_00370 0.77 0.73 0.82 61 41831 22 1 12 9 23
ASE_00372 0.68 0.65 0.71 65 51911 33 5 22 6 35
ASE_00374 0.72 0.72 0.72 63 44763 26 3 21 2 25
ASE_00375 0.83 0.78 0.88 86 60280 19 1 11 7 24
ASE_00376 0.67 0.64 0.71 67 56858 30 1 27 2 38
ASE_00377 0.73 0.70 0.76 75 57531 30 3 21 6 32
ASE_00379 0.60 0.56 0.63 50 45977 39 3 26 10 39
ASE_00380 0.70 0.67 0.74 66 54857 28 6 17 5 33
ASE_00382 0.67 0.65 0.70 55 41826 29 6 18 5 29
ASE_00383 0.46 0.42 0.50 44 54527 47 3 41 3 61
ASE_00384 0.61 0.59 0.63 54 48430 37 2 30 5 38
ASE_00385 0.51 0.51 0.53 41 41827 41 12 25 4 40
ASE_00386 0.54 0.51 0.57 49 50317 39 7 30 2 47
ASE_00387 0.70 0.66 0.73 69 55851 30 1 24 5 35
ASE_00388 0.61 0.55 0.67 49 45680 34 1 23 10 40
ASE_00390 0.62 0.60 0.64 51 42115 39 0 29 10 34
ASE_00393 0.48 0.46 0.51 43 47810 49 2 40 7 50
ASE_00394 0.78 0.76 0.80 71 46882 23 2 16 5 22
ASE_00395 0.67 0.65 0.68 55 41535 32 2 24 6 29
ASE_00396 0.55 0.52 0.58 43 41542 36 2 29 5 40
ASE_00397 0.58 0.56 0.60 59 54517 43 4 35 4 46
ASE_00398 0.62 0.58 0.66 60 55854 39 1 30 8 44
ASE_00400 0.66 0.63 0.70 67 57874 34 1 28 5 39
ASE_00401 0.65 0.63 0.67 79 76910 40 5 34 1 47
ASE_00402 0.73 0.68 0.77 58 42411 22 2 15 5 27
ASE_00403 0.45 0.42 0.47 45 55850 54 1 49 4 62
ASE_00404 0.53 0.49 0.58 42 42998 39 1 30 8 43
ASE_00406 0.81 0.76 0.87 71 48746 21 0 11 10 23
ASE_00411 0.49 0.46 0.52 41 49376 45 5 33 7 48
ASE_00412 0.49 0.46 0.53 48 58220 47 5 38 4 57
ASE_00413 0.64 0.65 0.63 53 44467 33 10 21 2 28
ASE_00414 0.47 0.45 0.49 43 46273 51 2 42 7 52
ASE_00415 0.66 0.65 0.66 67 54845 36 6 28 2 36
ASE_00416 0.70 0.67 0.73 85 77304 41 1 31 9 42
ASE_00417 0.36 0.37 0.35 37 54510 69 9 59 1 63
ASE_00418 0.19 0.20 0.19 15 38702 67 8 56 3 60
ASE_00419 0.82 0.80 0.85 82 54849 17 5 10 2 21
ASE_00420 0.79 0.79 0.79 50 43302 39 3 10 26 13
ASE_00422 0.78 0.77 0.79 72 46880 26 5 14 7 22
ASE_00423 0.58 0.58 0.58 63 56845 45 8 37 0 46
ASE_00426 0.44 0.42 0.46 45 60977 53 2 51 0 63
ASE_00427 0.12 0.15 0.10 7 40683 78 24 41 13 39
ASE_00428 0.78 0.75 0.81 94 76520 29 3 19 7 31
ASE_00430 0.75 0.74 0.76 72 46876 30 5 18 7 25
ASE_00431 0.65 0.57 0.74 54 46287 29 1 18 10 41
ASE_00434 0.61 0.59 0.63 65 68162 46 5 33 8 45
ASE_00437 0.44 0.41 0.49 55 79288 62 0 58 4 80
ASE_00438 0.50 0.47 0.52 55 65961 50 2 48 0 61
ASE_00441 0.79 0.74 0.84 83 64162 21 1 15 5 29
ASE_00443 0.99 0.98 1.00 49 26747 29 0 0 29 1
ASE_00447 0.77 0.72 0.82 83 60277 24 1 17 6 33
ASE_00448 0.22 0.22 0.22 25 64149 93 7 80 6 87
ASE_00451 0.64 0.60 0.68 75 70765 41 3 33 5 50
ASE_00454 0.54 0.54 0.55 34 43303 55 1 27 27 29
CRW_00013 0.42 0.37 0.47 43 103648 69 4 45 20 72
CRW_00016 0.51 0.47 0.57 56 77322 56 6 37 13 64
CRW_00610 0.46 0.46 0.47 37 36237 41 7 34 0 44
CRW_00613 0.85 0.82 0.89 64 34908 16 0 8 8 14
CRW_00614 0.14 0.16 0.12 9 121696 125 18 48 59 48
CRW_00618 0.19 0.20 0.19 12 56217 69 7 44 18 49
CRW_00619 0.36 0.37 0.35 27 164947 145 7 44 94 46
CRW_00620 0.18 0.21 0.15 13 150890 150 18 54 78 50
CRW_00621 0.38 0.35 0.42 25 153121 125 6 29 90 46
CRW_00623 0.32 0.29 0.35 24 129727 109 5 39 65 59
CRW_00633 0.62 0.57 0.67 60 63457 32 8 21 3 46
CRW_00634 0.48 0.47 0.49 44 64531 49 9 36 4 50
CRW_00670 0.56 0.58 0.56 69 70001 57 12 43 2 51
CRW_00671 0.80 0.76 0.85 89 62730 20 1 15 4 28
CRW_00672 0.78 0.77 0.78 86 72280 32 6 18 8 25
CRW_00674 0.63 0.61 0.64 76 83318 45 8 34 3 48
CRW_00676 0.60 0.60 0.60 69 93413 64 12 34 18 46
CRW_00692 0.33 0.34 0.32 31 68537 80 17 50 13 59
PDB_00827 0.77 0.65 0.91 53 26970 7 0 5 2 28
PDB_00919 0.53 0.48 0.58 49 44169 39 3 32 4 54
RFA_00597 0.24 0.26 0.23 28 97782 106 20 73 13 81
RFA_00598 0.66 0.63 0.68 64 84572 59 3 27 29 37
RFA_00599 0.72 0.72 0.71 80 101363 56 10 22 24 31
RFA_00600 0.62 0.69 0.55 69 120170 89 30 26 33 31
RFA_00601 0.49 0.52 0.46 59 99108 82 28 40 14 55
RFA_00602 0.66 0.68 0.64 79 101352 64 17 27 20 37
RFA_00606 0.68 0.67 0.70 26 21284 24 7 4 13 13
RFA_00620 0.44 0.49 0.40 19 21897 42 7 22 13 20
RFA_00621 0.41 0.41 0.42 31 46286 56 1 42 13 45
RFA_00623 0.38 0.38 0.37 30 43875 62 3 48 11 48
RFA_00624 0.43 0.46 0.41 28 30066 48 6 35 7 33
RFA_00626 0.88 0.84 0.92 73 56537 23 2 4 17 14
RFA_00627 0.71 0.68 0.74 59 56873 37 5 16 16 28
RFA_00628 0.91 0.88 0.94 76 57210 25 0 5 20 10
RFA_00630 0.66 0.66 0.66 57 56867 44 7 22 15 30
RFA_00639 0.49 0.51 0.48 44 54523 57 12 36 9 43
RFA_00805 0.72 0.69 0.75 104 133247 44 5 30 9 46
RFA_00814 0.24 0.27 0.22 11 25149 45 9 31 5 30
RFA_00815 0.57 0.61 0.54 25 24485 29 4 17 8 16
RFA_00816 0.63 0.66 0.60 27 23175 24 11 7 6 14
RFA_00817 0.10 0.12 0.08 5 21883 57 17 40 0 36
RFA_00818 0.48 0.54 0.43 22 20250 30 12 17 1 19
RFA_00819 0.96 0.95 0.98 39 27926 33 0 1 32 2
RFA_00820 0.87 0.84 0.91 134 151378 25 1 12 12 26
RFA_00830 0.48 0.45 0.51 69 152494 108 5 60 43 85
SRP_00002 0.88 0.88 0.88 90 45048 13 4 8 1 12
SRP_00006 0.84 0.83 0.86 84 45655 17 3 11 3 17
SRP_00009 0.50 0.44 0.56 45 46585 35 5 30 0 57
SRP_00011 0.63 0.62 0.64 64 46260 36 2 34 0 40
SRP_00012 0.68 0.65 0.71 66 46267 28 1 26 1 35
SRP_00015 0.83 0.80 0.87 79 46269 19 0 12 7 20
SRP_00016 0.79 0.78 0.80 85 47789 22 3 18 1 24
SRP_00018 0.55 0.54 0.56 44 38425 43 5 29 9 37
SRP_00019 0.91 0.88 0.94 80 35961 11 1 4 6 11
SRP_00024 0.37 0.38 0.36 33 37584 58 8 50 0 54
SRP_00026 0.68 0.69 0.66 61 36764 37 3 28 6 27
SRP_00027 0.77 0.74 0.80 64 37048 18 0 16 2 23
SRP_00030 0.78 0.81 0.76 71 36762 26 5 18 3 17
SRP_00031 0.68 0.70 0.67 62 36222 34 4 27 3 27
SRP_00037 0.43 0.44 0.43 38 36497 50 9 41 0 49
SRP_00050 0.96 0.93 0.99 92 44757 3 0 1 2 7
SRP_00053 0.90 0.88 0.91 83 45059 18 0 8 10 11
SRP_00060 0.94 0.92 0.97 92 44456 10 0 3 7 8
SRP_00061 0.93 0.91 0.96 91 44755 12 0 4 8 9
SRP_00066 0.00 0.00 0.00 0 45357 94 10 84 0 100
SRP_00069 0.70 0.67 0.74 57 34376 23 2 18 3 28
SRP_00070 0.27 0.31 0.24 38 126596 129 36 86 7 83
SRP_00073 0.65 0.68 0.62 48 38983 41 8 21 12 23
SRP_00079 0.75 0.73 0.77 64 41822 28 3 16 9 24
SRP_00085 0.66 0.63 0.70 64 45359 31 6 22 3 37
SRP_00086 0.59 0.60 0.58 60 44150 44 3 40 1 40
SRP_00087 0.07 0.09 0.06 5 37322 81 20 54 7 53
SRP_00088 0.68 0.71 0.66 63 34096 32 3 29 0 26
SRP_00089 0.75 0.76 0.75 68 35687 23 1 22 0 22
SRP_00090 0.31 0.31 0.32 28 35423 61 5 55 1 62
SRP_00091 0.84 0.82 0.86 78 52884 16 2 11 3 17
SRP_00099 0.61 0.63 0.59 60 44748 43 7 35 1 35
SRP_00102 0.77 0.74 0.79 75 44456 23 1 19 3 26
SRP_00103 0.79 0.77 0.81 79 45354 20 2 16 2 23
SRP_00104 0.39 0.43 0.35 30 34368 61 8 47 6 39
SRP_00117 0.73 0.72 0.75 73 45354 26 2 22 2 29
SRP_00123 0.86 0.86 0.86 78 36494 16 3 10 3 13
SRP_00124 0.64 0.62 0.65 53 37047 33 3 25 5 32
SRP_00127 0.73 0.71 0.74 85 72275 38 5 25 8 34
SRP_00130 0.48 0.48 0.48 47 49672 54 5 46 3 50
SRP_00136 0.35 0.38 0.33 27 44170 62 11 45 6 44
SRP_00142 0.31 0.31 0.31 29 45962 66 7 58 1 64
SRP_00143 0.37 0.38 0.36 38 49664 70 8 60 2 63
SRP_00144 0.38 0.39 0.38 37 46567 65 7 54 4 57
SRP_00148 0.55 0.57 0.53 50 49992 56 3 41 12 37
SRP_00152 0.70 0.68 0.71 70 45655 30 1 27 2 33
SRP_00153 0.75 0.74 0.77 79 46868 26 6 18 2 28
SRP_00157 0.38 0.42 0.35 30 44168 62 14 41 7 42
SRP_00158 0.31 0.37 0.26 43 124086 126 52 70 4 72
SRP_00160 0.45 0.44 0.46 57 86196 70 3 64 3 73
SRP_00171 0.00 0.00 0.00 0 45353 98 15 83 0 88
SRP_00173 0.79 0.80 0.78 72 38134 26 1 19 6 18
SRP_00174 0.80 0.81 0.79 70 38692 24 4 15 5 16
SRP_00175 0.20 0.20 0.20 17 44468 68 11 55 2 67
SRP_00178 0.33 0.31 0.35 32 45661 60 2 58 0 70
SRP_00179 0.76 0.74 0.78 78 45956 26 4 18 4 27
SRP_00181 0.31 0.29 0.33 30 45964 62 2 60 0 72
SRP_00182 0.73 0.71 0.74 72 45959 28 3 22 3 29
SRP_00184 0.33 0.32 0.33 32 45960 66 5 59 2 68
SRP_00188 0.22 0.22 0.24 17 31053 55 3 52 0 62
SRP_00197 0.21 0.20 0.24 20 49370 65 3 62 0 81
SRP_00198 0.22 0.21 0.23 22 50943 75 7 68 0 81
SRP_00199 0.65 0.65 0.65 68 50935 39 3 34 2 37
SRP_00201 0.72 0.70 0.73 78 47788 31 1 28 2 33
SRP_00202 0.87 0.86 0.87 101 54169 18 2 13 3 16
SRP_00203 0.73 0.74 0.71 78 48718 41 1 31 9 27
SRP_00204 0.66 0.67 0.65 68 49037 37 7 29 1 34
SRP_00206 0.84 0.83 0.84 90 47788 18 5 12 1 18
SRP_00208 0.64 0.62 0.66 63 46569 34 7 26 1 38
SRP_00228 0.96 0.95 0.97 90 45358 11 0 3 8 5
SRP_00230 0.80 0.79 0.81 71 39533 20 1 16 3 19
SRP_00234 0.80 0.79 0.81 68 36231 22 0 16 6 18
SRP_00239 0.30 0.31 0.29 29 50304 71 17 53 1 64
SRP_00240 0.65 0.65 0.65 66 48103 43 3 33 7 36
SRP_00241 0.44 0.48 0.41 39 45961 58 14 42 2 43
SRP_00247 0.38 0.40 0.36 35 47181 66 11 51 4 52
SRP_00252 0.52 0.54 0.51 48 49047 49 9 37 3 41
SRP_00253 0.52 0.54 0.51 49 49358 54 9 39 6 41
SRP_00254 0.48 0.52 0.44 32 32313 45 11 29 5 29
SRP_00255 0.60 0.62 0.59 58 47487 45 2 39 4 36
SRP_00257 0.84 0.84 0.84 91 50932 19 3 14 2 17
SRP_00260 0.62 0.63 0.61 63 47791 44 5 36 3 37
SRP_00265 0.59 0.63 0.55 46 41244 49 10 28 11 27
SRP_00267 0.82 0.82 0.82 79 44455 24 0 17 7 17
SRP_00276 0.86 0.85 0.86 94 50612 16 5 10 1 16
SRP_00278 0.67 0.68 0.66 71 45949 39 6 30 3 34
SRP_00282 0.30 0.37 0.25 23 43274 75 23 45 7 40
SRP_00286 0.61 0.60 0.63 105 136858 71 3 60 8 69
SRP_00287 0.58 0.57 0.60 92 141624 73 9 53 11 70
SRP_00290 0.67 0.68 0.66 92 100436 58 3 45 10 43
SRP_00292 0.50 0.49 0.52 85 137385 85 3 77 5 88
SRP_00294 0.65 0.63 0.66 106 129125 59 6 49 4 61
SRP_00299 0.90 0.84 0.97 83 44167 10 0 3 7 16
SRP_00300 0.91 0.89 0.93 84 44163 11 0 6 5 10
SRP_00301 0.87 0.87 0.87 75 32554 16 1 10 5 11
SRP_00302 0.39 0.40 0.39 32 41533 59 10 41 8 49
SRP_00308 0.72 0.73 0.72 64 36226 26 2 23 1 24
SRP_00317 0.94 0.90 0.99 88 45061 8 0 1 7 10
SRP_00321 0.56 0.56 0.55 61 47475 51 10 40 1 47
SRP_00322 0.67 0.65 0.68 71 48412 34 1 32 1 38
SRP_00323 0.81 0.80 0.82 86 47173 22 0 19 3 21
SRP_00328 0.62 0.64 0.61 54 39532 40 8 27 5 31
SRP_00329 0.57 0.58 0.57 49 39817 41 6 31 4 36
SRP_00330 0.47 0.46 0.49 44 49996 47 4 42 1 51
SRP_00331 0.52 0.53 0.52 46 37586 45 7 36 2 41
SRP_00332 0.70 0.71 0.69 75 50295 34 7 26 1 31
SRP_00335 0.31 0.44 0.22 17 35169 79 27 32 20 22
SRP_00337 0.75 0.75 0.76 68 35421 24 2 20 2 23
SRP_00339 0.66 0.66 0.66 62 44457 36 2 30 4 32
SRP_00340 0.49 0.52 0.47 43 41236 52 9 40 3 39
SRP_00347 0.78 0.78 0.79 75 46570 23 4 16 3 21
SRP_00361 0.75 0.78 0.73 70 41809 33 5 21 7 20
SRP_00368 0.92 0.90 0.95 88 43863 9 0 5 4 10
SRP_00371 0.78 0.79 0.77 65 36231 24 2 17 5 17
SRP_00382 0.56 0.55 0.57 93 141614 79 7 64 8 77
TMR_00173 0.36 0.36 0.36 15 42153 55 10 17 28 27
TMR_00357 0.40 0.37 0.44 34 82951 59 14 29 16 58
TMR_00601 0.31 0.29 0.33 12 58960 76 7 17 52 30
TMR_00603 0.67 0.60 0.74 26 60343 67 1 8 58 17
TMR_00611 0.44 0.45 0.43 46 61317 62 13 49 0 56
TMR_00696 0.16 0.16 0.17 18 84971 101 12 77 12 96

^top


Matthews Correlation Coeffient, Sensitivity and Positive Predictive Value have been calculated based on the paper by Gardener & Giegerich, 2004.