CompaRNA - on-line benchmarks of RNA structure prediction methods
Home

Methods
Datasets
Rankings
RNA 2D Atlas

Help
FAQ

Contact us
RSS feeds
Twitter

Table of contents:

  1. Overview

  2. Performance Plots

  3. Performance of MXScarna(seed) - scored higher in this pairwise comparison

  4. Performance of RNAwolf - scored lower in this pairwise comparison

  5. Compile and download dataset for MXScarna(seed) & RNAwolf [.zip] - may take several seconds...


Overview

Metric MXScarna(seed) RNAwolf
MCC 0.637 > 0.379
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020 > 0.375 ± 0.017
Sensitivity 0.535 > 0.389
Positive Predictive Value 0.759 > 0.371
Total TP 23071 > 16763
Total TN 25247346 > 25232581
Total FP 10057 < 33557
Total FP CONTRA 971 < 4235
Total FP INCONS 6356 < 24165
Total FP COMP 2730 < 5157
Total FN 20022 < 26330
P-value 3.56938820447e-08

^top




Performance plots


  1. Comparison of performance of MXScarna(seed) and RNAwolf. Positive Predictive Value (PPV) is plotted against sensitivity. Each dot represents a single test of each method. See tables below for raw data (individual counts for MXScarna(seed) and RNAwolf).

  2. Average Matthews Correlation Coefficients (MCC) with 95% confidence intervals (CIs) were plotted for different RNA families, for which at least 3 members were present in the benchmarking dataset. 'n' denotes the number of MCCs used to calculate the average and CI. See tables below for raw data (individual counts for MXScarna(seed) and RNAwolf).

  3. Comparison of average Matthews Correlation Coefficients (MCCs) for MXScarna(seed) and RNAwolf. The whiskers correspond to 95% confidence intervals (CIs). 'n' denotes the number of MCCs used to calculate average MCCs and CIs. See tables below for raw data (individual counts for MXScarna(seed) and RNAwolf).

^top





Performance of MXScarna(seed) - scored higher in this pairwise comparison

1. Total counts & total scores for MXScarna(seed)

Total Base Pair Counts
Total TP 23071
Total TN 25247346
Total FP 10057
Total FP CONTRA 971
Total FP INCONS 6356
Total FP COMP 2730
Total FN 20022
Total Scores
MCC 0.637
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020
Sensitivity 0.535
Positive Predictive Value 0.759
Nr of predictions 431

^top



2. Individual counts for MXScarna(seed) [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.67 0.51 0.88 38 34148 6 0 5 1 37
ASE_00002 0.68 0.53 0.87 39 35466 7 1 5 1 34
ASE_00004 0.52 0.41 0.65 40 47833 24 4 18 2 57
ASE_00005 0.72 0.57 0.92 67 57897 8 2 4 2 50
ASE_00006 0.51 0.41 0.63 38 47526 25 3 19 3 55
ASE_00007 0.82 0.75 0.90 83 59593 12 4 5 3 27
ASE_00009 0.68 0.57 0.81 38 26059 10 1 8 1 29
ASE_00010 0.70 0.63 0.76 52 49702 27 4 12 11 30
ASE_00012 0.64 0.55 0.75 68 73829 26 4 19 3 55
ASE_00014 0.67 0.52 0.87 55 54222 9 0 8 1 51
ASE_00017 0.49 0.41 0.59 26 50996 36 2 16 18 38
ASE_00018 0.77 0.64 0.91 86 80507 11 2 6 3 48
ASE_00020 0.50 0.36 0.71 45 73857 21 6 12 3 81
ASE_00021 0.49 0.36 0.66 57 104110 34 4 25 5 103
ASE_00022 0.66 0.58 0.75 72 82932 31 5 19 7 52
ASE_00023 0.27 0.20 0.37 25 84188 47 2 40 5 102
ASE_00025 0.53 0.42 0.67 30 78561 28 0 15 13 41
ASE_00026 0.74 0.65 0.85 72 59600 18 5 8 5 38
ASE_00028 0.69 0.60 0.78 76 84569 29 5 16 8 50
ASE_00029 0.24 0.18 0.32 22 82960 50 6 40 4 100
ASE_00030 0.65 0.46 0.91 67 85417 9 3 4 2 78
ASE_00031 0.31 0.23 0.43 29 86668 41 3 36 2 97
ASE_00032 0.20 0.15 0.28 18 80135 55 0 47 8 100
ASE_00033 0.77 0.67 0.89 81 64889 14 3 7 4 40
ASE_00035 0.75 0.66 0.86 78 70409 18 3 10 5 40
ASE_00036 0.60 0.50 0.73 66 75764 28 3 22 3 66
ASE_00037 0.86 0.79 0.94 87 59247 9 2 4 3 23
ASE_00038 0.69 0.56 0.84 57 53560 14 1 10 3 44
ASE_00040 0.69 0.59 0.80 78 78906 22 4 15 3 55
ASE_00041 0.80 0.72 0.90 78 57543 12 2 7 3 30
ASE_00042 0.68 0.52 0.87 76 90013 14 1 10 3 69
ASE_00044 0.85 0.78 0.93 82 54527 9 3 3 3 23
ASE_00045 0.64 0.58 0.72 46 47214 28 4 14 10 34
ASE_00046 0.76 0.66 0.87 68 50325 13 1 9 3 35
ASE_00047 0.74 0.60 0.92 78 74220 8 2 5 1 52
ASE_00052 0.64 0.55 0.75 62 61342 24 3 18 3 50
ASE_00053 0.60 0.47 0.76 63 79318 24 4 16 4 70
ASE_00057 0.71 0.57 0.88 77 82127 14 4 7 3 57
ASE_00064 0.82 0.71 0.94 63 45384 7 1 3 3 26
ASE_00066 0.71 0.57 0.88 74 72306 11 3 7 1 56
ASE_00068 0.67 0.52 0.88 44 37625 8 1 5 2 41
ASE_00069 0.62 0.49 0.79 69 82941 22 3 15 4 71
ASE_00074 0.81 0.70 0.94 83 67808 9 2 3 4 36
ASE_00075 0.49 0.35 0.69 56 108730 31 3 22 6 106
ASE_00076 0.42 0.32 0.55 38 68196 33 2 29 2 80
ASE_00077 0.77 0.70 0.85 60 45079 14 4 7 3 26
ASE_00078 0.79 0.72 0.87 60 43002 13 2 7 4 23
ASE_00079 0.41 0.33 0.52 33 55548 32 1 29 2 67
ASE_00080 0.37 0.30 0.47 37 71552 44 6 36 2 86
ASE_00081 0.76 0.67 0.87 65 49695 13 2 8 3 32
ASE_00082 0.35 0.24 0.50 28 70444 31 1 27 3 88
ASE_00083 0.71 0.56 0.89 62 62411 11 1 7 3 48
ASE_00084 0.71 0.59 0.85 58 53560 14 1 9 4 41
ASE_00087 0.31 0.21 0.46 30 88345 36 0 35 1 114
ASE_00090 0.66 0.54 0.81 55 55543 16 2 11 3 46
ASE_00092 0.56 0.43 0.73 49 63479 21 2 16 3 64
ASE_00096 0.41 0.30 0.55 35 63482 31 1 28 2 80
ASE_00099 0.83 0.73 0.96 87 64529 7 2 2 3 33
ASE_00100 0.54 0.41 0.70 31 82171 27 1 12 14 45
ASE_00102 0.47 0.34 0.63 57 117765 36 5 28 3 109
ASE_00104 0.82 0.73 0.93 87 64167 10 2 5 3 32
ASE_00105 0.51 0.38 0.70 42 64201 21 5 13 3 69
ASE_00107 0.78 0.68 0.91 86 73058 12 2 7 3 41
ASE_00108 0.54 0.43 0.68 27 46931 25 0 13 12 36
ASE_00111 0.68 0.54 0.86 31 50050 23 0 5 18 26
ASE_00112 0.32 0.25 0.42 29 75397 42 7 33 2 87
ASE_00114 0.50 0.45 0.55 35 45387 40 4 25 11 42
ASE_00115 0.54 0.43 0.68 43 54552 23 1 19 3 58
ASE_00116 0.35 0.27 0.46 18 31587 22 1 20 1 48
ASE_00118 0.39 0.30 0.50 31 60664 34 3 28 3 71
ASE_00119 0.30 0.24 0.38 26 62767 43 2 40 1 82
ASE_00120 0.72 0.57 0.92 54 46912 7 0 5 2 40
ASE_00121 0.77 0.63 0.94 58 45088 5 0 4 1 34
ASE_00122 0.66 0.58 0.75 51 43297 20 1 16 3 37
ASE_00123 0.67 0.53 0.85 45 38450 10 2 6 2 40
ASE_00125 0.68 0.51 0.90 45 39290 7 1 4 2 43
ASE_00128 0.66 0.54 0.82 54 53235 15 1 11 3 46
ASE_00129 0.68 0.53 0.88 59 62768 11 1 7 3 52
ASE_00131 0.63 0.47 0.83 40 39292 10 1 7 2 45
ASE_00132 0.48 0.40 0.57 38 50336 31 4 25 2 57
ASE_00134 0.73 0.62 0.86 59 50334 13 1 9 3 36
ASE_00135 0.40 0.32 0.51 35 63121 35 4 30 1 74
ASE_00136 0.78 0.67 0.91 62 48137 9 1 5 3 30
ASE_00137 0.53 0.43 0.66 42 48452 25 2 20 3 56
ASE_00138 0.73 0.63 0.85 51 40410 13 3 6 4 30
ASE_00139 0.48 0.35 0.67 36 54231 19 0 18 1 68
ASE_00140 0.47 0.34 0.65 42 70811 26 3 20 3 83
ASE_00142 0.79 0.70 0.89 86 67064 14 3 8 3 36
ASE_00145 0.58 0.40 0.85 44 70073 9 0 8 1 67
ASE_00146 0.78 0.66 0.92 82 70787 10 2 5 3 42
ASE_00148 0.47 0.28 0.80 43 112521 12 0 11 1 111
ASE_00151 0.79 0.71 0.88 70 51923 13 7 3 3 28
ASE_00153 0.60 0.48 0.76 35 57584 26 0 11 15 38
ASE_00154 0.61 0.50 0.76 53 65271 18 4 13 1 54
ASE_00155 0.54 0.35 0.83 50 93468 12 0 10 2 92
ASE_00161 0.69 0.64 0.75 56 53553 29 4 15 10 31
ASE_00163 0.79 0.70 0.89 65 53228 11 2 6 3 28
ASE_00165 0.56 0.43 0.74 43 52917 19 1 14 4 58
ASE_00168 0.59 0.48 0.72 31 60683 27 0 12 15 33
ASE_00169 0.47 0.34 0.65 36 57236 22 1 18 3 71
ASE_00170 0.71 0.62 0.82 58 48757 16 2 11 3 35
ASE_00171 0.59 0.49 0.71 46 48451 22 1 18 3 48
ASE_00172 0.59 0.46 0.75 49 58931 19 4 12 3 57
ASE_00174 0.54 0.42 0.69 46 61008 24 3 18 3 63
ASE_00175 0.71 0.55 0.91 59 59966 9 1 5 3 48
ASE_00176 0.46 0.35 0.60 38 59968 27 1 24 2 72
ASE_00179 0.57 0.49 0.66 41 44191 24 4 17 3 43
ASE_00180 0.72 0.61 0.85 61 51288 14 2 9 3 39
ASE_00181 0.59 0.45 0.76 48 57567 19 3 12 4 58
ASE_00182 0.35 0.24 0.51 33 84190 33 3 29 1 103
ASE_00183 0.65 0.52 0.81 59 61352 17 0 14 3 54
ASE_00184 0.69 0.55 0.86 56 54550 12 0 9 3 46
ASE_00185 0.23 0.16 0.32 21 73470 46 8 37 1 107
ASE_00186 0.72 0.62 0.84 82 78905 21 2 14 5 50
ASE_00187 0.58 0.43 0.78 49 68572 17 1 13 3 66
ASE_00189 0.63 0.57 0.70 58 63107 35 5 20 10 44
ASE_00190 0.53 0.42 0.67 38 45394 23 5 14 4 52
ASE_00191 0.82 0.70 0.96 43 29601 4 0 2 2 18
ASE_00192 0.29 0.23 0.38 30 84588 51 6 42 3 103
ASE_00194 0.60 0.50 0.71 60 73452 32 5 19 8 59
ASE_00196 0.66 0.52 0.85 39 31580 9 0 7 2 36
ASE_00197 0.67 0.55 0.82 80 89156 20 2 15 3 65
ASE_00198 0.75 0.61 0.93 62 52583 8 1 4 3 40
ASE_00203 0.56 0.47 0.68 45 46599 24 1 20 3 51
ASE_00204 0.62 0.53 0.72 59 67814 30 6 17 7 53
ASE_00205 0.71 0.59 0.85 53 45994 12 0 9 3 37
ASE_00209 0.77 0.65 0.92 57 43009 7 0 5 2 31
ASE_00210 0.69 0.54 0.90 35 27222 5 0 4 1 30
ASE_00212 0.67 0.54 0.82 80 93864 20 2 15 3 68
ASE_00213 0.65 0.48 0.86 32 27224 6 0 5 1 34
ASE_00214 0.74 0.63 0.87 65 56205 13 2 8 3 38
ASE_00215 0.38 0.26 0.54 26 48468 23 2 20 1 73
ASE_00216 0.69 0.59 0.81 48 39281 14 3 8 3 34
ASE_00217 0.81 0.71 0.93 64 40401 8 2 3 3 26
ASE_00221 0.78 0.69 0.89 81 64529 13 2 8 3 36
ASE_00222 0.47 0.27 0.82 42 112050 10 0 9 1 115
ASE_00227 0.28 0.21 0.38 28 78930 47 1 44 2 105
ASE_00228 0.62 0.51 0.76 44 46913 18 2 12 4 42
ASE_00229 0.72 0.62 0.84 54 42422 13 1 9 3 33
ASE_00231 0.49 0.40 0.60 38 47832 27 5 20 2 58
ASE_00232 0.63 0.57 0.71 48 38435 23 4 16 3 36
ASE_00234 0.23 0.17 0.32 22 75398 48 3 43 2 107
ASE_00237 0.56 0.48 0.66 27 45712 30 2 12 16 29
ASE_00238 0.54 0.39 0.76 44 64203 17 3 11 3 70
ASE_00240 0.61 0.49 0.74 46 46603 19 1 15 3 47
ASE_00241 0.80 0.72 0.89 63 43885 11 2 6 3 24
ASE_00242 0.82 0.75 0.90 84 60982 12 2 7 3 28
ASE_00245 0.17 0.09 0.33 7 55257 20 3 11 6 71
ASE_00246 0.60 0.48 0.74 32 48162 25 0 11 14 35
ASE_00247 0.59 0.48 0.72 31 54242 28 0 12 16 33
ASE_00248 0.81 0.72 0.92 82 62392 11 2 5 4 32
ASE_00250 0.60 0.49 0.73 64 78915 25 4 20 1 67
ASE_00252 0.47 0.35 0.64 58 115350 37 4 28 5 110
ASE_00254 0.67 0.59 0.77 48 36794 17 1 13 3 34
ASE_00255 0.61 0.50 0.74 65 74603 26 5 18 3 65
ASE_00257 0.72 0.58 0.90 56 50978 9 4 2 3 41
ASE_00258 0.15 0.11 0.21 6 26768 24 4 18 2 48
ASE_00259 0.59 0.48 0.73 58 73073 28 1 21 6 63
ASE_00263 0.52 0.39 0.68 47 70431 25 3 19 3 73
ASE_00264 0.28 0.14 0.56 14 49116 15 0 11 4 86
ASE_00267 0.75 0.65 0.86 57 45084 12 2 7 3 31
ASE_00270 0.39 0.27 0.56 35 72328 32 0 27 5 93
ASE_00274 0.60 0.48 0.77 49 55547 18 1 14 3 54
ASE_00277 0.60 0.48 0.75 44 48146 19 1 14 4 47
ASE_00279 0.78 0.65 0.93 66 53230 8 2 3 3 35
ASE_00280 0.73 0.62 0.85 61 51931 14 1 10 3 37
ASE_00281 0.79 0.68 0.91 60 44485 9 2 4 3 28
ASE_00282 0.48 0.35 0.65 45 77746 26 3 21 2 82
ASE_00283 0.68 0.56 0.82 60 61703 16 2 11 3 47
ASE_00284 0.67 0.54 0.84 58 58242 14 2 9 3 50
ASE_00285 0.51 0.40 0.64 49 68930 30 2 25 3 73
ASE_00286 0.68 0.58 0.82 53 46600 15 1 11 3 39
ASE_00287 0.67 0.54 0.84 56 54879 14 2 9 3 47
ASE_00288 0.64 0.54 0.77 50 45991 18 2 13 3 43
ASE_00289 0.54 0.42 0.70 66 100931 31 3 25 3 91
ASE_00292 0.77 0.65 0.92 90 81712 11 3 5 3 48
ASE_00294 0.67 0.51 0.87 88 114380 16 2 11 3 83
ASE_00295 0.76 0.63 0.92 82 73831 10 2 5 3 49
ASE_00296 0.68 0.54 0.87 78 91716 15 3 9 3 67
ASE_00297 0.62 0.50 0.77 49 52911 18 0 15 3 49
ASE_00298 0.55 0.42 0.72 47 67463 21 4 14 3 66
ASE_00299 0.32 0.24 0.42 24 49398 34 1 32 1 76
ASE_00303 0.29 0.20 0.43 19 67852 30 7 18 5 76
ASE_00305 0.73 0.68 0.77 58 54540 28 4 13 11 27
ASE_00313 0.39 0.20 0.75 18 62457 17 0 6 11 71
ASE_00316 0.27 0.17 0.41 17 107839 35 3 21 11 81
ASE_00318 0.63 0.54 0.74 64 80113 37 6 17 14 54
ASE_00321 0.74 0.69 0.79 61 54538 25 4 12 9 27
ASE_00327 0.28 0.18 0.43 16 57254 24 1 20 3 73
ASE_00328 0.73 0.66 0.80 74 72679 31 5 13 13 38
ASE_00329 0.34 0.24 0.48 15 40724 21 11 5 5 48
ASE_00330 0.28 0.17 0.47 15 56248 24 0 17 7 75
ASE_00332 0.74 0.63 0.88 87 81711 15 2 10 3 51
ASE_00335 0.72 0.66 0.78 76 75369 33 6 15 12 40
ASE_00337 0.35 0.24 0.50 17 39306 24 2 15 7 54
ASE_00338 0.31 0.19 0.50 19 66392 21 2 17 2 79
ASE_00339 0.44 0.34 0.58 40 80131 37 3 26 8 79
ASE_00340 0.51 0.45 0.59 38 45992 31 3 23 5 47
ASE_00342 0.81 0.72 0.91 83 62390 11 3 5 3 32
ASE_00343 0.27 0.20 0.35 23 83371 49 4 38 7 90
ASE_00346 0.61 0.49 0.75 48 48141 18 2 14 2 49
ASE_00353 0.69 0.56 0.86 60 57900 13 1 9 3 47
ASE_00359 0.37 0.26 0.51 21 42737 24 1 19 4 59
ASE_00360 0.78 0.63 0.98 41 29361 2 0 1 1 24
ASE_00361 0.66 0.46 0.94 59 75403 7 1 3 3 68
ASE_00362 0.76 0.66 0.88 60 48137 12 2 6 4 31
ASE_00363 0.77 0.63 0.94 59 51297 7 1 3 3 35
ASE_00364 0.70 0.57 0.87 60 54216 12 1 8 3 45
ASE_00366 0.58 0.48 0.70 47 58586 23 6 14 3 51
ASE_00367 0.79 0.71 0.88 61 43002 11 2 6 3 25
ASE_00369 0.71 0.58 0.86 62 55873 13 1 9 3 45
ASE_00370 0.81 0.71 0.92 60 41840 8 1 4 3 24
ASE_00372 0.57 0.45 0.71 45 51940 21 2 16 3 55
ASE_00374 0.79 0.68 0.91 60 44784 9 2 4 3 28
ASE_00375 0.50 0.39 0.64 43 60311 26 1 23 2 67
ASE_00376 0.65 0.55 0.76 58 56877 21 2 16 3 47
ASE_00377 0.72 0.58 0.89 62 57560 11 1 7 3 45
ASE_00379 0.76 0.66 0.87 59 45988 12 2 7 3 30
ASE_00380 0.51 0.40 0.65 40 54884 24 1 21 2 59
ASE_00382 0.79 0.71 0.88 60 41837 11 2 6 3 24
ASE_00383 0.78 0.67 0.91 70 54538 10 2 5 3 35
ASE_00384 0.72 0.61 0.85 56 48450 13 1 9 3 36
ASE_00385 0.55 0.47 0.64 38 41846 24 3 18 3 43
ASE_00386 0.75 0.61 0.92 59 50339 8 1 4 3 37
ASE_00387 0.60 0.50 0.71 52 55872 25 2 19 4 52
ASE_00388 0.74 0.64 0.85 57 45686 14 2 8 4 32
ASE_00390 0.78 0.68 0.89 58 42130 10 2 5 3 27
ASE_00393 0.68 0.57 0.82 53 47830 15 1 11 3 40
ASE_00394 0.73 0.62 0.87 58 46904 12 1 8 3 35
ASE_00395 0.82 0.71 0.94 60 41552 7 1 3 3 24
ASE_00396 0.75 0.66 0.85 55 41551 12 2 8 2 28
ASE_00397 0.74 0.61 0.90 64 54544 10 2 5 3 41
ASE_00398 0.65 0.52 0.82 54 55879 15 0 12 3 50
ASE_00400 0.45 0.37 0.56 39 57900 33 2 29 2 67
ASE_00401 0.55 0.40 0.76 51 76961 19 0 16 3 75
ASE_00402 0.83 0.74 0.94 63 42419 7 1 3 3 22
ASE_00403 0.71 0.57 0.90 61 55877 10 1 6 3 46
ASE_00404 0.78 0.67 0.90 57 43008 10 2 4 4 28
ASE_00406 0.79 0.68 0.93 64 48759 8 2 3 3 30
ASE_00411 0.59 0.48 0.72 43 49395 20 2 15 3 46
ASE_00412 0.55 0.42 0.72 44 58250 20 1 16 3 61
ASE_00413 0.68 0.57 0.82 46 44495 14 1 9 4 35
ASE_00414 0.19 0.16 0.24 15 46298 48 3 44 1 80
ASE_00415 0.39 0.31 0.48 32 54880 36 3 31 2 71
ASE_00416 0.69 0.60 0.80 76 77326 23 3 16 4 51
ASE_00417 0.78 0.63 0.95 63 54549 5 0 3 2 37
ASE_00418 0.71 0.55 0.91 41 38736 6 0 4 2 34
ASE_00419 0.59 0.49 0.72 50 54877 20 3 16 1 53
ASE_00420 0.16 0.11 0.23 7 43335 29 5 18 6 56
ASE_00422 0.58 0.49 0.69 46 46904 24 3 18 3 48
ASE_00423 0.81 0.72 0.90 79 56865 13 3 6 4 30
ASE_00426 0.42 0.36 0.48 39 60994 42 3 39 0 69
ASE_00427 0.56 0.41 0.76 19 40730 18 1 5 12 27
ASE_00428 0.69 0.60 0.80 75 76542 22 5 14 3 50
ASE_00430 0.55 0.45 0.68 44 46906 24 1 20 3 53
ASE_00431 0.27 0.22 0.34 21 46299 40 8 32 0 74
ASE_00434 0.62 0.55 0.71 60 68180 34 5 20 9 50
ASE_00437 0.58 0.50 0.69 67 79304 33 2 28 3 68
ASE_00438 0.41 0.32 0.54 37 65997 33 6 26 1 79
ASE_00441 0.32 0.24 0.43 27 64198 40 4 32 4 85
ASE_00443 0.15 0.08 0.27 4 26781 18 0 11 7 46
ASE_00447 0.80 0.72 0.90 83 60286 12 2 7 3 33
ASE_00448 0.80 0.72 0.88 81 64169 14 2 9 3 31
ASE_00451 0.77 0.66 0.88 83 70782 14 2 9 3 42
ASE_00454 0.05 0.03 0.09 2 43342 25 1 20 4 61
CRW_00013 0.33 0.21 0.53 24 103695 23 4 17 2 91
CRW_00016 0.31 0.19 0.51 23 77376 24 7 15 2 97
CRW_00610 0.16 0.09 0.32 7 36293 15 1 14 0 74
CRW_00613 0.00 0.00 0.00 0 34956 24 7 17 0 78
CRW_00614 0.00 0.00 0.00 0 121749 22 4 18 0 57
CRW_00618 0.18 0.10 0.32 6 56261 13 1 12 0 55
CRW_00619 0.00 0.00 0.00 0 165006 19 2 17 0 73
CRW_00620 0.00 0.00 0.00 0 150963 16 0 12 4 63
CRW_00621 0.00 0.00 0.00 0 153149 34 7 25 2 71
CRW_00623 0.00 0.00 0.00 0 129785 17 1 9 7 83
CRW_00633 0.45 0.27 0.74 29 63507 14 0 10 4 77
CRW_00634 0.47 0.30 0.74 28 64582 18 0 10 8 66
CRW_00670 0.47 0.26 0.86 31 70089 7 0 5 2 89
CRW_00671 0.56 0.37 0.84 43 62784 10 0 8 2 74
CRW_00672 0.43 0.28 0.67 31 72344 17 0 15 2 80
CRW_00674 0.22 0.14 0.37 17 83390 29 5 24 0 107
CRW_00676 0.03 0.02 0.07 2 93500 31 4 22 5 113
CRW_00692 0.03 0.01 0.06 1 68619 22 0 15 7 89
PDB_00827 0.00 0.00 0.00 0 27011 17 1 16 0 81
PDB_00919 0.27 0.21 0.35 22 44191 40 3 37 0 81
RFA_00597 0.71 0.66 0.76 72 97808 43 8 15 20 37
RFA_00598 0.72 0.68 0.77 69 84576 40 5 16 19 32
RFA_00599 0.54 0.51 0.57 57 101375 62 5 38 19 54
RFA_00600 0.53 0.49 0.57 49 120209 62 10 27 25 51
RFA_00601 0.74 0.73 0.75 83 99124 49 4 24 21 31
RFA_00602 0.69 0.68 0.69 79 101361 50 5 30 15 37
RFA_00606 0.53 0.51 0.56 20 21285 25 4 12 9 19
RFA_00620 0.20 0.18 0.23 7 21915 33 7 16 10 32
RFA_00621 0.34 0.18 0.64 14 46338 14 0 8 6 62
RFA_00623 0.42 0.23 0.75 18 43932 10 1 5 4 60
RFA_00624 0.27 0.18 0.39 11 30107 20 0 17 3 50
RFA_00626 0.89 0.87 0.92 76 56533 29 2 5 22 11
RFA_00627 0.83 0.79 0.87 69 56874 36 1 9 26 18
RFA_00628 0.85 0.81 0.89 70 57212 38 2 7 29 16
RFA_00630 0.82 0.78 0.86 68 56874 33 2 9 22 19
RFA_00639 0.31 0.31 0.31 27 54527 69 10 51 8 60
RFA_00805 0.78 0.72 0.84 108 133257 31 1 20 10 42
RFA_00814 0.95 0.93 0.97 38 25161 22 0 1 21 3
RFA_00815 0.96 0.93 1.00 38 24493 15 0 0 15 3
RFA_00816 0.96 0.93 1.00 38 23182 15 0 0 15 3
RFA_00817 0.94 0.88 1.00 36 21909 12 0 0 12 5
RFA_00818 0.64 0.68 0.61 28 20255 30 11 7 12 13
RFA_00819 0.94 0.90 0.97 37 27928 26 0 1 25 4
RFA_00820 0.88 0.88 0.87 141 151363 51 0 21 30 19
RFA_00830 0.61 0.59 0.63 91 152484 92 2 51 39 63
SRP_00002 0.84 0.82 0.87 84 45053 19 0 13 6 18
SRP_00006 0.84 0.82 0.86 83 45657 22 0 13 9 18
SRP_00009 0.82 0.80 0.83 82 46566 28 0 17 11 20
SRP_00011 0.77 0.77 0.78 80 46257 31 0 23 8 24
SRP_00012 0.86 0.84 0.89 85 46264 26 0 11 15 16
SRP_00015 0.87 0.85 0.89 84 46266 25 0 10 15 15
SRP_00016 0.92 0.89 0.95 97 47793 15 0 5 10 12
SRP_00018 0.84 0.74 0.95 60 38440 16 0 3 13 21
SRP_00019 0.76 0.65 0.88 59 35979 18 0 8 10 32
SRP_00024 0.81 0.75 0.88 65 37601 13 0 9 4 22
SRP_00026 0.80 0.73 0.88 64 36783 15 0 9 6 24
SRP_00027 0.83 0.76 0.90 66 37055 14 0 7 7 21
SRP_00030 0.84 0.78 0.91 69 36780 11 0 7 4 19
SRP_00031 0.84 0.78 0.91 69 36239 11 0 7 4 20
SRP_00037 0.84 0.77 0.92 67 36512 13 0 6 7 20
SRP_00050 0.92 0.91 0.94 90 44754 20 0 6 14 9
SRP_00053 0.89 0.87 0.90 82 45059 25 0 9 16 12
SRP_00060 0.93 0.91 0.95 91 44455 15 0 5 10 9
SRP_00061 0.93 0.91 0.95 91 44754 15 0 5 10 9
SRP_00066 0.85 0.83 0.86 83 45355 25 0 13 12 17
SRP_00069 0.66 0.58 0.77 49 34389 25 3 12 10 36
SRP_00070 0.45 0.37 0.55 45 126674 45 7 30 8 76
SRP_00073 0.66 0.61 0.72 43 39000 31 4 13 14 28
SRP_00079 0.68 0.66 0.71 58 41823 39 0 24 15 30
SRP_00085 0.81 0.79 0.82 80 45354 30 0 17 13 21
SRP_00086 0.91 0.90 0.93 90 44156 17 0 7 10 10
SRP_00087 0.32 0.34 0.31 20 37336 53 16 29 8 38
SRP_00088 0.77 0.69 0.86 61 34120 13 1 9 3 28
SRP_00089 0.80 0.73 0.88 66 35703 13 1 8 4 24
SRP_00090 0.78 0.71 0.86 64 35437 14 1 9 4 26
SRP_00091 0.59 0.48 0.73 46 52912 29 3 14 12 49
SRP_00099 0.55 0.56 0.55 53 44753 48 3 41 4 42
SRP_00102 0.90 0.88 0.93 89 44455 16 0 7 9 12
SRP_00103 0.91 0.89 0.92 91 45352 17 0 8 9 11
SRP_00104 0.53 0.49 0.57 34 34393 37 5 21 11 35
SRP_00117 0.81 0.78 0.83 80 45355 24 0 16 8 22
SRP_00123 0.78 0.76 0.81 69 36500 24 3 13 8 22
SRP_00124 0.60 0.55 0.64 47 37055 30 6 20 4 38
SRP_00127 0.55 0.42 0.71 50 72320 24 3 17 4 69
SRP_00130 0.74 0.70 0.77 68 49682 35 1 19 15 29
SRP_00136 0.57 0.54 0.61 38 44191 37 9 15 13 33
SRP_00142 0.89 0.87 0.90 81 45966 25 0 9 16 12
SRP_00143 0.84 0.83 0.85 84 49671 26 0 15 11 17
SRP_00144 0.87 0.86 0.87 81 46572 28 0 12 16 13
SRP_00148 0.60 0.51 0.72 44 50025 27 0 17 10 43
SRP_00152 0.88 0.86 0.89 89 45653 21 0 11 10 14
SRP_00153 0.86 0.85 0.88 91 46867 22 0 13 9 16
SRP_00157 0.56 0.53 0.60 38 44190 39 5 20 14 34
SRP_00158 0.25 0.18 0.35 21 124191 44 8 31 5 94
SRP_00160 0.42 0.32 0.54 42 86242 46 0 36 10 88
SRP_00171 0.83 0.83 0.84 73 45364 36 0 14 22 15
SRP_00173 0.78 0.70 0.86 63 38153 15 0 10 5 27
SRP_00174 0.77 0.71 0.84 61 38708 15 0 12 3 25
SRP_00175 0.58 0.49 0.69 41 44492 33 2 16 15 43
SRP_00178 0.89 0.88 0.89 90 45652 23 0 11 12 12
SRP_00179 0.87 0.86 0.88 90 45954 23 0 12 11 15
SRP_00181 0.80 0.79 0.80 81 45955 30 0 20 10 21
SRP_00182 0.84 0.83 0.85 84 45957 25 0 15 10 17
SRP_00184 0.78 0.77 0.79 77 45958 34 0 21 13 23
SRP_00188 0.54 0.51 0.58 40 31056 32 7 22 3 39
SRP_00197 0.92 0.90 0.94 91 49358 24 0 6 18 10
SRP_00198 0.90 0.87 0.92 90 50942 24 0 8 16 13
SRP_00199 0.89 0.88 0.91 92 50939 21 0 9 12 13
SRP_00201 0.94 0.93 0.96 103 47788 11 0 4 7 8
SRP_00202 0.89 0.85 0.93 100 54178 16 0 7 9 17
SRP_00203 0.83 0.83 0.83 87 48723 25 0 18 7 18
SRP_00204 0.87 0.85 0.88 87 49042 25 0 12 13 15
SRP_00206 0.94 0.93 0.96 100 47791 14 0 4 10 8
SRP_00208 0.91 0.88 0.95 89 46571 20 0 5 15 12
SRP_00228 0.89 0.87 0.90 83 45359 23 0 9 14 12
SRP_00230 0.68 0.57 0.81 51 39558 23 3 9 11 39
SRP_00234 0.84 0.76 0.93 65 36245 14 0 5 9 21
SRP_00239 0.49 0.52 0.48 48 50302 62 6 47 9 45
SRP_00240 0.76 0.75 0.77 77 48105 33 3 20 10 25
SRP_00241 0.50 0.51 0.49 42 45970 54 8 36 10 40
SRP_00247 0.51 0.54 0.49 47 47182 55 8 41 6 40
SRP_00252 0.65 0.63 0.67 56 49057 40 2 26 12 33
SRP_00253 0.62 0.62 0.62 56 49364 48 5 30 13 34
SRP_00254 0.35 0.36 0.34 22 32321 49 10 32 7 39
SRP_00255 0.74 0.76 0.73 71 47489 40 1 25 14 23
SRP_00257 0.62 0.55 0.69 59 50955 29 4 22 3 49
SRP_00260 0.50 0.47 0.53 47 47806 44 6 36 2 53
SRP_00265 0.63 0.59 0.68 43 41265 35 7 13 15 30
SRP_00267 0.89 0.89 0.90 85 44457 21 0 9 12 11
SRP_00276 0.93 0.91 0.94 100 50615 13 0 6 7 10
SRP_00278 0.73 0.69 0.77 72 45963 26 0 21 5 33
SRP_00282 0.27 0.32 0.23 20 43279 76 19 47 10 43
SRP_00286 0.51 0.36 0.71 63 136937 37 1 25 11 111
SRP_00287 0.48 0.35 0.65 57 141690 43 2 29 12 105
SRP_00290 0.48 0.35 0.65 47 100504 36 2 23 11 88
SRP_00292 0.50 0.36 0.70 62 137461 38 1 26 11 111
SRP_00294 0.60 0.45 0.82 75 129194 27 1 16 10 92
SRP_00299 0.78 0.77 0.80 76 44158 28 0 19 9 23
SRP_00300 0.88 0.86 0.90 81 44163 23 0 9 14 13
SRP_00301 0.58 0.47 0.73 40 32585 26 2 13 11 46
SRP_00302 0.51 0.44 0.58 36 41554 39 3 23 13 45
SRP_00308 0.82 0.73 0.91 64 36245 15 0 6 9 24
SRP_00317 0.89 0.87 0.92 85 45058 22 0 7 15 13
SRP_00321 0.76 0.75 0.78 81 47482 30 0 23 7 27
SRP_00322 0.79 0.75 0.83 82 48417 26 0 17 9 27
SRP_00323 0.85 0.83 0.87 89 47176 22 0 13 9 18
SRP_00328 0.64 0.60 0.69 51 39547 31 4 19 8 34
SRP_00329 0.63 0.60 0.65 51 39825 35 4 23 8 34
SRP_00330 0.80 0.80 0.81 76 49992 29 2 16 11 19
SRP_00331 0.55 0.48 0.64 42 37609 30 1 23 6 45
SRP_00332 0.95 0.93 0.97 99 50301 15 0 3 12 7
SRP_00335 0.35 0.44 0.29 17 35186 58 21 21 16 22
SRP_00337 0.78 0.71 0.84 65 35434 14 1 11 2 26
SRP_00339 0.78 0.78 0.78 73 44458 27 4 16 7 21
SRP_00340 0.58 0.56 0.60 46 41251 43 4 27 12 36
SRP_00347 0.93 0.93 0.94 89 46570 18 0 6 12 7
SRP_00361 0.77 0.77 0.77 69 41815 33 5 16 12 21
SRP_00368 0.90 0.88 0.92 86 43863 19 0 7 12 12
SRP_00371 0.76 0.71 0.82 58 36244 22 2 11 9 24
SRP_00382 0.53 0.38 0.74 64 141691 31 0 23 8 106
TMR_00173 0.41 0.31 0.54 13 42171 18 2 9 7 29
TMR_00357 0.19 0.13 0.28 12 82985 38 4 27 7 80
TMR_00601 0.67 0.62 0.72 26 58960 30 1 9 20 16
TMR_00603 0.78 0.70 0.88 30 60344 30 0 4 26 13
TMR_00611 0.48 0.35 0.65 36 61370 19 4 15 0 66
TMR_00696 0.35 0.25 0.51 28 85023 34 3 24 7 86

^top



Performance of RNAwolf - scored lower in this pairwise comparison

1. Total counts & total scores for RNAwolf

Total Base Pair Counts
Total TP 16763
Total TN 25232581
Total FP 33557
Total FP CONTRA 4235
Total FP INCONS 24165
Total FP COMP 5157
Total FN 26330
Total Scores
MCC 0.379
Average MCC ± 95% Confidence Intervals 0.375 ± 0.017
Sensitivity 0.389
Positive Predictive Value 0.371
Nr of predictions 431

^top



2. Individual counts for RNAwolf [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.76 0.73 0.80 55 34122 33 1 13 19 20
ASE_00002 0.56 0.53 0.58 39 35444 45 2 26 17 34
ASE_00004 0.51 0.51 0.51 49 47799 61 8 39 14 48
ASE_00005 0.46 0.46 0.47 54 57854 68 12 50 6 63
ASE_00006 0.32 0.33 0.30 31 47484 83 10 61 12 62
ASE_00007 0.30 0.30 0.31 33 59577 81 11 64 6 77
ASE_00009 0.39 0.39 0.40 26 26041 48 4 35 9 41
ASE_00010 0.34 0.38 0.32 31 49672 74 15 52 7 51
ASE_00012 0.54 0.54 0.54 67 73797 68 5 51 12 56
ASE_00014 0.36 0.38 0.35 40 54171 80 16 58 6 66
ASE_00017 0.11 0.13 0.10 8 50962 92 14 56 22 56
ASE_00018 0.53 0.54 0.53 72 80465 72 4 60 8 62
ASE_00020 0.63 0.62 0.64 78 73799 56 6 37 13 48
ASE_00021 0.45 0.44 0.46 70 104045 94 7 74 13 90
ASE_00022 0.45 0.45 0.44 56 82901 79 9 62 8 68
ASE_00023 0.48 0.50 0.46 63 84117 87 12 63 12 64
ASE_00025 0.26 0.30 0.24 21 78517 111 23 45 43 50
ASE_00026 0.41 0.42 0.41 46 59573 75 6 60 9 64
ASE_00028 0.46 0.47 0.45 59 84536 90 9 62 19 67
ASE_00029 0.27 0.29 0.26 35 82894 112 15 84 13 87
ASE_00030 0.49 0.46 0.52 67 85361 72 6 57 9 78
ASE_00031 0.46 0.46 0.46 58 86609 81 8 61 12 68
ASE_00032 0.32 0.31 0.33 37 80087 93 2 74 17 81
ASE_00033 0.11 0.12 0.11 14 64857 111 8 101 2 107
ASE_00035 0.22 0.23 0.22 27 70375 102 22 76 4 91
ASE_00036 0.42 0.42 0.43 55 75728 79 4 68 7 77
ASE_00037 0.36 0.35 0.39 38 59242 67 8 52 7 72
ASE_00038 0.41 0.41 0.41 41 53529 66 7 51 8 60
ASE_00040 0.31 0.32 0.30 43 78860 110 16 84 10 90
ASE_00041 0.37 0.36 0.39 39 57530 71 7 54 10 69
ASE_00042 0.31 0.31 0.31 45 89957 109 9 89 11 100
ASE_00044 0.48 0.48 0.48 50 54511 71 5 49 17 55
ASE_00045 0.35 0.35 0.35 28 47197 69 6 47 16 52
ASE_00046 0.21 0.21 0.22 22 50301 81 6 74 1 81
ASE_00047 0.12 0.12 0.12 15 74178 121 5 107 9 115
ASE_00052 0.17 0.17 0.17 19 61315 94 14 77 3 93
ASE_00053 0.44 0.44 0.44 58 79269 85 12 62 11 75
ASE_00057 0.53 0.53 0.54 71 82083 73 6 55 12 63
ASE_00064 0.19 0.19 0.19 17 45361 82 13 60 9 72
ASE_00066 0.50 0.51 0.49 66 72254 74 7 63 4 64
ASE_00068 0.38 0.38 0.38 32 37591 57 8 44 5 53
ASE_00069 0.57 0.56 0.58 78 82893 67 8 49 10 62
ASE_00074 0.36 0.36 0.37 43 67779 81 9 65 7 76
ASE_00075 0.59 0.57 0.60 93 108656 77 7 55 15 69
ASE_00076 0.43 0.43 0.44 51 68148 77 10 56 11 67
ASE_00077 0.36 0.37 0.35 32 45059 70 15 44 11 54
ASE_00078 0.28 0.29 0.27 24 42983 71 8 56 7 59
ASE_00079 0.47 0.47 0.48 47 55513 64 7 44 13 53
ASE_00080 0.36 0.37 0.36 45 71507 88 5 74 9 78
ASE_00081 0.21 0.22 0.21 21 49668 87 9 72 6 76
ASE_00082 0.44 0.46 0.43 53 70377 86 8 62 16 63
ASE_00083 0.29 0.29 0.28 32 62368 94 11 70 13 78
ASE_00084 0.59 0.61 0.57 60 53523 55 7 38 10 39
ASE_00087 0.29 0.28 0.31 41 88276 102 8 85 9 103
ASE_00090 0.32 0.33 0.31 33 55504 91 4 70 17 68
ASE_00092 0.51 0.52 0.50 59 63428 75 11 48 16 54
ASE_00096 0.62 0.64 0.60 74 63422 58 13 37 8 41
ASE_00099 0.56 0.55 0.56 66 64503 67 3 48 16 54
ASE_00100 0.22 0.24 0.20 18 82127 121 13 57 51 58
ASE_00102 0.52 0.51 0.54 85 117697 89 7 66 16 81
ASE_00104 0.40 0.39 0.41 46 64148 80 2 65 13 73
ASE_00105 0.57 0.57 0.57 63 64151 57 10 37 10 48
ASE_00107 0.51 0.53 0.50 67 73020 74 9 57 8 60
ASE_00108 0.19 0.22 0.16 14 46885 92 14 58 20 49
ASE_00111 0.20 0.25 0.17 14 50002 85 25 45 15 43
ASE_00112 0.55 0.56 0.53 65 75344 66 4 53 9 51
ASE_00114 0.32 0.35 0.30 27 45361 77 8 55 14 50
ASE_00115 0.28 0.29 0.28 29 54512 85 6 68 11 72
ASE_00116 0.05 0.06 0.05 4 31549 79 14 59 6 62
ASE_00118 0.28 0.30 0.26 31 60607 93 9 79 5 71
ASE_00119 0.52 0.53 0.50 57 62722 71 10 46 15 51
ASE_00120 0.20 0.20 0.20 19 46877 79 15 60 4 75
ASE_00121 0.15 0.15 0.14 14 45052 88 10 74 4 78
ASE_00122 0.36 0.36 0.35 32 43274 62 12 47 3 56
ASE_00123 0.46 0.48 0.45 41 38412 58 9 41 8 44
ASE_00125 0.48 0.48 0.48 42 39252 53 12 34 7 46
ASE_00128 0.45 0.46 0.43 46 53195 70 6 54 10 54
ASE_00129 0.34 0.35 0.33 39 62716 87 8 72 7 72
ASE_00131 0.47 0.46 0.48 39 39258 54 10 33 11 46
ASE_00132 0.42 0.43 0.42 41 50305 63 13 44 6 54
ASE_00134 0.49 0.49 0.48 47 50305 59 8 43 8 48
ASE_00135 0.45 0.46 0.45 50 63078 74 12 50 12 59
ASE_00136 0.27 0.27 0.27 25 48112 84 4 64 16 67
ASE_00137 0.47 0.49 0.45 48 48410 75 3 55 17 50
ASE_00138 0.54 0.56 0.54 45 40386 55 6 33 16 36
ASE_00139 0.56 0.55 0.57 57 54185 52 7 36 9 47
ASE_00140 0.51 0.50 0.52 62 70757 67 7 50 10 63
ASE_00142 0.28 0.28 0.27 34 67037 95 13 77 5 88
ASE_00145 0.24 0.25 0.24 28 70006 101 8 83 10 83
ASE_00146 0.42 0.43 0.42 53 70749 81 12 62 7 71
ASE_00148 0.36 0.36 0.36 56 112419 106 14 86 6 98
ASE_00151 0.62 0.61 0.63 60 51908 47 9 26 12 38
ASE_00153 0.33 0.38 0.29 28 57534 96 15 53 28 45
ASE_00154 0.42 0.42 0.43 45 65236 73 8 52 13 62
ASE_00155 0.41 0.42 0.41 59 93384 92 4 81 7 83
ASE_00161 0.34 0.37 0.31 32 53525 82 7 64 11 55
ASE_00163 0.40 0.40 0.40 37 53208 82 0 56 26 56
ASE_00165 0.17 0.18 0.17 18 52870 93 10 77 6 83
ASE_00168 0.08 0.09 0.07 6 60637 105 22 61 22 58
ASE_00169 0.51 0.50 0.51 54 57185 70 5 47 18 53
ASE_00170 0.35 0.37 0.34 34 48728 76 9 57 10 59
ASE_00171 0.57 0.60 0.55 56 48414 56 8 38 10 38
ASE_00172 0.39 0.41 0.37 43 58880 80 9 64 7 63
ASE_00174 0.48 0.50 0.47 55 60957 77 11 52 14 54
ASE_00175 0.55 0.56 0.54 60 59919 62 10 42 10 47
ASE_00176 0.41 0.43 0.41 47 59915 80 7 62 11 63
ASE_00179 0.26 0.27 0.25 23 44162 79 13 55 11 61
ASE_00180 0.43 0.43 0.43 43 51259 71 7 51 13 57
ASE_00181 0.39 0.41 0.37 43 57514 78 9 64 5 63
ASE_00182 0.43 0.43 0.44 58 84123 86 5 69 12 78
ASE_00183 0.45 0.44 0.46 50 61316 71 8 51 12 63
ASE_00184 0.44 0.46 0.42 47 54504 69 11 53 5 55
ASE_00185 0.49 0.49 0.49 63 73407 73 10 56 7 65
ASE_00186 0.43 0.42 0.44 55 78877 87 9 62 16 77
ASE_00187 0.28 0.29 0.28 33 68517 96 13 72 11 82
ASE_00189 0.34 0.35 0.34 36 63083 78 14 57 7 66
ASE_00190 0.56 0.54 0.57 49 45365 50 1 36 13 41
ASE_00191 0.57 0.59 0.55 36 29581 43 5 24 14 25
ASE_00192 0.51 0.51 0.51 68 84533 73 9 56 8 65
ASE_00194 0.41 0.41 0.42 49 73419 79 4 64 11 70
ASE_00196 0.57 0.59 0.55 44 31546 50 4 32 14 31
ASE_00197 0.31 0.32 0.31 46 89104 114 10 93 11 99
ASE_00198 0.28 0.27 0.28 28 52551 76 7 64 5 74
ASE_00203 0.54 0.55 0.52 53 46564 58 10 38 10 43
ASE_00204 0.51 0.53 0.49 59 67775 70 12 50 8 53
ASE_00205 0.17 0.19 0.16 17 45949 90 17 73 0 73
ASE_00209 0.30 0.30 0.31 26 42988 63 8 49 6 62
ASE_00210 0.62 0.63 0.61 41 27194 39 9 17 13 24
ASE_00212 0.29 0.29 0.28 43 93810 117 10 98 9 105
ASE_00213 0.68 0.65 0.70 43 27200 31 6 12 13 23
ASE_00214 0.44 0.46 0.43 47 56171 76 2 60 14 56
ASE_00215 0.28 0.28 0.29 28 48418 83 6 64 13 71
ASE_00216 0.25 0.26 0.25 21 39255 67 8 56 3 61
ASE_00217 0.34 0.33 0.35 30 40385 63 5 50 8 60
ASE_00221 0.36 0.37 0.35 43 64496 87 11 70 6 74
ASE_00222 0.30 0.32 0.29 50 111929 125 20 102 3 107
ASE_00227 0.21 0.20 0.21 27 78875 107 6 95 6 106
ASE_00228 0.36 0.40 0.32 34 46866 76 20 51 5 52
ASE_00229 0.09 0.10 0.09 9 42384 101 6 87 8 78
ASE_00231 0.56 0.58 0.53 56 47790 61 8 41 12 40
ASE_00232 0.37 0.39 0.36 33 38411 70 4 55 11 51
ASE_00234 0.54 0.54 0.55 70 75338 70 8 50 12 59
ASE_00237 0.00 0.00 0.00 0 45662 110 30 61 19 56
ASE_00238 0.56 0.57 0.56 65 64144 64 10 42 12 49
ASE_00240 0.31 0.31 0.32 29 46573 73 9 54 10 64
ASE_00241 0.62 0.64 0.59 56 43861 48 6 33 9 31
ASE_00242 0.42 0.41 0.44 46 60970 62 14 45 3 66
ASE_00245 0.38 0.37 0.38 29 55202 82 1 46 35 49
ASE_00246 0.07 0.07 0.06 5 48121 94 25 54 15 62
ASE_00247 0.10 0.13 0.08 8 54188 105 25 64 16 56
ASE_00248 0.32 0.31 0.33 35 62376 75 7 63 5 79
ASE_00250 0.37 0.36 0.38 47 78880 83 10 66 7 84
ASE_00252 0.30 0.30 0.31 50 115281 120 9 100 11 118
ASE_00254 0.36 0.39 0.34 32 36761 69 10 53 6 50
ASE_00255 0.46 0.47 0.45 61 74555 83 9 66 8 69
ASE_00257 0.56 0.57 0.56 55 50941 56 9 35 12 42
ASE_00258 0.26 0.28 0.24 15 26733 56 10 38 8 39
ASE_00259 0.35 0.35 0.36 42 73037 85 9 65 11 79
ASE_00263 0.15 0.16 0.15 19 70373 111 9 99 3 101
ASE_00264 0.43 0.44 0.43 44 49038 69 6 53 10 56
ASE_00267 0.36 0.35 0.37 31 45067 62 8 44 10 57
ASE_00270 0.51 0.50 0.52 64 72268 71 4 54 13 64
ASE_00274 0.30 0.29 0.30 30 55512 78 13 56 9 73
ASE_00277 0.28 0.30 0.26 27 48103 84 14 61 9 64
ASE_00279 0.29 0.29 0.29 29 53202 80 4 66 10 72
ASE_00280 0.20 0.20 0.20 20 51905 85 5 73 7 78
ASE_00281 0.33 0.34 0.32 30 44458 73 11 52 10 58
ASE_00282 0.23 0.24 0.24 30 77688 105 10 87 8 97
ASE_00283 0.46 0.48 0.45 51 61662 74 12 51 11 56
ASE_00284 0.08 0.08 0.08 9 58197 111 9 96 6 99
ASE_00285 0.27 0.28 0.27 34 68878 102 9 85 8 88
ASE_00286 0.57 0.54 0.61 50 46583 42 6 26 10 42
ASE_00287 0.30 0.30 0.30 31 54842 81 6 67 8 72
ASE_00288 0.27 0.27 0.28 25 45967 68 12 52 4 68
ASE_00289 0.67 0.66 0.68 104 100873 60 6 42 12 53
ASE_00292 0.38 0.38 0.39 52 81676 93 8 74 11 86
ASE_00294 0.38 0.37 0.38 63 114317 107 9 92 6 108
ASE_00295 0.49 0.49 0.50 64 73792 73 10 54 9 67
ASE_00296 0.31 0.30 0.32 44 91669 101 7 86 8 101
ASE_00297 0.41 0.42 0.40 41 52873 73 4 57 12 57
ASE_00298 0.29 0.29 0.30 33 67418 86 8 69 9 80
ASE_00299 0.45 0.47 0.43 47 49346 69 6 56 7 53
ASE_00303 0.46 0.47 0.44 45 67794 83 8 49 26 50
ASE_00305 0.15 0.18 0.14 15 54504 107 20 76 11 70
ASE_00313 0.11 0.11 0.11 10 62387 106 11 73 22 79
ASE_00316 0.30 0.34 0.27 33 107758 124 18 71 35 65
ASE_00318 0.41 0.42 0.40 49 80077 79 13 61 5 69
ASE_00321 0.27 0.28 0.26 25 54520 80 13 57 10 63
ASE_00327 0.44 0.48 0.40 43 57184 75 21 43 11 46
ASE_00328 0.51 0.49 0.53 55 72667 61 5 44 12 57
ASE_00329 0.53 0.54 0.52 34 40689 58 6 26 26 29
ASE_00330 0.40 0.42 0.38 38 56181 78 12 49 17 52
ASE_00332 0.23 0.23 0.24 32 81674 118 5 99 14 106
ASE_00335 0.58 0.57 0.58 66 75353 65 5 42 18 50
ASE_00337 0.45 0.44 0.47 31 39274 59 1 34 24 40
ASE_00338 0.35 0.37 0.34 36 66323 87 14 57 16 62
ASE_00339 0.51 0.52 0.50 62 80077 77 3 58 16 57
ASE_00340 0.14 0.15 0.14 13 45963 87 8 72 7 72
ASE_00342 0.50 0.50 0.50 58 62365 70 9 49 12 57
ASE_00343 0.51 0.50 0.53 56 83331 75 2 47 26 57
ASE_00346 0.26 0.26 0.27 25 48112 83 9 59 15 72
ASE_00353 0.19 0.21 0.19 22 57852 106 9 87 10 85
ASE_00359 0.16 0.18 0.15 14 42682 87 15 67 5 66
ASE_00360 0.25 0.28 0.23 18 29326 62 10 49 3 47
ASE_00361 0.36 0.37 0.35 47 75333 94 11 75 8 80
ASE_00362 0.43 0.44 0.42 40 48110 66 10 45 11 51
ASE_00363 0.29 0.31 0.27 29 51254 81 12 65 4 65
ASE_00364 0.38 0.39 0.38 41 54177 77 9 58 10 64
ASE_00366 0.19 0.20 0.17 20 58538 98 14 81 3 78
ASE_00367 0.26 0.27 0.25 23 42978 79 8 62 9 63
ASE_00369 0.34 0.36 0.33 38 55831 88 3 73 12 69
ASE_00370 0.29 0.30 0.28 25 41816 75 7 57 11 59
ASE_00372 0.21 0.22 0.21 22 51897 88 11 73 4 78
ASE_00374 0.48 0.48 0.48 42 44763 54 2 43 9 46
ASE_00375 0.34 0.32 0.37 35 60284 67 9 50 8 75
ASE_00376 0.45 0.46 0.44 48 56843 71 4 58 9 57
ASE_00377 0.65 0.65 0.64 70 57521 52 8 31 13 37
ASE_00379 0.25 0.26 0.25 23 45964 77 10 59 8 66
ASE_00380 0.28 0.28 0.29 28 54848 82 7 63 12 71
ASE_00382 0.36 0.37 0.35 31 41816 69 12 46 11 53
ASE_00383 0.44 0.43 0.45 45 54514 70 4 52 14 60
ASE_00384 0.27 0.28 0.27 26 48418 84 10 62 12 66
ASE_00385 0.52 0.52 0.53 42 41825 54 7 31 16 39
ASE_00386 0.39 0.40 0.38 38 50303 74 6 56 12 58
ASE_00387 0.47 0.47 0.47 49 55841 66 8 47 11 55
ASE_00388 0.29 0.30 0.28 27 45657 84 7 62 15 62
ASE_00390 0.38 0.40 0.36 34 42100 71 9 52 10 51
ASE_00393 0.27 0.28 0.27 26 47798 77 6 65 6 67
ASE_00394 0.29 0.29 0.30 27 46881 73 6 57 10 66
ASE_00395 0.54 0.56 0.52 47 41526 54 12 31 11 37
ASE_00396 0.28 0.30 0.27 25 41522 78 11 58 9 58
ASE_00397 0.43 0.43 0.42 45 54509 75 7 54 14 60
ASE_00398 0.35 0.36 0.35 37 55839 79 6 63 10 67
ASE_00400 0.63 0.64 0.62 68 57860 54 9 33 12 38
ASE_00401 0.39 0.40 0.38 51 76893 91 12 72 7 75
ASE_00402 0.44 0.45 0.44 38 42400 59 7 41 11 47
ASE_00403 0.24 0.23 0.24 25 55841 94 8 71 15 82
ASE_00404 0.25 0.28 0.23 24 42967 83 16 64 3 61
ASE_00406 0.33 0.32 0.34 30 48740 71 5 53 13 64
ASE_00411 0.39 0.40 0.39 36 49362 70 10 47 13 53
ASE_00412 0.25 0.25 0.25 26 58206 86 11 68 7 79
ASE_00413 0.60 0.62 0.59 50 44466 49 10 25 14 31
ASE_00414 0.34 0.34 0.34 32 46267 75 6 55 14 63
ASE_00415 0.47 0.48 0.46 49 54839 67 5 53 9 54
ASE_00416 0.32 0.32 0.32 41 77291 98 8 81 9 86
ASE_00417 0.42 0.44 0.40 44 54506 75 9 56 10 56
ASE_00418 0.17 0.19 0.16 14 38696 80 6 65 9 61
ASE_00419 0.51 0.52 0.49 54 54836 66 9 47 10 49
ASE_00420 0.56 0.57 0.55 36 43300 55 9 20 26 27
ASE_00422 0.24 0.24 0.24 23 46875 85 1 72 12 71
ASE_00423 0.36 0.38 0.34 41 56833 84 9 70 5 68
ASE_00426 0.31 0.33 0.29 36 60951 91 10 78 3 72
ASE_00427 0.08 0.11 0.06 5 40673 91 35 42 14 41
ASE_00428 0.29 0.30 0.29 37 76507 103 11 81 11 88
ASE_00430 0.52 0.53 0.52 51 46873 56 1 46 9 46
ASE_00431 0.54 0.54 0.54 51 46266 57 7 36 14 44
ASE_00434 0.63 0.64 0.63 70 68154 63 4 37 22 40
ASE_00437 0.30 0.30 0.31 41 79268 98 3 89 6 94
ASE_00438 0.32 0.34 0.30 39 65935 97 16 76 5 77
ASE_00441 0.45 0.46 0.45 51 64147 73 3 60 10 61
ASE_00443 0.96 0.96 0.96 48 26746 38 0 2 36 2
ASE_00447 0.61 0.59 0.62 69 60267 47 9 33 5 47
ASE_00448 0.45 0.43 0.48 48 64161 65 8 44 13 64
ASE_00451 0.48 0.49 0.47 61 70746 77 7 62 8 64
ASE_00454 0.15 0.17 0.14 11 43286 82 19 49 14 52
CRW_00013 0.03 0.03 0.03 4 103598 147 24 114 9 111
CRW_00016 0.24 0.23 0.24 28 77305 101 10 78 13 92
CRW_00610 0.52 0.52 0.52 42 36234 53 4 35 14 39
CRW_00613 0.60 0.62 0.59 48 34898 50 1 33 16 30
CRW_00614 0.09 0.12 0.07 7 121673 167 34 57 76 50
CRW_00618 0.01 0.02 0.01 1 56208 107 13 58 36 60
CRW_00619 0.27 0.32 0.24 23 164928 154 28 46 80 50
CRW_00620 0.31 0.33 0.28 21 150901 165 8 45 112 42
CRW_00621 0.26 0.30 0.23 21 153090 163 20 50 93 50
CRW_00623 0.11 0.13 0.10 11 129683 155 28 73 54 72
CRW_00633 0.29 0.29 0.30 31 63442 76 12 61 3 75
CRW_00634 0.19 0.22 0.17 21 64493 110 25 81 4 73
CRW_00670 0.35 0.35 0.35 42 70006 81 12 65 4 78
CRW_00671 0.13 0.13 0.13 15 62723 100 11 86 3 102
CRW_00672 0.06 0.06 0.06 7 72276 114 17 90 7 104
CRW_00674 0.28 0.28 0.28 35 83310 106 12 79 15 89
CRW_00676 0.16 0.17 0.16 19 93407 113 22 80 11 96
CRW_00692 0.18 0.19 0.18 17 68539 100 16 63 21 73
PDB_00827 0.58 0.58 0.57 47 26946 37 6 29 2 34
PDB_00919 0.48 0.46 0.51 47 44161 51 5 40 6 56
RFA_00597 0.41 0.44 0.39 48 97780 99 18 57 24 61
RFA_00598 0.18 0.20 0.17 20 84546 111 30 70 11 81
RFA_00599 0.31 0.34 0.28 38 101339 111 33 65 13 73
RFA_00600 0.06 0.08 0.05 8 120145 162 45 97 20 92
RFA_00601 0.37 0.42 0.33 48 99088 112 28 71 13 66
RFA_00602 0.32 0.35 0.30 41 101337 128 16 81 31 75
RFA_00606 0.39 0.41 0.36 16 21277 43 8 20 15 23
RFA_00620 0.21 0.23 0.19 9 21898 49 10 28 11 30
RFA_00621 0.30 0.32 0.29 24 46276 83 13 47 23 52
RFA_00623 0.48 0.47 0.48 37 43879 60 5 35 20 41
RFA_00624 0.19 0.21 0.18 13 30062 67 18 42 7 48
RFA_00626 0.08 0.09 0.08 8 56511 99 24 73 2 79
RFA_00627 0.38 0.39 0.37 34 56862 73 13 44 16 53
RFA_00628 0.58 0.57 0.59 49 57208 64 7 27 30 37
RFA_00630 0.48 0.47 0.49 41 56869 66 9 34 23 46
RFA_00639 0.10 0.10 0.09 9 54519 94 13 74 7 78
RFA_00805 0.30 0.31 0.29 47 133225 121 13 101 7 103
RFA_00814 0.20 0.22 0.18 9 25149 62 12 30 20 32
RFA_00815 0.47 0.54 0.41 22 24477 47 14 18 15 19
RFA_00816 0.00 0.00 0.00 0 23162 66 17 41 8 41
RFA_00817 0.00 0.00 0.00 0 21892 57 12 41 4 41
RFA_00818 0.25 0.27 0.23 11 20253 51 12 25 14 30
RFA_00819 0.16 0.17 0.16 7 27921 70 6 32 32 34
RFA_00820 0.53 0.53 0.53 85 151364 102 9 67 26 75
RFA_00830 0.27 0.28 0.27 43 152469 144 14 102 28 111
SRP_00002 0.67 0.65 0.69 66 45054 38 6 24 8 36
SRP_00006 0.49 0.49 0.49 49 45654 54 4 46 4 52
SRP_00009 0.22 0.22 0.22 22 46567 78 10 66 2 80
SRP_00011 0.10 0.11 0.09 11 46242 107 10 97 0 93
SRP_00012 0.28 0.29 0.28 29 46258 80 9 64 7 72
SRP_00015 0.30 0.30 0.30 30 46259 73 8 63 2 69
SRP_00016 0.79 0.81 0.78 88 47782 44 1 24 19 21
SRP_00018 0.43 0.44 0.41 36 38415 63 11 41 11 45
SRP_00019 0.36 0.35 0.38 32 35961 59 3 50 6 59
SRP_00024 0.51 0.49 0.53 43 37594 49 7 31 11 44
SRP_00026 0.68 0.68 0.69 60 36769 45 0 27 18 28
SRP_00027 0.52 0.51 0.54 44 37046 48 4 34 10 43
SRP_00030 0.30 0.31 0.29 27 36764 69 5 60 4 61
SRP_00031 0.64 0.61 0.67 54 36234 37 3 24 10 35
SRP_00037 0.17 0.17 0.17 15 36496 80 4 70 6 72
SRP_00050 0.85 0.84 0.86 83 44753 34 0 14 20 16
SRP_00053 0.02 0.02 0.02 2 45053 96 14 81 1 92
SRP_00060 0.60 0.59 0.60 59 44453 50 1 38 11 41
SRP_00061 0.39 0.41 0.38 41 44742 75 10 57 8 59
SRP_00066 0.14 0.14 0.14 14 45349 89 12 76 1 86
SRP_00069 0.29 0.28 0.29 24 34371 62 6 52 4 61
SRP_00070 0.20 0.24 0.17 29 126588 151 37 102 12 92
SRP_00073 0.43 0.48 0.39 34 38973 64 14 39 11 37
SRP_00079 0.53 0.55 0.51 48 41811 63 9 37 17 40
SRP_00085 0.44 0.45 0.45 45 45350 59 10 46 3 56
SRP_00086 0.62 0.62 0.61 62 44152 51 4 35 12 38
SRP_00087 0.27 0.34 0.22 20 37309 84 30 42 12 38
SRP_00088 0.38 0.38 0.38 34 34102 62 5 50 7 55
SRP_00089 0.66 0.67 0.66 60 35687 39 4 27 8 30
SRP_00090 0.41 0.39 0.44 35 35432 51 6 38 7 55
SRP_00091 0.57 0.61 0.53 58 52865 65 10 42 13 37
SRP_00099 0.55 0.57 0.53 54 44749 60 9 38 13 41
SRP_00102 0.44 0.44 0.45 44 44454 60 4 49 7 57
SRP_00103 0.67 0.68 0.66 69 45346 44 3 33 8 33
SRP_00104 0.16 0.17 0.15 12 34372 73 14 55 4 57
SRP_00117 0.65 0.63 0.67 64 45356 40 2 29 9 38
SRP_00123 0.29 0.29 0.30 26 36499 63 7 53 3 65
SRP_00124 0.54 0.56 0.53 48 37037 55 8 35 12 37
SRP_00127 0.40 0.42 0.39 50 72261 83 14 65 4 69
SRP_00130 0.21 0.22 0.20 21 49666 85 6 77 2 76
SRP_00136 0.27 0.31 0.24 22 44161 76 15 55 6 49
SRP_00142 0.21 0.23 0.20 21 45949 92 12 74 6 72
SRP_00143 0.42 0.44 0.40 44 49660 75 6 60 9 57
SRP_00144 0.36 0.38 0.34 36 46560 80 8 61 11 58
SRP_00148 0.28 0.30 0.26 26 49985 93 7 68 18 61
SRP_00152 0.31 0.31 0.32 32 45653 73 9 59 5 71
SRP_00153 0.24 0.24 0.24 26 46862 85 6 77 2 81
SRP_00157 0.24 0.26 0.23 19 44169 77 16 49 12 53
SRP_00158 0.00 0.00 0.00 0 124087 164 45 119 0 115
SRP_00160 0.25 0.25 0.24 33 86184 106 14 89 3 97
SRP_00171 0.17 0.19 0.16 17 45343 91 13 78 0 71
SRP_00173 0.27 0.26 0.28 23 38144 69 0 59 10 67
SRP_00174 0.26 0.27 0.26 23 38694 70 12 52 6 63
SRP_00175 0.18 0.19 0.17 16 44457 86 10 68 8 68
SRP_00178 0.17 0.17 0.18 17 45657 84 9 70 5 85
SRP_00179 0.03 0.03 0.03 3 45955 98 7 91 0 102
SRP_00181 0.09 0.09 0.10 9 45963 84 12 72 0 93
SRP_00182 0.34 0.35 0.34 35 45952 72 13 56 3 66
SRP_00184 0.24 0.24 0.25 24 45961 75 7 64 4 76
SRP_00188 0.26 0.27 0.25 21 31041 64 13 50 1 58
SRP_00197 0.36 0.37 0.36 37 49353 73 6 59 8 64
SRP_00198 0.13 0.14 0.13 14 50935 101 10 81 10 89
SRP_00199 0.18 0.19 0.18 20 50930 94 7 83 4 85
SRP_00201 0.78 0.79 0.77 88 47780 40 7 20 13 23
SRP_00202 0.85 0.86 0.83 101 54163 31 5 16 10 16
SRP_00203 0.72 0.75 0.69 79 48714 53 2 33 18 26
SRP_00204 0.71 0.69 0.74 70 49046 45 1 24 20 32
SRP_00206 0.74 0.75 0.73 81 47784 43 6 24 13 27
SRP_00208 0.80 0.80 0.80 81 46564 36 3 17 16 20
SRP_00228 0.61 0.61 0.62 58 45357 51 9 27 15 37
SRP_00230 0.44 0.43 0.45 39 39534 55 4 44 7 51
SRP_00234 0.71 0.71 0.71 61 36229 43 4 21 18 25
SRP_00239 0.22 0.23 0.21 21 50305 78 14 63 1 72
SRP_00240 0.57 0.60 0.55 61 48095 57 8 41 8 41
SRP_00241 0.55 0.60 0.51 49 45959 61 14 34 13 33
SRP_00247 0.00 0.00 0.00 0 47177 103 23 78 2 87
SRP_00252 0.32 0.35 0.30 31 49039 79 12 59 8 58
SRP_00253 0.22 0.24 0.20 22 49346 89 14 73 2 68
SRP_00254 0.00 0.00 0.00 0 32310 75 18 57 0 61
SRP_00255 0.56 0.59 0.54 55 47485 59 7 39 13 39
SRP_00257 0.68 0.69 0.67 75 50928 49 5 32 12 33
SRP_00260 0.58 0.60 0.57 60 47790 58 8 37 13 40
SRP_00265 0.16 0.19 0.14 14 41225 94 20 69 5 59
SRP_00267 0.72 0.71 0.74 68 44459 45 4 20 21 28
SRP_00276 0.80 0.80 0.80 88 50611 41 1 21 19 22
SRP_00278 0.69 0.70 0.69 74 45948 45 2 32 11 31
SRP_00282 0.08 0.10 0.07 6 43273 95 22 64 9 57
SRP_00286 0.37 0.36 0.37 63 136856 122 6 101 15 111
SRP_00287 0.27 0.28 0.26 45 141605 143 25 103 15 117
SRP_00290 0.31 0.32 0.31 43 100438 105 12 83 10 92
SRP_00292 0.29 0.29 0.29 50 137375 136 4 121 11 123
SRP_00294 0.31 0.31 0.31 52 129117 130 9 108 13 115
SRP_00299 0.06 0.06 0.06 6 44145 102 10 92 0 93
SRP_00300 0.00 0.00 0.00 0 44158 95 10 85 0 94
SRP_00301 0.50 0.48 0.52 41 32561 49 2 36 11 45
SRP_00302 0.22 0.23 0.22 19 41528 74 11 58 5 62
SRP_00308 0.27 0.26 0.27 23 36231 62 13 48 1 65
SRP_00317 0.14 0.14 0.14 14 45051 89 6 79 4 84
SRP_00321 0.73 0.72 0.74 78 47480 39 4 24 11 30
SRP_00322 0.73 0.72 0.73 79 48408 38 3 26 9 30
SRP_00323 0.74 0.73 0.76 78 47175 33 1 24 8 29
SRP_00328 0.32 0.33 0.31 28 39530 68 12 51 5 57
SRP_00329 0.31 0.33 0.30 28 39810 75 5 60 10 57
SRP_00330 0.64 0.69 0.60 66 49976 58 9 35 14 29
SRP_00331 0.61 0.61 0.61 53 37588 49 3 31 15 34
SRP_00332 0.88 0.88 0.89 93 50298 34 1 11 22 13
SRP_00335 0.27 0.38 0.19 15 35166 94 30 34 30 24
SRP_00337 0.61 0.60 0.61 55 35421 48 3 32 13 36
SRP_00339 0.68 0.69 0.67 65 44454 47 7 25 15 29
SRP_00340 0.34 0.37 0.33 30 41236 75 10 52 13 52
SRP_00347 0.64 0.66 0.62 63 46564 51 5 33 13 33
SRP_00361 0.32 0.32 0.32 29 41815 65 7 54 4 61
SRP_00368 0.52 0.52 0.52 51 43857 56 5 43 8 47
SRP_00371 0.43 0.46 0.40 38 36221 63 11 45 7 44
SRP_00382 0.31 0.31 0.32 53 141611 125 8 106 11 117
TMR_00173 0.16 0.19 0.14 8 42138 90 11 38 41 34
TMR_00357 0.29 0.33 0.26 30 82913 101 26 59 16 62
TMR_00601 0.32 0.36 0.28 15 58943 88 14 24 50 27
TMR_00603 0.43 0.49 0.38 21 60322 91 11 24 56 22
TMR_00611 0.46 0.49 0.43 50 61309 69 22 44 3 52
TMR_00696 0.24 0.25 0.24 28 84961 109 13 76 20 86

^top


Matthews Correlation Coeffient, Sensitivity and Positive Predictive Value have been calculated based on the paper by Gardener & Giegerich, 2004.