CompaRNA - on-line benchmarks of RNA structure prediction methods
Home

Methods
Datasets
Rankings
RNA 2D Atlas

Help
FAQ

Contact us
RSS feeds
Twitter

Table of contents:

  1. Overview

  2. Performance Plots

  3. Performance of MXScarna(seed) - scored higher in this pairwise comparison

  4. Performance of PknotsRG - scored lower in this pairwise comparison

  5. Compile and download dataset for MXScarna(seed) & PknotsRG [.zip] - may take several seconds...


Overview

Metric MXScarna(seed) PknotsRG
MCC 0.637 > 0.559
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020 > 0.555 ± 0.018
Sensitivity 0.535 < 0.554
Positive Predictive Value 0.759 > 0.566
Total TP 23071 < 23874
Total TN 25247346 > 25235584
Total FP 10057 < 21263
Total FP CONTRA 971 < 2772
Total FP INCONS 6356 < 15514
Total FP COMP 2730 < 2977
Total FN 20022 > 19219
P-value 3.56938820447e-08

^top




Performance plots


  1. Comparison of performance of MXScarna(seed) and PknotsRG. Positive Predictive Value (PPV) is plotted against sensitivity. Each dot represents a single test of each method. See tables below for raw data (individual counts for MXScarna(seed) and PknotsRG).

  2. Average Matthews Correlation Coefficients (MCC) with 95% confidence intervals (CIs) were plotted for different RNA families, for which at least 3 members were present in the benchmarking dataset. 'n' denotes the number of MCCs used to calculate the average and CI. See tables below for raw data (individual counts for MXScarna(seed) and PknotsRG).

  3. Comparison of average Matthews Correlation Coefficients (MCCs) for MXScarna(seed) and PknotsRG. The whiskers correspond to 95% confidence intervals (CIs). 'n' denotes the number of MCCs used to calculate average MCCs and CIs. See tables below for raw data (individual counts for MXScarna(seed) and PknotsRG).

^top





Performance of MXScarna(seed) - scored higher in this pairwise comparison

1. Total counts & total scores for MXScarna(seed)

Total Base Pair Counts
Total TP 23071
Total TN 25247346
Total FP 10057
Total FP CONTRA 971
Total FP INCONS 6356
Total FP COMP 2730
Total FN 20022
Total Scores
MCC 0.637
Average MCC ± 95% Confidence Intervals 0.622 ± 0.020
Sensitivity 0.535
Positive Predictive Value 0.759
Nr of predictions 431

^top



2. Individual counts for MXScarna(seed) [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.67 0.51 0.88 38 34148 6 0 5 1 37
ASE_00002 0.68 0.53 0.87 39 35466 7 1 5 1 34
ASE_00004 0.52 0.41 0.65 40 47833 24 4 18 2 57
ASE_00005 0.72 0.57 0.92 67 57897 8 2 4 2 50
ASE_00006 0.51 0.41 0.63 38 47526 25 3 19 3 55
ASE_00007 0.82 0.75 0.90 83 59593 12 4 5 3 27
ASE_00009 0.68 0.57 0.81 38 26059 10 1 8 1 29
ASE_00010 0.70 0.63 0.76 52 49702 27 4 12 11 30
ASE_00012 0.64 0.55 0.75 68 73829 26 4 19 3 55
ASE_00014 0.67 0.52 0.87 55 54222 9 0 8 1 51
ASE_00017 0.49 0.41 0.59 26 50996 36 2 16 18 38
ASE_00018 0.77 0.64 0.91 86 80507 11 2 6 3 48
ASE_00020 0.50 0.36 0.71 45 73857 21 6 12 3 81
ASE_00021 0.49 0.36 0.66 57 104110 34 4 25 5 103
ASE_00022 0.66 0.58 0.75 72 82932 31 5 19 7 52
ASE_00023 0.27 0.20 0.37 25 84188 47 2 40 5 102
ASE_00025 0.53 0.42 0.67 30 78561 28 0 15 13 41
ASE_00026 0.74 0.65 0.85 72 59600 18 5 8 5 38
ASE_00028 0.69 0.60 0.78 76 84569 29 5 16 8 50
ASE_00029 0.24 0.18 0.32 22 82960 50 6 40 4 100
ASE_00030 0.65 0.46 0.91 67 85417 9 3 4 2 78
ASE_00031 0.31 0.23 0.43 29 86668 41 3 36 2 97
ASE_00032 0.20 0.15 0.28 18 80135 55 0 47 8 100
ASE_00033 0.77 0.67 0.89 81 64889 14 3 7 4 40
ASE_00035 0.75 0.66 0.86 78 70409 18 3 10 5 40
ASE_00036 0.60 0.50 0.73 66 75764 28 3 22 3 66
ASE_00037 0.86 0.79 0.94 87 59247 9 2 4 3 23
ASE_00038 0.69 0.56 0.84 57 53560 14 1 10 3 44
ASE_00040 0.69 0.59 0.80 78 78906 22 4 15 3 55
ASE_00041 0.80 0.72 0.90 78 57543 12 2 7 3 30
ASE_00042 0.68 0.52 0.87 76 90013 14 1 10 3 69
ASE_00044 0.85 0.78 0.93 82 54527 9 3 3 3 23
ASE_00045 0.64 0.58 0.72 46 47214 28 4 14 10 34
ASE_00046 0.76 0.66 0.87 68 50325 13 1 9 3 35
ASE_00047 0.74 0.60 0.92 78 74220 8 2 5 1 52
ASE_00052 0.64 0.55 0.75 62 61342 24 3 18 3 50
ASE_00053 0.60 0.47 0.76 63 79318 24 4 16 4 70
ASE_00057 0.71 0.57 0.88 77 82127 14 4 7 3 57
ASE_00064 0.82 0.71 0.94 63 45384 7 1 3 3 26
ASE_00066 0.71 0.57 0.88 74 72306 11 3 7 1 56
ASE_00068 0.67 0.52 0.88 44 37625 8 1 5 2 41
ASE_00069 0.62 0.49 0.79 69 82941 22 3 15 4 71
ASE_00074 0.81 0.70 0.94 83 67808 9 2 3 4 36
ASE_00075 0.49 0.35 0.69 56 108730 31 3 22 6 106
ASE_00076 0.42 0.32 0.55 38 68196 33 2 29 2 80
ASE_00077 0.77 0.70 0.85 60 45079 14 4 7 3 26
ASE_00078 0.79 0.72 0.87 60 43002 13 2 7 4 23
ASE_00079 0.41 0.33 0.52 33 55548 32 1 29 2 67
ASE_00080 0.37 0.30 0.47 37 71552 44 6 36 2 86
ASE_00081 0.76 0.67 0.87 65 49695 13 2 8 3 32
ASE_00082 0.35 0.24 0.50 28 70444 31 1 27 3 88
ASE_00083 0.71 0.56 0.89 62 62411 11 1 7 3 48
ASE_00084 0.71 0.59 0.85 58 53560 14 1 9 4 41
ASE_00087 0.31 0.21 0.46 30 88345 36 0 35 1 114
ASE_00090 0.66 0.54 0.81 55 55543 16 2 11 3 46
ASE_00092 0.56 0.43 0.73 49 63479 21 2 16 3 64
ASE_00096 0.41 0.30 0.55 35 63482 31 1 28 2 80
ASE_00099 0.83 0.73 0.96 87 64529 7 2 2 3 33
ASE_00100 0.54 0.41 0.70 31 82171 27 1 12 14 45
ASE_00102 0.47 0.34 0.63 57 117765 36 5 28 3 109
ASE_00104 0.82 0.73 0.93 87 64167 10 2 5 3 32
ASE_00105 0.51 0.38 0.70 42 64201 21 5 13 3 69
ASE_00107 0.78 0.68 0.91 86 73058 12 2 7 3 41
ASE_00108 0.54 0.43 0.68 27 46931 25 0 13 12 36
ASE_00111 0.68 0.54 0.86 31 50050 23 0 5 18 26
ASE_00112 0.32 0.25 0.42 29 75397 42 7 33 2 87
ASE_00114 0.50 0.45 0.55 35 45387 40 4 25 11 42
ASE_00115 0.54 0.43 0.68 43 54552 23 1 19 3 58
ASE_00116 0.35 0.27 0.46 18 31587 22 1 20 1 48
ASE_00118 0.39 0.30 0.50 31 60664 34 3 28 3 71
ASE_00119 0.30 0.24 0.38 26 62767 43 2 40 1 82
ASE_00120 0.72 0.57 0.92 54 46912 7 0 5 2 40
ASE_00121 0.77 0.63 0.94 58 45088 5 0 4 1 34
ASE_00122 0.66 0.58 0.75 51 43297 20 1 16 3 37
ASE_00123 0.67 0.53 0.85 45 38450 10 2 6 2 40
ASE_00125 0.68 0.51 0.90 45 39290 7 1 4 2 43
ASE_00128 0.66 0.54 0.82 54 53235 15 1 11 3 46
ASE_00129 0.68 0.53 0.88 59 62768 11 1 7 3 52
ASE_00131 0.63 0.47 0.83 40 39292 10 1 7 2 45
ASE_00132 0.48 0.40 0.57 38 50336 31 4 25 2 57
ASE_00134 0.73 0.62 0.86 59 50334 13 1 9 3 36
ASE_00135 0.40 0.32 0.51 35 63121 35 4 30 1 74
ASE_00136 0.78 0.67 0.91 62 48137 9 1 5 3 30
ASE_00137 0.53 0.43 0.66 42 48452 25 2 20 3 56
ASE_00138 0.73 0.63 0.85 51 40410 13 3 6 4 30
ASE_00139 0.48 0.35 0.67 36 54231 19 0 18 1 68
ASE_00140 0.47 0.34 0.65 42 70811 26 3 20 3 83
ASE_00142 0.79 0.70 0.89 86 67064 14 3 8 3 36
ASE_00145 0.58 0.40 0.85 44 70073 9 0 8 1 67
ASE_00146 0.78 0.66 0.92 82 70787 10 2 5 3 42
ASE_00148 0.47 0.28 0.80 43 112521 12 0 11 1 111
ASE_00151 0.79 0.71 0.88 70 51923 13 7 3 3 28
ASE_00153 0.60 0.48 0.76 35 57584 26 0 11 15 38
ASE_00154 0.61 0.50 0.76 53 65271 18 4 13 1 54
ASE_00155 0.54 0.35 0.83 50 93468 12 0 10 2 92
ASE_00161 0.69 0.64 0.75 56 53553 29 4 15 10 31
ASE_00163 0.79 0.70 0.89 65 53228 11 2 6 3 28
ASE_00165 0.56 0.43 0.74 43 52917 19 1 14 4 58
ASE_00168 0.59 0.48 0.72 31 60683 27 0 12 15 33
ASE_00169 0.47 0.34 0.65 36 57236 22 1 18 3 71
ASE_00170 0.71 0.62 0.82 58 48757 16 2 11 3 35
ASE_00171 0.59 0.49 0.71 46 48451 22 1 18 3 48
ASE_00172 0.59 0.46 0.75 49 58931 19 4 12 3 57
ASE_00174 0.54 0.42 0.69 46 61008 24 3 18 3 63
ASE_00175 0.71 0.55 0.91 59 59966 9 1 5 3 48
ASE_00176 0.46 0.35 0.60 38 59968 27 1 24 2 72
ASE_00179 0.57 0.49 0.66 41 44191 24 4 17 3 43
ASE_00180 0.72 0.61 0.85 61 51288 14 2 9 3 39
ASE_00181 0.59 0.45 0.76 48 57567 19 3 12 4 58
ASE_00182 0.35 0.24 0.51 33 84190 33 3 29 1 103
ASE_00183 0.65 0.52 0.81 59 61352 17 0 14 3 54
ASE_00184 0.69 0.55 0.86 56 54550 12 0 9 3 46
ASE_00185 0.23 0.16 0.32 21 73470 46 8 37 1 107
ASE_00186 0.72 0.62 0.84 82 78905 21 2 14 5 50
ASE_00187 0.58 0.43 0.78 49 68572 17 1 13 3 66
ASE_00189 0.63 0.57 0.70 58 63107 35 5 20 10 44
ASE_00190 0.53 0.42 0.67 38 45394 23 5 14 4 52
ASE_00191 0.82 0.70 0.96 43 29601 4 0 2 2 18
ASE_00192 0.29 0.23 0.38 30 84588 51 6 42 3 103
ASE_00194 0.60 0.50 0.71 60 73452 32 5 19 8 59
ASE_00196 0.66 0.52 0.85 39 31580 9 0 7 2 36
ASE_00197 0.67 0.55 0.82 80 89156 20 2 15 3 65
ASE_00198 0.75 0.61 0.93 62 52583 8 1 4 3 40
ASE_00203 0.56 0.47 0.68 45 46599 24 1 20 3 51
ASE_00204 0.62 0.53 0.72 59 67814 30 6 17 7 53
ASE_00205 0.71 0.59 0.85 53 45994 12 0 9 3 37
ASE_00209 0.77 0.65 0.92 57 43009 7 0 5 2 31
ASE_00210 0.69 0.54 0.90 35 27222 5 0 4 1 30
ASE_00212 0.67 0.54 0.82 80 93864 20 2 15 3 68
ASE_00213 0.65 0.48 0.86 32 27224 6 0 5 1 34
ASE_00214 0.74 0.63 0.87 65 56205 13 2 8 3 38
ASE_00215 0.38 0.26 0.54 26 48468 23 2 20 1 73
ASE_00216 0.69 0.59 0.81 48 39281 14 3 8 3 34
ASE_00217 0.81 0.71 0.93 64 40401 8 2 3 3 26
ASE_00221 0.78 0.69 0.89 81 64529 13 2 8 3 36
ASE_00222 0.47 0.27 0.82 42 112050 10 0 9 1 115
ASE_00227 0.28 0.21 0.38 28 78930 47 1 44 2 105
ASE_00228 0.62 0.51 0.76 44 46913 18 2 12 4 42
ASE_00229 0.72 0.62 0.84 54 42422 13 1 9 3 33
ASE_00231 0.49 0.40 0.60 38 47832 27 5 20 2 58
ASE_00232 0.63 0.57 0.71 48 38435 23 4 16 3 36
ASE_00234 0.23 0.17 0.32 22 75398 48 3 43 2 107
ASE_00237 0.56 0.48 0.66 27 45712 30 2 12 16 29
ASE_00238 0.54 0.39 0.76 44 64203 17 3 11 3 70
ASE_00240 0.61 0.49 0.74 46 46603 19 1 15 3 47
ASE_00241 0.80 0.72 0.89 63 43885 11 2 6 3 24
ASE_00242 0.82 0.75 0.90 84 60982 12 2 7 3 28
ASE_00245 0.17 0.09 0.33 7 55257 20 3 11 6 71
ASE_00246 0.60 0.48 0.74 32 48162 25 0 11 14 35
ASE_00247 0.59 0.48 0.72 31 54242 28 0 12 16 33
ASE_00248 0.81 0.72 0.92 82 62392 11 2 5 4 32
ASE_00250 0.60 0.49 0.73 64 78915 25 4 20 1 67
ASE_00252 0.47 0.35 0.64 58 115350 37 4 28 5 110
ASE_00254 0.67 0.59 0.77 48 36794 17 1 13 3 34
ASE_00255 0.61 0.50 0.74 65 74603 26 5 18 3 65
ASE_00257 0.72 0.58 0.90 56 50978 9 4 2 3 41
ASE_00258 0.15 0.11 0.21 6 26768 24 4 18 2 48
ASE_00259 0.59 0.48 0.73 58 73073 28 1 21 6 63
ASE_00263 0.52 0.39 0.68 47 70431 25 3 19 3 73
ASE_00264 0.28 0.14 0.56 14 49116 15 0 11 4 86
ASE_00267 0.75 0.65 0.86 57 45084 12 2 7 3 31
ASE_00270 0.39 0.27 0.56 35 72328 32 0 27 5 93
ASE_00274 0.60 0.48 0.77 49 55547 18 1 14 3 54
ASE_00277 0.60 0.48 0.75 44 48146 19 1 14 4 47
ASE_00279 0.78 0.65 0.93 66 53230 8 2 3 3 35
ASE_00280 0.73 0.62 0.85 61 51931 14 1 10 3 37
ASE_00281 0.79 0.68 0.91 60 44485 9 2 4 3 28
ASE_00282 0.48 0.35 0.65 45 77746 26 3 21 2 82
ASE_00283 0.68 0.56 0.82 60 61703 16 2 11 3 47
ASE_00284 0.67 0.54 0.84 58 58242 14 2 9 3 50
ASE_00285 0.51 0.40 0.64 49 68930 30 2 25 3 73
ASE_00286 0.68 0.58 0.82 53 46600 15 1 11 3 39
ASE_00287 0.67 0.54 0.84 56 54879 14 2 9 3 47
ASE_00288 0.64 0.54 0.77 50 45991 18 2 13 3 43
ASE_00289 0.54 0.42 0.70 66 100931 31 3 25 3 91
ASE_00292 0.77 0.65 0.92 90 81712 11 3 5 3 48
ASE_00294 0.67 0.51 0.87 88 114380 16 2 11 3 83
ASE_00295 0.76 0.63 0.92 82 73831 10 2 5 3 49
ASE_00296 0.68 0.54 0.87 78 91716 15 3 9 3 67
ASE_00297 0.62 0.50 0.77 49 52911 18 0 15 3 49
ASE_00298 0.55 0.42 0.72 47 67463 21 4 14 3 66
ASE_00299 0.32 0.24 0.42 24 49398 34 1 32 1 76
ASE_00303 0.29 0.20 0.43 19 67852 30 7 18 5 76
ASE_00305 0.73 0.68 0.77 58 54540 28 4 13 11 27
ASE_00313 0.39 0.20 0.75 18 62457 17 0 6 11 71
ASE_00316 0.27 0.17 0.41 17 107839 35 3 21 11 81
ASE_00318 0.63 0.54 0.74 64 80113 37 6 17 14 54
ASE_00321 0.74 0.69 0.79 61 54538 25 4 12 9 27
ASE_00327 0.28 0.18 0.43 16 57254 24 1 20 3 73
ASE_00328 0.73 0.66 0.80 74 72679 31 5 13 13 38
ASE_00329 0.34 0.24 0.48 15 40724 21 11 5 5 48
ASE_00330 0.28 0.17 0.47 15 56248 24 0 17 7 75
ASE_00332 0.74 0.63 0.88 87 81711 15 2 10 3 51
ASE_00335 0.72 0.66 0.78 76 75369 33 6 15 12 40
ASE_00337 0.35 0.24 0.50 17 39306 24 2 15 7 54
ASE_00338 0.31 0.19 0.50 19 66392 21 2 17 2 79
ASE_00339 0.44 0.34 0.58 40 80131 37 3 26 8 79
ASE_00340 0.51 0.45 0.59 38 45992 31 3 23 5 47
ASE_00342 0.81 0.72 0.91 83 62390 11 3 5 3 32
ASE_00343 0.27 0.20 0.35 23 83371 49 4 38 7 90
ASE_00346 0.61 0.49 0.75 48 48141 18 2 14 2 49
ASE_00353 0.69 0.56 0.86 60 57900 13 1 9 3 47
ASE_00359 0.37 0.26 0.51 21 42737 24 1 19 4 59
ASE_00360 0.78 0.63 0.98 41 29361 2 0 1 1 24
ASE_00361 0.66 0.46 0.94 59 75403 7 1 3 3 68
ASE_00362 0.76 0.66 0.88 60 48137 12 2 6 4 31
ASE_00363 0.77 0.63 0.94 59 51297 7 1 3 3 35
ASE_00364 0.70 0.57 0.87 60 54216 12 1 8 3 45
ASE_00366 0.58 0.48 0.70 47 58586 23 6 14 3 51
ASE_00367 0.79 0.71 0.88 61 43002 11 2 6 3 25
ASE_00369 0.71 0.58 0.86 62 55873 13 1 9 3 45
ASE_00370 0.81 0.71 0.92 60 41840 8 1 4 3 24
ASE_00372 0.57 0.45 0.71 45 51940 21 2 16 3 55
ASE_00374 0.79 0.68 0.91 60 44784 9 2 4 3 28
ASE_00375 0.50 0.39 0.64 43 60311 26 1 23 2 67
ASE_00376 0.65 0.55 0.76 58 56877 21 2 16 3 47
ASE_00377 0.72 0.58 0.89 62 57560 11 1 7 3 45
ASE_00379 0.76 0.66 0.87 59 45988 12 2 7 3 30
ASE_00380 0.51 0.40 0.65 40 54884 24 1 21 2 59
ASE_00382 0.79 0.71 0.88 60 41837 11 2 6 3 24
ASE_00383 0.78 0.67 0.91 70 54538 10 2 5 3 35
ASE_00384 0.72 0.61 0.85 56 48450 13 1 9 3 36
ASE_00385 0.55 0.47 0.64 38 41846 24 3 18 3 43
ASE_00386 0.75 0.61 0.92 59 50339 8 1 4 3 37
ASE_00387 0.60 0.50 0.71 52 55872 25 2 19 4 52
ASE_00388 0.74 0.64 0.85 57 45686 14 2 8 4 32
ASE_00390 0.78 0.68 0.89 58 42130 10 2 5 3 27
ASE_00393 0.68 0.57 0.82 53 47830 15 1 11 3 40
ASE_00394 0.73 0.62 0.87 58 46904 12 1 8 3 35
ASE_00395 0.82 0.71 0.94 60 41552 7 1 3 3 24
ASE_00396 0.75 0.66 0.85 55 41551 12 2 8 2 28
ASE_00397 0.74 0.61 0.90 64 54544 10 2 5 3 41
ASE_00398 0.65 0.52 0.82 54 55879 15 0 12 3 50
ASE_00400 0.45 0.37 0.56 39 57900 33 2 29 2 67
ASE_00401 0.55 0.40 0.76 51 76961 19 0 16 3 75
ASE_00402 0.83 0.74 0.94 63 42419 7 1 3 3 22
ASE_00403 0.71 0.57 0.90 61 55877 10 1 6 3 46
ASE_00404 0.78 0.67 0.90 57 43008 10 2 4 4 28
ASE_00406 0.79 0.68 0.93 64 48759 8 2 3 3 30
ASE_00411 0.59 0.48 0.72 43 49395 20 2 15 3 46
ASE_00412 0.55 0.42 0.72 44 58250 20 1 16 3 61
ASE_00413 0.68 0.57 0.82 46 44495 14 1 9 4 35
ASE_00414 0.19 0.16 0.24 15 46298 48 3 44 1 80
ASE_00415 0.39 0.31 0.48 32 54880 36 3 31 2 71
ASE_00416 0.69 0.60 0.80 76 77326 23 3 16 4 51
ASE_00417 0.78 0.63 0.95 63 54549 5 0 3 2 37
ASE_00418 0.71 0.55 0.91 41 38736 6 0 4 2 34
ASE_00419 0.59 0.49 0.72 50 54877 20 3 16 1 53
ASE_00420 0.16 0.11 0.23 7 43335 29 5 18 6 56
ASE_00422 0.58 0.49 0.69 46 46904 24 3 18 3 48
ASE_00423 0.81 0.72 0.90 79 56865 13 3 6 4 30
ASE_00426 0.42 0.36 0.48 39 60994 42 3 39 0 69
ASE_00427 0.56 0.41 0.76 19 40730 18 1 5 12 27
ASE_00428 0.69 0.60 0.80 75 76542 22 5 14 3 50
ASE_00430 0.55 0.45 0.68 44 46906 24 1 20 3 53
ASE_00431 0.27 0.22 0.34 21 46299 40 8 32 0 74
ASE_00434 0.62 0.55 0.71 60 68180 34 5 20 9 50
ASE_00437 0.58 0.50 0.69 67 79304 33 2 28 3 68
ASE_00438 0.41 0.32 0.54 37 65997 33 6 26 1 79
ASE_00441 0.32 0.24 0.43 27 64198 40 4 32 4 85
ASE_00443 0.15 0.08 0.27 4 26781 18 0 11 7 46
ASE_00447 0.80 0.72 0.90 83 60286 12 2 7 3 33
ASE_00448 0.80 0.72 0.88 81 64169 14 2 9 3 31
ASE_00451 0.77 0.66 0.88 83 70782 14 2 9 3 42
ASE_00454 0.05 0.03 0.09 2 43342 25 1 20 4 61
CRW_00013 0.33 0.21 0.53 24 103695 23 4 17 2 91
CRW_00016 0.31 0.19 0.51 23 77376 24 7 15 2 97
CRW_00610 0.16 0.09 0.32 7 36293 15 1 14 0 74
CRW_00613 0.00 0.00 0.00 0 34956 24 7 17 0 78
CRW_00614 0.00 0.00 0.00 0 121749 22 4 18 0 57
CRW_00618 0.18 0.10 0.32 6 56261 13 1 12 0 55
CRW_00619 0.00 0.00 0.00 0 165006 19 2 17 0 73
CRW_00620 0.00 0.00 0.00 0 150963 16 0 12 4 63
CRW_00621 0.00 0.00 0.00 0 153149 34 7 25 2 71
CRW_00623 0.00 0.00 0.00 0 129785 17 1 9 7 83
CRW_00633 0.45 0.27 0.74 29 63507 14 0 10 4 77
CRW_00634 0.47 0.30 0.74 28 64582 18 0 10 8 66
CRW_00670 0.47 0.26 0.86 31 70089 7 0 5 2 89
CRW_00671 0.56 0.37 0.84 43 62784 10 0 8 2 74
CRW_00672 0.43 0.28 0.67 31 72344 17 0 15 2 80
CRW_00674 0.22 0.14 0.37 17 83390 29 5 24 0 107
CRW_00676 0.03 0.02 0.07 2 93500 31 4 22 5 113
CRW_00692 0.03 0.01 0.06 1 68619 22 0 15 7 89
PDB_00827 0.00 0.00 0.00 0 27011 17 1 16 0 81
PDB_00919 0.27 0.21 0.35 22 44191 40 3 37 0 81
RFA_00597 0.71 0.66 0.76 72 97808 43 8 15 20 37
RFA_00598 0.72 0.68 0.77 69 84576 40 5 16 19 32
RFA_00599 0.54 0.51 0.57 57 101375 62 5 38 19 54
RFA_00600 0.53 0.49 0.57 49 120209 62 10 27 25 51
RFA_00601 0.74 0.73 0.75 83 99124 49 4 24 21 31
RFA_00602 0.69 0.68 0.69 79 101361 50 5 30 15 37
RFA_00606 0.53 0.51 0.56 20 21285 25 4 12 9 19
RFA_00620 0.20 0.18 0.23 7 21915 33 7 16 10 32
RFA_00621 0.34 0.18 0.64 14 46338 14 0 8 6 62
RFA_00623 0.42 0.23 0.75 18 43932 10 1 5 4 60
RFA_00624 0.27 0.18 0.39 11 30107 20 0 17 3 50
RFA_00626 0.89 0.87 0.92 76 56533 29 2 5 22 11
RFA_00627 0.83 0.79 0.87 69 56874 36 1 9 26 18
RFA_00628 0.85 0.81 0.89 70 57212 38 2 7 29 16
RFA_00630 0.82 0.78 0.86 68 56874 33 2 9 22 19
RFA_00639 0.31 0.31 0.31 27 54527 69 10 51 8 60
RFA_00805 0.78 0.72 0.84 108 133257 31 1 20 10 42
RFA_00814 0.95 0.93 0.97 38 25161 22 0 1 21 3
RFA_00815 0.96 0.93 1.00 38 24493 15 0 0 15 3
RFA_00816 0.96 0.93 1.00 38 23182 15 0 0 15 3
RFA_00817 0.94 0.88 1.00 36 21909 12 0 0 12 5
RFA_00818 0.64 0.68 0.61 28 20255 30 11 7 12 13
RFA_00819 0.94 0.90 0.97 37 27928 26 0 1 25 4
RFA_00820 0.88 0.88 0.87 141 151363 51 0 21 30 19
RFA_00830 0.61 0.59 0.63 91 152484 92 2 51 39 63
SRP_00002 0.84 0.82 0.87 84 45053 19 0 13 6 18
SRP_00006 0.84 0.82 0.86 83 45657 22 0 13 9 18
SRP_00009 0.82 0.80 0.83 82 46566 28 0 17 11 20
SRP_00011 0.77 0.77 0.78 80 46257 31 0 23 8 24
SRP_00012 0.86 0.84 0.89 85 46264 26 0 11 15 16
SRP_00015 0.87 0.85 0.89 84 46266 25 0 10 15 15
SRP_00016 0.92 0.89 0.95 97 47793 15 0 5 10 12
SRP_00018 0.84 0.74 0.95 60 38440 16 0 3 13 21
SRP_00019 0.76 0.65 0.88 59 35979 18 0 8 10 32
SRP_00024 0.81 0.75 0.88 65 37601 13 0 9 4 22
SRP_00026 0.80 0.73 0.88 64 36783 15 0 9 6 24
SRP_00027 0.83 0.76 0.90 66 37055 14 0 7 7 21
SRP_00030 0.84 0.78 0.91 69 36780 11 0 7 4 19
SRP_00031 0.84 0.78 0.91 69 36239 11 0 7 4 20
SRP_00037 0.84 0.77 0.92 67 36512 13 0 6 7 20
SRP_00050 0.92 0.91 0.94 90 44754 20 0 6 14 9
SRP_00053 0.89 0.87 0.90 82 45059 25 0 9 16 12
SRP_00060 0.93 0.91 0.95 91 44455 15 0 5 10 9
SRP_00061 0.93 0.91 0.95 91 44754 15 0 5 10 9
SRP_00066 0.85 0.83 0.86 83 45355 25 0 13 12 17
SRP_00069 0.66 0.58 0.77 49 34389 25 3 12 10 36
SRP_00070 0.45 0.37 0.55 45 126674 45 7 30 8 76
SRP_00073 0.66 0.61 0.72 43 39000 31 4 13 14 28
SRP_00079 0.68 0.66 0.71 58 41823 39 0 24 15 30
SRP_00085 0.81 0.79 0.82 80 45354 30 0 17 13 21
SRP_00086 0.91 0.90 0.93 90 44156 17 0 7 10 10
SRP_00087 0.32 0.34 0.31 20 37336 53 16 29 8 38
SRP_00088 0.77 0.69 0.86 61 34120 13 1 9 3 28
SRP_00089 0.80 0.73 0.88 66 35703 13 1 8 4 24
SRP_00090 0.78 0.71 0.86 64 35437 14 1 9 4 26
SRP_00091 0.59 0.48 0.73 46 52912 29 3 14 12 49
SRP_00099 0.55 0.56 0.55 53 44753 48 3 41 4 42
SRP_00102 0.90 0.88 0.93 89 44455 16 0 7 9 12
SRP_00103 0.91 0.89 0.92 91 45352 17 0 8 9 11
SRP_00104 0.53 0.49 0.57 34 34393 37 5 21 11 35
SRP_00117 0.81 0.78 0.83 80 45355 24 0 16 8 22
SRP_00123 0.78 0.76 0.81 69 36500 24 3 13 8 22
SRP_00124 0.60 0.55 0.64 47 37055 30 6 20 4 38
SRP_00127 0.55 0.42 0.71 50 72320 24 3 17 4 69
SRP_00130 0.74 0.70 0.77 68 49682 35 1 19 15 29
SRP_00136 0.57 0.54 0.61 38 44191 37 9 15 13 33
SRP_00142 0.89 0.87 0.90 81 45966 25 0 9 16 12
SRP_00143 0.84 0.83 0.85 84 49671 26 0 15 11 17
SRP_00144 0.87 0.86 0.87 81 46572 28 0 12 16 13
SRP_00148 0.60 0.51 0.72 44 50025 27 0 17 10 43
SRP_00152 0.88 0.86 0.89 89 45653 21 0 11 10 14
SRP_00153 0.86 0.85 0.88 91 46867 22 0 13 9 16
SRP_00157 0.56 0.53 0.60 38 44190 39 5 20 14 34
SRP_00158 0.25 0.18 0.35 21 124191 44 8 31 5 94
SRP_00160 0.42 0.32 0.54 42 86242 46 0 36 10 88
SRP_00171 0.83 0.83 0.84 73 45364 36 0 14 22 15
SRP_00173 0.78 0.70 0.86 63 38153 15 0 10 5 27
SRP_00174 0.77 0.71 0.84 61 38708 15 0 12 3 25
SRP_00175 0.58 0.49 0.69 41 44492 33 2 16 15 43
SRP_00178 0.89 0.88 0.89 90 45652 23 0 11 12 12
SRP_00179 0.87 0.86 0.88 90 45954 23 0 12 11 15
SRP_00181 0.80 0.79 0.80 81 45955 30 0 20 10 21
SRP_00182 0.84 0.83 0.85 84 45957 25 0 15 10 17
SRP_00184 0.78 0.77 0.79 77 45958 34 0 21 13 23
SRP_00188 0.54 0.51 0.58 40 31056 32 7 22 3 39
SRP_00197 0.92 0.90 0.94 91 49358 24 0 6 18 10
SRP_00198 0.90 0.87 0.92 90 50942 24 0 8 16 13
SRP_00199 0.89 0.88 0.91 92 50939 21 0 9 12 13
SRP_00201 0.94 0.93 0.96 103 47788 11 0 4 7 8
SRP_00202 0.89 0.85 0.93 100 54178 16 0 7 9 17
SRP_00203 0.83 0.83 0.83 87 48723 25 0 18 7 18
SRP_00204 0.87 0.85 0.88 87 49042 25 0 12 13 15
SRP_00206 0.94 0.93 0.96 100 47791 14 0 4 10 8
SRP_00208 0.91 0.88 0.95 89 46571 20 0 5 15 12
SRP_00228 0.89 0.87 0.90 83 45359 23 0 9 14 12
SRP_00230 0.68 0.57 0.81 51 39558 23 3 9 11 39
SRP_00234 0.84 0.76 0.93 65 36245 14 0 5 9 21
SRP_00239 0.49 0.52 0.48 48 50302 62 6 47 9 45
SRP_00240 0.76 0.75 0.77 77 48105 33 3 20 10 25
SRP_00241 0.50 0.51 0.49 42 45970 54 8 36 10 40
SRP_00247 0.51 0.54 0.49 47 47182 55 8 41 6 40
SRP_00252 0.65 0.63 0.67 56 49057 40 2 26 12 33
SRP_00253 0.62 0.62 0.62 56 49364 48 5 30 13 34
SRP_00254 0.35 0.36 0.34 22 32321 49 10 32 7 39
SRP_00255 0.74 0.76 0.73 71 47489 40 1 25 14 23
SRP_00257 0.62 0.55 0.69 59 50955 29 4 22 3 49
SRP_00260 0.50 0.47 0.53 47 47806 44 6 36 2 53
SRP_00265 0.63 0.59 0.68 43 41265 35 7 13 15 30
SRP_00267 0.89 0.89 0.90 85 44457 21 0 9 12 11
SRP_00276 0.93 0.91 0.94 100 50615 13 0 6 7 10
SRP_00278 0.73 0.69 0.77 72 45963 26 0 21 5 33
SRP_00282 0.27 0.32 0.23 20 43279 76 19 47 10 43
SRP_00286 0.51 0.36 0.71 63 136937 37 1 25 11 111
SRP_00287 0.48 0.35 0.65 57 141690 43 2 29 12 105
SRP_00290 0.48 0.35 0.65 47 100504 36 2 23 11 88
SRP_00292 0.50 0.36 0.70 62 137461 38 1 26 11 111
SRP_00294 0.60 0.45 0.82 75 129194 27 1 16 10 92
SRP_00299 0.78 0.77 0.80 76 44158 28 0 19 9 23
SRP_00300 0.88 0.86 0.90 81 44163 23 0 9 14 13
SRP_00301 0.58 0.47 0.73 40 32585 26 2 13 11 46
SRP_00302 0.51 0.44 0.58 36 41554 39 3 23 13 45
SRP_00308 0.82 0.73 0.91 64 36245 15 0 6 9 24
SRP_00317 0.89 0.87 0.92 85 45058 22 0 7 15 13
SRP_00321 0.76 0.75 0.78 81 47482 30 0 23 7 27
SRP_00322 0.79 0.75 0.83 82 48417 26 0 17 9 27
SRP_00323 0.85 0.83 0.87 89 47176 22 0 13 9 18
SRP_00328 0.64 0.60 0.69 51 39547 31 4 19 8 34
SRP_00329 0.63 0.60 0.65 51 39825 35 4 23 8 34
SRP_00330 0.80 0.80 0.81 76 49992 29 2 16 11 19
SRP_00331 0.55 0.48 0.64 42 37609 30 1 23 6 45
SRP_00332 0.95 0.93 0.97 99 50301 15 0 3 12 7
SRP_00335 0.35 0.44 0.29 17 35186 58 21 21 16 22
SRP_00337 0.78 0.71 0.84 65 35434 14 1 11 2 26
SRP_00339 0.78 0.78 0.78 73 44458 27 4 16 7 21
SRP_00340 0.58 0.56 0.60 46 41251 43 4 27 12 36
SRP_00347 0.93 0.93 0.94 89 46570 18 0 6 12 7
SRP_00361 0.77 0.77 0.77 69 41815 33 5 16 12 21
SRP_00368 0.90 0.88 0.92 86 43863 19 0 7 12 12
SRP_00371 0.76 0.71 0.82 58 36244 22 2 11 9 24
SRP_00382 0.53 0.38 0.74 64 141691 31 0 23 8 106
TMR_00173 0.41 0.31 0.54 13 42171 18 2 9 7 29
TMR_00357 0.19 0.13 0.28 12 82985 38 4 27 7 80
TMR_00601 0.67 0.62 0.72 26 58960 30 1 9 20 16
TMR_00603 0.78 0.70 0.88 30 60344 30 0 4 26 13
TMR_00611 0.48 0.35 0.65 36 61370 19 4 15 0 66
TMR_00696 0.35 0.25 0.51 28 85023 34 3 24 7 86

^top



Performance of PknotsRG - scored lower in this pairwise comparison

1. Total counts & total scores for PknotsRG

Total Base Pair Counts
Total TP 23874
Total TN 25235584
Total FP 21263
Total FP CONTRA 2772
Total FP INCONS 15514
Total FP COMP 2977
Total FN 19219
Total Scores
MCC 0.559
Average MCC ± 95% Confidence Intervals 0.555 ± 0.018
Sensitivity 0.554
Positive Predictive Value 0.566
Nr of predictions 431

^top



2. Individual counts for PknotsRG [ download as .csv ]

RNA Chain Rfam family MCC SENS PPV TP TN FP FP CONTRA FP INCONS FP COMP FN
ASE_00001 0.63 0.61 0.64 46 34119 33 3 23 7 29
ASE_00002 0.50 0.49 0.51 36 35440 40 5 30 5 37
ASE_00004 0.70 0.71 0.70 69 47796 32 9 21 2 28
ASE_00005 0.63 0.58 0.68 68 57870 38 0 32 6 49
ASE_00006 0.57 0.58 0.57 54 47491 44 7 34 3 39
ASE_00007 0.57 0.55 0.61 60 59586 43 1 38 4 50
ASE_00009 0.78 0.75 0.82 50 26045 13 0 11 2 17
ASE_00010 0.50 0.51 0.48 42 49683 51 11 34 6 40
ASE_00012 0.58 0.54 0.61 67 73811 49 2 40 7 56
ASE_00014 0.24 0.25 0.24 26 54178 82 8 73 1 80
ASE_00017 0.14 0.16 0.13 10 50964 85 8 58 19 54
ASE_00018 0.80 0.76 0.84 102 80479 22 3 17 2 32
ASE_00020 0.53 0.52 0.53 66 73796 58 8 50 0 60
ASE_00021 0.57 0.54 0.61 86 104056 61 7 47 7 74
ASE_00022 0.46 0.44 0.48 54 82915 65 6 53 6 70
ASE_00023 0.64 0.63 0.65 80 84131 47 5 39 3 47
ASE_00025 0.23 0.24 0.22 17 78528 115 12 49 54 54
ASE_00026 0.53 0.51 0.54 56 59582 55 1 46 8 54
ASE_00028 0.59 0.56 0.61 71 84550 53 4 41 8 55
ASE_00029 0.56 0.54 0.59 66 82916 48 4 42 2 56
ASE_00030 0.65 0.62 0.68 90 85358 45 3 40 2 55
ASE_00031 0.63 0.60 0.65 76 86619 50 2 39 9 50
ASE_00032 0.57 0.54 0.60 64 80094 47 6 36 5 54
ASE_00033 0.52 0.48 0.57 58 64879 45 5 38 2 63
ASE_00035 0.30 0.28 0.32 33 70398 76 11 58 7 85
ASE_00036 0.46 0.45 0.48 59 75731 68 8 57 3 73
ASE_00037 0.24 0.23 0.25 25 59239 79 3 73 3 85
ASE_00038 0.55 0.54 0.56 55 53529 45 4 40 1 46
ASE_00040 0.50 0.47 0.52 63 78882 64 5 53 6 70
ASE_00041 0.52 0.50 0.55 54 57532 48 2 42 4 54
ASE_00042 0.53 0.50 0.58 72 89975 54 3 50 1 73
ASE_00044 0.69 0.68 0.70 71 54513 35 3 28 4 34
ASE_00045 0.66 0.66 0.65 53 47197 36 7 21 8 27
ASE_00046 0.63 0.57 0.69 59 50317 27 2 25 0 44
ASE_00047 0.33 0.31 0.35 40 74190 76 5 70 1 90
ASE_00052 0.50 0.46 0.55 52 61330 48 2 41 5 60
ASE_00053 0.59 0.58 0.60 77 79273 54 5 46 3 56
ASE_00057 0.63 0.60 0.65 81 82090 49 8 36 5 53
ASE_00064 0.43 0.43 0.44 38 45364 53 5 44 4 51
ASE_00066 0.67 0.64 0.71 83 72273 35 4 30 1 47
ASE_00068 0.24 0.24 0.25 20 37596 59 5 54 0 65
ASE_00069 0.68 0.65 0.71 91 82899 44 5 33 6 49
ASE_00074 0.58 0.57 0.59 68 67781 47 6 41 0 51
ASE_00075 0.65 0.59 0.71 96 108676 46 2 37 7 66
ASE_00076 0.60 0.57 0.63 67 68158 42 2 38 2 51
ASE_00077 0.25 0.24 0.25 21 45067 67 7 55 5 65
ASE_00078 0.68 0.67 0.68 56 42989 31 5 21 5 27
ASE_00079 0.51 0.50 0.53 50 55517 44 5 39 0 50
ASE_00080 0.46 0.44 0.48 54 71519 61 5 53 3 69
ASE_00081 0.53 0.53 0.54 51 49676 44 5 38 1 46
ASE_00082 0.50 0.47 0.54 54 70400 60 1 45 14 62
ASE_00083 0.79 0.75 0.83 82 62382 26 2 15 9 28
ASE_00084 0.70 0.69 0.72 68 53534 29 6 20 3 31
ASE_00087 0.61 0.58 0.65 83 88283 49 5 39 5 61
ASE_00090 0.59 0.59 0.59 60 55509 47 2 40 5 41
ASE_00092 0.73 0.70 0.76 79 63442 30 0 25 5 34
ASE_00096 0.48 0.47 0.50 54 63437 58 4 51 3 61
ASE_00099 0.51 0.50 0.53 60 64506 56 6 48 2 60
ASE_00100 0.20 0.22 0.19 17 82125 115 16 57 42 59
ASE_00102 0.42 0.41 0.44 68 117699 89 8 80 1 98
ASE_00104 0.65 0.63 0.68 75 64151 36 3 32 1 44
ASE_00105 0.38 0.36 0.40 40 64160 66 9 52 5 71
ASE_00107 0.47 0.45 0.50 57 73039 57 2 55 0 70
ASE_00108 0.24 0.29 0.20 18 46881 83 21 51 11 45
ASE_00111 0.14 0.18 0.11 10 49998 88 24 54 10 47
ASE_00112 0.79 0.75 0.84 87 75362 23 5 12 6 29
ASE_00114 0.33 0.31 0.34 24 45381 57 8 38 11 53
ASE_00115 0.48 0.47 0.49 47 54520 56 1 47 8 54
ASE_00116 0.19 0.20 0.19 13 31558 58 2 53 3 53
ASE_00118 0.45 0.44 0.45 45 60627 57 4 50 3 57
ASE_00119 0.67 0.65 0.69 70 62734 33 1 30 2 38
ASE_00120 0.35 0.34 0.36 32 46883 56 9 47 0 62
ASE_00121 0.25 0.25 0.26 23 45061 68 9 57 2 69
ASE_00122 0.28 0.27 0.28 24 43280 61 4 57 0 64
ASE_00123 0.40 0.39 0.42 33 38424 50 2 44 4 52
ASE_00125 0.64 0.63 0.65 55 39255 30 4 26 0 33
ASE_00128 0.76 0.73 0.80 73 53210 25 2 16 7 27
ASE_00129 0.52 0.50 0.53 56 62730 53 5 44 4 55
ASE_00131 0.64 0.58 0.72 49 39272 29 0 19 10 36
ASE_00132 0.66 0.63 0.68 60 50315 30 4 24 2 35
ASE_00134 0.56 0.57 0.55 54 50305 49 4 40 5 41
ASE_00135 0.47 0.46 0.48 50 63085 59 8 47 4 59
ASE_00136 0.49 0.47 0.51 43 48121 50 1 40 9 49
ASE_00137 0.44 0.43 0.45 42 48423 53 5 46 2 56
ASE_00138 0.53 0.52 0.55 42 40393 35 4 31 0 39
ASE_00139 0.80 0.73 0.88 76 54199 15 2 8 5 28
ASE_00140 0.69 0.65 0.74 81 70767 33 3 25 5 44
ASE_00142 0.74 0.70 0.79 85 67054 26 4 18 4 37
ASE_00145 0.43 0.42 0.44 47 70019 64 6 53 5 64
ASE_00146 0.51 0.46 0.56 57 70775 47 0 44 3 67
ASE_00148 0.70 0.67 0.73 103 112433 42 4 35 3 51
ASE_00151 0.42 0.41 0.43 40 51911 52 12 40 0 58
ASE_00153 0.61 0.62 0.61 45 57556 71 2 27 42 28
ASE_00154 0.64 0.63 0.65 67 65238 39 4 32 3 40
ASE_00155 0.51 0.50 0.52 71 93391 71 10 56 5 71
ASE_00161 0.27 0.29 0.26 25 53531 72 18 54 0 62
ASE_00163 0.29 0.29 0.30 27 53211 72 7 56 9 66
ASE_00165 0.57 0.55 0.60 56 52881 39 7 31 1 45
ASE_00168 0.23 0.28 0.19 18 60629 92 25 54 13 46
ASE_00169 0.50 0.49 0.51 52 57190 53 7 42 4 55
ASE_00170 0.70 0.68 0.72 63 48741 25 2 22 1 30
ASE_00171 0.71 0.70 0.73 66 48425 25 5 20 0 28
ASE_00172 0.68 0.66 0.70 70 58896 35 4 26 5 36
ASE_00174 0.55 0.51 0.59 56 60980 39 3 36 0 53
ASE_00175 0.44 0.44 0.45 47 59926 62 6 52 4 60
ASE_00176 0.59 0.55 0.63 61 59934 39 5 31 3 49
ASE_00179 0.64 0.65 0.62 55 44164 34 7 27 0 29
ASE_00180 0.72 0.69 0.75 69 51268 29 2 21 6 31
ASE_00181 0.54 0.53 0.55 56 57528 50 3 43 4 50
ASE_00182 0.49 0.47 0.51 64 84129 65 6 56 3 72
ASE_00183 0.72 0.71 0.73 80 61316 33 2 27 4 33
ASE_00184 0.63 0.64 0.63 65 54511 39 10 29 0 37
ASE_00185 0.61 0.59 0.65 75 73420 43 5 36 2 53
ASE_00186 0.74 0.70 0.78 92 78885 31 3 23 5 40
ASE_00187 0.51 0.50 0.52 57 68526 57 7 45 5 58
ASE_00189 0.57 0.55 0.60 56 63097 42 9 28 5 46
ASE_00190 0.46 0.44 0.47 40 45366 45 8 37 0 50
ASE_00191 0.48 0.48 0.48 29 29586 36 4 27 5 32
ASE_00192 0.46 0.44 0.48 59 84544 69 10 53 6 74
ASE_00194 0.46 0.45 0.47 53 73423 64 8 52 4 66
ASE_00196 0.70 0.69 0.71 52 31553 24 2 19 3 23
ASE_00197 0.48 0.46 0.51 66 89124 66 4 59 3 79
ASE_00198 0.54 0.53 0.55 54 52551 45 6 39 0 48
ASE_00203 0.70 0.68 0.72 65 46575 29 6 19 4 31
ASE_00204 0.63 0.60 0.67 67 67796 38 7 26 5 45
ASE_00205 0.56 0.56 0.56 50 45967 44 7 32 5 40
ASE_00209 0.28 0.27 0.29 24 42989 58 4 54 0 64
ASE_00210 0.59 0.60 0.59 39 27195 28 6 21 1 26
ASE_00212 0.54 0.52 0.55 77 93822 66 5 57 4 71
ASE_00213 0.73 0.73 0.73 48 27195 19 6 12 1 18
ASE_00214 0.78 0.76 0.80 78 56182 28 3 17 8 25
ASE_00215 0.55 0.53 0.57 52 48425 42 4 35 3 47
ASE_00216 0.60 0.61 0.60 50 39256 36 8 26 2 32
ASE_00217 0.30 0.29 0.32 26 40388 60 6 50 4 64
ASE_00221 0.40 0.38 0.42 45 64514 65 3 58 4 72
ASE_00222 0.62 0.60 0.64 94 111954 55 9 44 2 63
ASE_00227 0.31 0.29 0.33 39 78884 80 5 75 0 94
ASE_00228 0.59 0.59 0.58 51 46883 37 14 23 0 35
ASE_00229 0.58 0.57 0.59 50 42401 39 5 30 4 37
ASE_00231 0.69 0.69 0.70 66 47801 28 5 23 0 30
ASE_00232 0.56 0.55 0.57 46 38422 38 3 32 3 38
ASE_00234 0.52 0.49 0.55 63 75351 56 2 50 4 66
ASE_00237 0.00 0.00 0.00 0 45672 99 25 56 18 56
ASE_00238 0.48 0.47 0.50 54 64152 58 4 51 3 60
ASE_00240 0.64 0.62 0.66 58 46577 37 2 28 7 35
ASE_00241 0.56 0.54 0.58 47 43875 43 0 34 9 40
ASE_00242 0.72 0.68 0.76 76 60975 27 3 21 3 36
ASE_00245 0.86 0.86 0.87 67 55201 39 5 5 29 11
ASE_00246 0.16 0.18 0.15 12 48124 82 19 50 13 55
ASE_00247 0.17 0.19 0.16 12 54210 91 16 47 28 52
ASE_00248 0.46 0.42 0.49 48 62384 49 3 46 0 66
ASE_00250 0.61 0.59 0.64 77 78883 46 4 39 3 54
ASE_00252 0.59 0.56 0.62 94 115289 62 5 52 5 74
ASE_00254 0.61 0.60 0.63 49 36778 33 5 24 4 33
ASE_00255 0.47 0.45 0.50 59 74572 60 7 53 0 71
ASE_00257 0.64 0.64 0.65 62 50944 34 0 34 0 35
ASE_00258 0.69 0.69 0.70 37 26743 30 2 14 14 17
ASE_00259 0.35 0.33 0.36 40 73043 71 8 62 1 81
ASE_00263 0.62 0.62 0.62 74 70380 47 5 41 1 46
ASE_00264 0.84 0.78 0.90 78 49054 24 0 9 15 22
ASE_00267 0.46 0.44 0.48 39 45069 51 5 37 9 49
ASE_00270 0.63 0.62 0.64 79 72267 45 8 36 1 49
ASE_00274 0.48 0.47 0.50 48 55515 48 8 40 0 55
ASE_00277 0.39 0.40 0.39 36 48113 58 9 47 2 55
ASE_00279 0.38 0.36 0.41 36 53213 58 1 51 6 65
ASE_00280 0.37 0.37 0.38 36 51908 62 6 53 3 62
ASE_00281 0.54 0.51 0.58 45 44473 39 0 33 6 43
ASE_00282 0.42 0.41 0.42 52 77692 72 6 65 1 75
ASE_00283 0.74 0.73 0.76 78 61673 27 5 20 2 29
ASE_00284 0.62 0.60 0.64 65 58210 43 4 32 7 43
ASE_00285 0.62 0.58 0.66 71 68899 43 2 34 7 51
ASE_00286 0.43 0.42 0.43 39 46574 61 3 49 9 53
ASE_00287 0.59 0.55 0.63 57 54855 40 0 34 6 46
ASE_00288 0.46 0.45 0.48 42 45968 47 3 43 1 51
ASE_00289 0.66 0.62 0.71 98 100886 44 4 37 3 59
ASE_00292 0.71 0.66 0.76 91 81690 34 4 25 5 47
ASE_00294 0.78 0.74 0.83 127 114328 29 3 23 3 44
ASE_00295 0.53 0.50 0.57 65 73805 53 5 45 3 66
ASE_00296 0.31 0.30 0.33 43 91677 88 8 78 2 102
ASE_00297 0.53 0.53 0.54 52 52878 50 3 42 5 46
ASE_00298 0.19 0.19 0.19 21 67420 90 9 78 3 92
ASE_00299 0.55 0.55 0.56 55 49357 48 8 35 5 45
ASE_00303 0.62 0.65 0.58 62 67790 54 11 33 10 33
ASE_00305 0.44 0.46 0.42 39 54523 61 15 38 8 46
ASE_00313 0.72 0.72 0.73 64 62393 46 6 18 22 25
ASE_00316 0.56 0.57 0.54 56 107777 87 13 34 40 42
ASE_00318 0.64 0.61 0.67 72 80092 40 13 23 4 46
ASE_00321 0.39 0.40 0.39 35 54525 56 9 46 1 53
ASE_00327 0.80 0.78 0.82 69 57207 34 4 11 19 20
ASE_00328 0.41 0.41 0.41 46 72659 73 3 63 7 66
ASE_00329 0.65 0.68 0.61 43 40685 48 8 19 21 20
ASE_00330 0.75 0.74 0.75 67 56191 42 3 19 20 23
ASE_00332 0.54 0.51 0.57 71 81686 59 2 51 6 67
ASE_00335 0.52 0.52 0.52 60 75350 64 13 43 8 56
ASE_00337 0.36 0.37 0.36 26 39268 58 4 42 12 45
ASE_00338 0.72 0.69 0.74 68 66338 41 7 17 17 30
ASE_00339 0.53 0.52 0.53 62 80084 65 5 49 11 57
ASE_00340 0.71 0.72 0.71 61 45970 34 7 18 9 24
ASE_00342 0.48 0.45 0.50 52 62378 51 1 50 0 63
ASE_00343 0.60 0.62 0.58 70 83316 60 9 41 10 43
ASE_00346 0.30 0.29 0.31 28 48115 64 7 55 2 69
ASE_00353 0.46 0.47 0.45 50 57860 60 11 49 0 57
ASE_00359 0.49 0.49 0.49 39 42698 46 3 38 5 41
ASE_00360 0.30 0.31 0.30 20 29337 50 11 35 4 45
ASE_00361 0.37 0.36 0.38 46 75345 78 9 66 3 81
ASE_00362 0.62 0.62 0.63 56 48116 36 6 27 3 35
ASE_00363 0.54 0.55 0.53 52 51262 46 5 41 0 42
ASE_00364 0.32 0.31 0.33 33 54184 72 7 61 4 72
ASE_00366 0.52 0.54 0.50 53 58547 55 12 41 2 45
ASE_00367 0.33 0.35 0.32 30 42976 65 8 57 0 56
ASE_00369 0.68 0.67 0.69 72 55841 37 2 30 5 35
ASE_00370 0.65 0.63 0.66 53 41825 27 5 22 0 31
ASE_00372 0.72 0.71 0.72 71 51905 30 5 22 3 29
ASE_00374 0.56 0.56 0.57 49 44764 37 8 29 0 39
ASE_00375 0.57 0.54 0.60 59 60280 42 6 33 3 51
ASE_00376 0.52 0.50 0.54 53 56855 48 4 41 3 52
ASE_00377 0.69 0.66 0.72 71 57531 34 3 25 6 36
ASE_00379 0.44 0.44 0.45 39 45969 55 7 41 7 50
ASE_00380 0.46 0.44 0.47 44 54853 54 1 48 5 55
ASE_00382 0.51 0.51 0.52 43 41822 43 6 34 3 41
ASE_00383 0.44 0.43 0.45 45 54516 59 4 50 5 60
ASE_00384 0.73 0.71 0.75 65 48429 27 4 18 5 27
ASE_00385 0.42 0.43 0.41 35 41819 52 6 45 1 46
ASE_00386 0.53 0.53 0.53 51 50306 51 4 42 5 45
ASE_00387 0.36 0.37 0.35 38 55837 70 6 64 0 66
ASE_00388 0.68 0.67 0.69 60 45666 32 1 26 5 29
ASE_00390 0.50 0.48 0.53 41 42117 44 6 31 7 44
ASE_00393 0.36 0.34 0.38 32 47810 59 3 50 6 61
ASE_00394 0.72 0.72 0.73 67 46879 28 3 22 3 26
ASE_00395 0.51 0.49 0.53 41 41539 45 1 35 9 43
ASE_00396 0.37 0.36 0.38 30 41536 55 5 45 5 53
ASE_00397 0.52 0.51 0.52 54 54511 50 7 43 0 51
ASE_00398 0.64 0.62 0.66 64 55848 36 1 32 3 40
ASE_00400 0.53 0.52 0.54 55 57868 48 5 42 1 51
ASE_00401 0.55 0.56 0.54 70 76898 60 13 47 0 56
ASE_00402 0.60 0.59 0.61 50 42404 35 4 28 3 35
ASE_00403 0.47 0.44 0.50 47 55851 51 3 44 4 60
ASE_00404 0.56 0.55 0.56 47 42987 42 0 37 5 38
ASE_00406 0.69 0.66 0.72 62 48742 33 2 22 9 32
ASE_00411 0.26 0.27 0.26 24 49362 69 12 57 0 65
ASE_00412 0.38 0.37 0.39 39 58212 60 13 47 0 66
ASE_00413 0.46 0.49 0.43 40 44457 54 14 40 0 41
ASE_00414 0.37 0.36 0.40 34 46274 59 9 43 7 61
ASE_00415 0.51 0.51 0.51 53 54843 52 7 43 2 50
ASE_00416 0.71 0.68 0.75 86 77306 36 1 28 7 41
ASE_00417 0.36 0.37 0.35 37 54508 73 10 60 3 63
ASE_00418 0.21 0.21 0.21 16 38703 67 8 54 5 59
ASE_00419 0.76 0.73 0.80 75 54852 23 4 15 4 28
ASE_00420 0.66 0.68 0.64 43 43298 53 3 21 29 20
ASE_00422 0.48 0.47 0.49 44 46881 51 5 41 5 50
ASE_00423 0.49 0.49 0.50 53 56847 56 9 44 3 56
ASE_00426 0.40 0.39 0.40 42 60971 62 5 57 0 66
ASE_00427 0.00 0.00 0.00 0 40672 90 27 56 7 46
ASE_00428 0.54 0.52 0.57 65 76521 54 5 45 4 60
ASE_00430 0.63 0.61 0.66 59 46881 36 5 26 5 38
ASE_00431 0.64 0.59 0.70 56 46280 36 3 21 12 39
ASE_00434 0.63 0.60 0.66 66 68165 46 9 25 12 44
ASE_00437 0.42 0.41 0.44 55 79275 71 4 67 0 80
ASE_00438 0.43 0.42 0.45 49 65957 60 6 54 0 67
ASE_00441 0.78 0.74 0.83 83 64161 28 1 16 11 29
ASE_00443 0.88 0.86 0.90 43 26748 33 4 1 28 7
ASE_00447 0.49 0.47 0.52 54 60274 55 1 49 5 62
ASE_00448 0.22 0.22 0.23 25 64151 91 6 79 6 87
ASE_00451 0.50 0.47 0.52 59 70763 57 3 51 3 66
ASE_00454 0.67 0.67 0.67 42 43302 51 2 19 30 21
CRW_00013 0.16 0.17 0.15 19 103617 114 25 79 10 96
CRW_00016 0.64 0.62 0.66 74 77309 50 5 33 12 46
CRW_00610 0.49 0.49 0.49 40 36233 43 7 35 1 41
CRW_00613 0.64 0.59 0.69 46 34913 29 1 20 8 32
CRW_00614 0.09 0.11 0.07 6 121690 145 21 54 70 51
CRW_00618 0.11 0.11 0.10 7 56211 83 13 49 21 54
CRW_00619 0.38 0.44 0.34 32 164930 138 28 35 75 41
CRW_00620 0.16 0.21 0.13 13 150871 158 31 60 67 50
CRW_00621 0.10 0.10 0.10 7 153109 156 13 52 91 64
CRW_00623 0.30 0.29 0.32 24 129720 119 11 40 68 59
CRW_00633 0.50 0.48 0.52 51 63447 50 10 38 2 55
CRW_00634 0.56 0.60 0.52 56 64513 53 17 34 2 38
CRW_00670 0.75 0.74 0.77 89 70009 30 5 22 3 31
CRW_00671 0.77 0.76 0.78 89 62721 30 6 19 5 28
CRW_00672 0.53 0.55 0.52 61 72273 60 21 35 4 50
CRW_00674 0.52 0.52 0.52 65 83310 63 12 49 2 59
CRW_00676 0.56 0.60 0.52 69 93396 67 13 50 4 46
CRW_00692 0.43 0.46 0.41 41 68536 66 18 40 8 49
PDB_00827 0.50 0.46 0.55 37 26961 31 1 29 1 44
PDB_00919 0.50 0.47 0.54 48 44164 44 3 38 3 55
RFA_00597 0.52 0.53 0.51 58 97789 83 8 48 27 51
RFA_00598 0.68 0.66 0.69 67 84569 57 6 24 27 34
RFA_00599 0.63 0.68 0.60 75 101349 70 18 33 19 36
RFA_00600 0.63 0.70 0.56 70 120170 88 32 23 33 30
RFA_00601 0.48 0.50 0.46 57 99111 86 21 46 19 57
RFA_00602 0.69 0.72 0.67 83 101351 61 10 31 20 33
RFA_00606 0.66 0.67 0.65 26 21281 28 6 8 14 13
RFA_00620 0.63 0.62 0.65 24 21908 26 4 9 13 15
RFA_00621 0.38 0.39 0.38 30 46280 63 10 40 13 46
RFA_00623 0.44 0.44 0.44 34 43879 57 8 35 14 44
RFA_00624 0.51 0.54 0.48 33 30066 42 6 30 6 28
RFA_00626 0.89 0.86 0.93 75 56535 28 2 4 22 12
RFA_00627 0.73 0.70 0.76 61 56873 35 4 15 16 26
RFA_00628 0.78 0.74 0.81 64 57212 40 0 15 25 22
RFA_00630 0.60 0.60 0.60 52 56866 44 8 27 9 35
RFA_00639 0.23 0.24 0.21 21 54517 81 16 61 4 66
RFA_00805 0.56 0.55 0.56 83 133238 77 6 59 12 67
RFA_00814 0.91 0.95 0.87 39 25155 23 4 2 17 2
RFA_00815 0.66 0.71 0.62 29 24484 33 5 13 15 12
RFA_00816 0.68 0.73 0.63 30 23172 26 12 6 8 11
RFA_00817 0.10 0.12 0.08 5 21885 56 16 39 1 36
RFA_00818 0.00 0.00 0.00 0 20245 56 20 36 0 41
RFA_00819 0.79 0.80 0.79 33 27924 34 0 9 25 8
RFA_00820 0.86 0.87 0.85 139 151361 39 1 24 14 21
RFA_00830 0.50 0.47 0.54 73 152492 108 5 58 45 81
SRP_00002 0.88 0.86 0.89 88 45051 12 4 7 1 14
SRP_00006 0.84 0.83 0.86 84 45655 17 3 11 3 17
SRP_00009 0.36 0.34 0.37 35 46571 62 10 49 3 67
SRP_00011 0.52 0.50 0.54 52 46264 46 2 42 2 52
SRP_00012 0.71 0.68 0.74 69 46267 27 2 22 3 32
SRP_00015 0.70 0.68 0.72 67 46267 31 2 24 5 32
SRP_00016 0.85 0.83 0.88 91 47791 15 2 11 2 18
SRP_00018 0.69 0.68 0.71 55 38425 34 2 21 11 26
SRP_00019 0.90 0.88 0.92 80 35959 12 4 3 5 11
SRP_00024 0.76 0.77 0.74 67 37585 23 7 16 0 20
SRP_00026 0.62 0.61 0.63 54 36770 38 2 30 6 34
SRP_00027 0.64 0.62 0.67 54 37047 28 3 24 1 33
SRP_00030 0.76 0.77 0.76 68 36766 24 4 18 2 20
SRP_00031 0.66 0.66 0.66 59 36226 35 2 28 5 30
SRP_00037 0.13 0.13 0.13 11 36499 75 6 69 0 76
SRP_00050 0.97 0.94 1.00 93 44757 2 0 0 2 6
SRP_00053 0.79 0.79 0.80 74 45057 27 3 16 8 20
SRP_00060 0.92 0.91 0.94 91 44454 9 1 5 3 9
SRP_00061 0.91 0.90 0.93 90 44753 11 1 6 4 10
SRP_00066 0.00 0.00 0.00 0 45357 94 11 83 0 100
SRP_00069 0.78 0.78 0.79 66 34369 21 2 16 3 19
SRP_00070 0.36 0.41 0.32 50 126599 116 31 76 9 71
SRP_00073 0.68 0.72 0.65 51 38981 41 7 21 13 20
SRP_00079 0.57 0.59 0.56 52 41812 46 3 38 5 36
SRP_00085 0.64 0.63 0.65 64 45353 36 6 28 2 37
SRP_00086 0.72 0.73 0.71 73 44150 31 3 27 1 27
SRP_00087 0.17 0.21 0.15 12 37319 75 22 48 5 46
SRP_00088 0.68 0.69 0.68 61 34101 29 5 24 0 28
SRP_00089 0.84 0.82 0.86 74 35692 12 1 11 0 16
SRP_00090 0.65 0.63 0.68 57 35427 29 2 25 2 33
SRP_00091 0.79 0.81 0.77 77 52875 26 5 18 3 18
SRP_00099 0.58 0.59 0.57 56 44751 45 9 34 2 39
SRP_00102 0.68 0.68 0.68 69 44450 32 6 26 0 32
SRP_00103 0.84 0.82 0.86 84 45353 14 0 14 0 18
SRP_00104 0.47 0.52 0.42 36 34367 56 8 42 6 33
SRP_00117 0.83 0.81 0.85 83 45353 16 3 12 1 19
SRP_00123 0.91 0.90 0.91 82 36495 11 3 5 3 9
SRP_00124 0.57 0.56 0.57 48 37044 38 6 30 2 37
SRP_00127 0.75 0.74 0.75 88 72273 34 8 21 5 31
SRP_00130 0.23 0.23 0.24 22 49677 71 10 61 0 75
SRP_00136 0.41 0.46 0.37 33 44164 62 19 37 6 38
SRP_00142 0.67 0.67 0.67 62 45963 35 2 29 4 31
SRP_00143 0.85 0.84 0.86 85 49671 19 1 13 5 16
SRP_00144 0.74 0.73 0.74 69 46572 31 1 23 7 25
SRP_00148 0.25 0.26 0.24 23 49989 84 10 64 10 64
SRP_00152 0.65 0.65 0.66 67 45651 36 3 32 1 36
SRP_00153 0.76 0.74 0.79 79 46871 23 6 15 2 28
SRP_00157 0.38 0.42 0.36 30 44169 61 15 39 7 42
SRP_00158 0.36 0.42 0.31 48 124095 122 42 66 14 67
SRP_00160 0.46 0.45 0.47 58 86196 66 3 63 0 72
SRP_00171 0.00 0.00 0.00 0 45352 99 16 83 0 88
SRP_00173 0.73 0.72 0.75 65 38139 28 1 21 6 25
SRP_00174 0.69 0.71 0.66 61 38689 34 8 23 3 25
SRP_00175 0.50 0.51 0.49 43 44464 50 9 35 6 41
SRP_00178 0.82 0.80 0.84 82 45655 18 4 12 2 20
SRP_00179 0.88 0.85 0.91 89 45958 13 1 8 4 16
SRP_00181 0.32 0.31 0.34 32 45961 63 5 58 0 70
SRP_00182 0.74 0.72 0.77 73 45961 23 5 17 1 28
SRP_00184 0.71 0.68 0.75 68 45965 27 6 17 4 32
SRP_00188 0.21 0.22 0.20 17 31042 66 10 56 0 62
SRP_00197 0.38 0.38 0.39 38 49357 61 4 56 1 63
SRP_00198 0.38 0.38 0.38 39 50937 65 4 60 1 64
SRP_00199 0.31 0.30 0.34 31 50948 64 4 57 3 74
SRP_00201 0.77 0.77 0.78 85 47786 26 5 19 2 26
SRP_00202 0.84 0.84 0.84 98 54169 22 2 16 4 19
SRP_00203 0.74 0.75 0.72 79 48719 36 3 27 6 26
SRP_00204 0.78 0.77 0.78 79 49040 24 4 18 2 23
SRP_00206 0.84 0.83 0.84 90 47788 18 5 12 1 18
SRP_00208 0.67 0.67 0.67 68 46564 35 7 26 2 33
SRP_00228 0.87 0.88 0.87 84 45354 18 5 8 5 11
SRP_00230 0.80 0.80 0.80 72 39531 21 3 15 3 18
SRP_00234 0.73 0.72 0.74 62 36231 29 1 21 7 24
SRP_00239 0.24 0.25 0.24 23 50308 72 19 53 0 70
SRP_00240 0.79 0.78 0.80 80 48105 26 2 18 6 22
SRP_00241 0.54 0.59 0.50 48 45960 50 12 36 2 34
SRP_00247 0.51 0.54 0.47 47 47179 56 8 44 4 40
SRP_00252 0.63 0.65 0.62 58 49047 39 10 26 3 31
SRP_00253 0.62 0.63 0.60 57 49360 43 7 31 5 33
SRP_00254 0.49 0.54 0.45 33 32311 46 12 29 5 28
SRP_00255 0.60 0.62 0.59 58 47487 47 3 38 6 36
SRP_00257 0.85 0.86 0.84 93 50929 20 4 14 2 15
SRP_00260 0.75 0.78 0.72 78 47787 32 8 22 2 22
SRP_00265 0.58 0.63 0.54 46 41243 50 10 29 11 27
SRP_00267 0.81 0.82 0.81 79 44453 25 1 18 6 17
SRP_00276 0.86 0.85 0.86 94 50612 16 5 10 1 16
SRP_00278 0.72 0.72 0.72 76 45951 31 4 25 2 29
SRP_00282 0.30 0.37 0.26 23 43275 74 23 44 7 40
SRP_00286 0.68 0.67 0.69 116 136859 60 3 48 9 58
SRP_00287 0.65 0.65 0.65 106 141615 70 7 50 13 56
SRP_00290 0.73 0.73 0.73 98 100441 49 3 34 12 37
SRP_00292 0.69 0.66 0.71 115 137388 54 1 46 7 58
SRP_00294 0.27 0.28 0.27 46 129116 127 12 112 3 121
SRP_00299 0.90 0.86 0.93 85 44162 12 5 1 6 14
SRP_00300 0.86 0.84 0.88 79 44163 15 0 11 4 15
SRP_00301 0.87 0.86 0.87 74 32555 16 1 10 5 12
SRP_00302 0.39 0.40 0.39 32 41533 61 6 45 10 49
SRP_00308 0.07 0.07 0.07 6 36227 82 11 71 0 82
SRP_00317 0.87 0.84 0.90 82 45059 12 1 8 3 16
SRP_00321 0.78 0.77 0.79 83 47481 24 3 19 2 25
SRP_00322 0.61 0.61 0.60 67 48405 45 6 38 1 42
SRP_00323 0.92 0.92 0.93 98 47173 10 0 7 3 9
SRP_00328 0.69 0.71 0.68 60 39533 31 7 21 3 25
SRP_00329 0.75 0.74 0.75 63 39819 24 3 18 3 22
SRP_00330 0.49 0.49 0.48 47 49988 53 3 48 2 48
SRP_00331 0.64 0.63 0.65 55 37590 33 2 28 3 32
SRP_00332 0.85 0.86 0.84 91 50295 18 6 11 1 15
SRP_00335 0.30 0.41 0.22 16 35172 77 26 31 20 23
SRP_00337 0.67 0.66 0.67 60 35422 31 1 28 2 31
SRP_00339 0.56 0.59 0.53 55 44448 50 6 42 2 39
SRP_00340 0.54 0.57 0.52 47 41237 46 8 36 2 35
SRP_00347 0.75 0.76 0.74 73 46566 29 9 17 3 23
SRP_00361 0.71 0.72 0.70 65 41812 38 5 23 10 25
SRP_00368 0.96 0.95 0.98 93 43861 7 0 2 5 5
SRP_00371 0.78 0.78 0.77 64 36232 23 2 17 4 18
SRP_00382 0.56 0.56 0.57 95 141610 85 6 67 12 75
TMR_00173 0.31 0.36 0.28 15 42141 67 16 23 28 27
TMR_00357 0.40 0.41 0.39 38 82931 75 22 37 16 54
TMR_00601 0.56 0.57 0.55 24 58952 77 2 18 57 18
TMR_00603 0.64 0.65 0.64 28 60334 76 7 9 60 15
TMR_00611 0.43 0.45 0.41 46 61314 65 16 49 0 56
TMR_00696 0.12 0.12 0.11 14 84955 125 19 90 16 100

^top


Matthews Correlation Coeffient, Sensitivity and Positive Predictive Value have been calculated based on the paper by Gardener & Giegerich, 2004.