Skip to main content
. 2020 Feb 14;11:67. doi: 10.3389/fphar.2020.00067

Table 2.

Drug structure-based model performance.

DILI subtype Feature Support vector machine Random forest Applicability domain analysis
Five fold cross validation 0.632 estimator (100 sampling) External test set (Y-rand.) Five fold cross validation 0.632 estimator (100 sampling) External test set (Y-rand.)
SE SP ACC MCC AUC SE SP ACC MCC AUC SE SP ACC MCC AUC Z SE SP ACC MCC AUC SE SP ACC MCC AUC SE SP ACC MCC AUC Z OD/total ratio
Cholestasis 2D descriptor 0.79 ± 0.07 0.69 ± 0.12 0.74 ± 0.08 0.48 ± 0.15 0.48 ± 0.15 0.82 ± 0.09 0.74 ± 0.08 0.78 ± 0.05 0.55 ± 0.09 0.55 ± 0.09 0.75 0.68 0.69 0.33 0.75 3.64 0.66 ± 0.19 0.8 ± 0.17 0.69 ± 0.08 0.46 ± 0.15 0.46 ± 0.15 0.71 ± 0.07 0.85 ± 0.08 0.78 ± 0.05 0.57 ± 0.1 0.57 ± 0.1 0.75 0.76 0.76 0.41 0.85 2.98 1/70 0.014
Atompair FP 0.97 ± 0.08 0.94 ± 0.06 0.95 ± 0.06 0.89 ± 0.12 0.89 ± 0.12 0.93 ± 0.04 0.98 ± 0.04 0.95 ± 0.03 0.91 ± 0.05 0.91 ± 0.05 0.92 0.99 0.98 0.90 0.96 10.32 0.94 ± 0.08 0.96 ± 0.05 0.95 ± 0.05 0.89 ± 0.1 0.89 ± 0.1 0.95 ± 0.03 0.99 ± 0.02 0.97 ± 0.02 0.93 ± 0.03 0.93 ± 0.03 0.92 0.98 0.97 0.9 0.95 13.06 3/70 0.043
Avalon count FP 0.8 ± 0.08 0.73 ± 0.11 0.78 ± 0.08 0.53 ± 0.15 0.53 ± 0.15 0.8 ± 0.07 0.78 ± 0.08 0.79 ± 0.04 0.57 ± 0.08 0.57 ± 0.08 0.67 0.78 0.76 0.37 0.79 2.91 0.69 ± 0.14 0.71 ± 0.14 0.67 ± 0.07 0.39 ± 0.14 0.39 ± 0.14 0.73 ± 0.08 0.85 ± 0.07 0.79 ± 0.04 0.58 ± 0.08 0.58 ± 0.08 0.75 0.74 0.74 0.39 0.75 4.76 2/70 0.029
Avalon FP 0.75 ± 0.12 0.79 ± 0.17 0.77 ± 0.11 0.53 ± 0.22 0.53 ± 0.22 0.78 ± 0.06 0.8 ± 0.08 0.79 ± 0.04 0.58 ± 0.08 0.58 ± 0.08 0.67 0.71 0.70 0.30 0.74 3.45 0.65 ± 0.19 0.74 ± 0.15 0.68 ± 0.09 0.4 ± 0.2 0.4 ± 0.2 0.7 ± 0.08 0.8 ± 0.07 0.75 ± 0.04 0.51 ± 0.08 0.51 ± 0.08 0.58 0.74 0.71 0.26 0.73 3.82 0/70 0.000
Morgan (lv2) FP 0.72 ± 0.17 0.79 ± 0.15 0.75 ± 0.13 0.5 ± 0.27 0.5 ± 0.27 0.68 ± 0.09 0.79 ± 0.1 0.73 ± 0.04 0.47 ± 0.08 0.47 ± 0.08 0.67 0.81 0.79 0.41 0.86 3.87 0.69 ± 0.18 0.74 ± 0.19 0.7 ± 0.14 0.43 ± 0.26 0.43 ± 0.26 0.75 ± 0.1 0.74 ± 0.08 0.74 ± 0.05 0.49 ± 0.09 0.49 ± 0.09 0.75 0.76 0.76 0.41 0.7 4.49 0/70 0.000
Morgan (lv3) FP 0.74 ± 0.18 0.6 ± 0.21 0.64 ± 0.06 0.36 ± 0.16 0.36 ± 0.16 0.68 ± 0.15 0.71 ± 0.18 0.69 ± 0.05 0.4 ± 0.1 0.4 ± 0.1 0.59 0.78 0.75 0.30 0.81 1.58 0.65 ± 0.15 0.61 ± 0.08 0.63 ± 0.07 0.27 ± 0.16 0.27 ± 0.16 0.63 ± 0.15 0.72 ± 0.14 0.68 ± 0.04 0.37 ± 0.09 0.37 ± 0.09 0.67 0.78 0.76 0.36 0.78 4.11 2/70 0.029
Morgan (lv4) FP 0.77 ± 0.17 0.72 ± 0.16 0.74 ± 0.15 0.48 ± 0.31 0.48 ± 0.31 0.77 ± 0.07 0.73 ± 0.08 0.75 ± 0.05 0.5 ± 0.09 0.5 ± 0.09 0.75 0.73 0.73 0.38 0.75 3.31 0.83 ± 0.1 0.73 ± 0.15 0.78 ± 0.11 0.56 ± 0.21 0.56 ± 0.21 0.81 ± 0.08 0.74 ± 0.07 0.77 ± 0.05 0.55 ± 0.1 0.55 ± 0.1 0.75 0.74 0.74 0.39 0.76 2.9 3/70 0.043
Layer FP 0.64 ± 0.2 0.72 ± 0.12 0.67 ± 0.12 0.35 ± 0.21 0.35 ± 0.21 0.71 ± 0.1 0.76 ± 0.12 0.73 ± 0.05 0.48 ± 0.1 0.48 ± 0.1 0.75 0.68 0.69 0.33 0.77 2.12 0.78 ± 0.12 0.77 ± 0.15 0.77 ± 0.05 0.55 ± 0.1 0.55 ± 0.1 0.72 ± 0.1 0.76 ± 0.09 0.74 ± 0.04 0.48 ± 0.08 0.48 ± 0.08 0.67 0.72 0.71 0.31 0.74 3.55 0/70 0.000
MACCS FP 0.79 ± 0.17 0.69 ± 0.17 0.72 ± 0.11 0.46 ± 0.21 0.46 ± 0.21 0.73 ± 0.1 0.78 ± 0.12 0.76 ± 0.04 0.52 ± 0.08 0.52 ± 0.08 0.67 0.78 0.76 0.37 0.83 2.61 0.77 ± 0.11 0.65 ± 0.1 0.71 ± 0.06 0.42 ± 0.14 0.42 ± 0.14 0.75 ± 0.1 0.75 ± 0.07 0.75 ± 0.04 0.5 ± 0.09 0.5 ± 0.09 0.8 0.7 0.7 0.3 0.8 3.14 0/70 ####
Torsion FP 0.84 ± 0.12 0.94 ± 0.06 0.9 ± 0.05 0.78 ± 0.11 0.78 ± 0.11 0.85 ± 0.06 0.95 ± 0.03 0.9 ± 0.03 0.8 ± 0.05 0.8 ± 0.05 0.92 0.97 0.96 0.86 0.94 6.75 0.81 ± 0.16 0.94 ± 0.05 0.88 ± 0.08 0.76 ± 0.16 0.76 ± 0.16 0.81 ± 0.07 0.96 ± 0.04 0.88 ± 0.04 0.78 ± 0.07 0.78 ± 0.07 0.92 0.93 0.93 0.78 0.95 6.89 4/70 0.057
Cirrhosis 2D descriptor 0.78 ± 0.14 0.71 ± 0.2 0.72 ± 0.12 0.46 ± 0.22 0.46 ± 0.22 0.72 ± 0.12 0.79 ± 0.07 0.76 ± 0.04 0.51 ± 0.08 0.51 ± 0.08 0.80 0.75 0.75 0.41 0.84 3.07 0.73 ± 0.06 0.82 ± 0.12 0.79 ± 0.08 0.57 ± 0.15 0.57 ± 0.15 0.79 ± 0.09 0.87 ± 0.06 0.83 ± 0.05 0.67 ± 0.09 0.67 ± 0.09 0.6 0.79 0.77 0.32 0.82 3.06 5/73 0.068
Atompair FP 0.93 ± 0.1 0.99 ± 0.04 0.96 ± 0.05 0.92 ± 0.08 0.92 ± 0.08 0.96 ± 0.04 0.99 ± 0.03 0.98 ± 0.03 0.95 ± 0.05 0.95 ± 0.05 0.90 0.95 0.95 0.79 0.98 8.39 0.87 ± 0.09 0.98 ± 0.04 0.93 ± 0.02 0.86 ± 0.04 0.86 ± 0.04 0.94 ± 0.05 0.98 ± 0.03 0.96 ± 0.02 0.92 ± 0.05 0.92 ± 0.05 0.9 0.93 0.93 0.75 0.99 7.74 3/73 0.041
Avalon count FP 0.72 ± 0.12 0.9 ± 0.09 0.82 ± 0.1 0.63 ± 0.19 0.63 ± 0.19 0.83 ± 0.09 0.86 ± 0.08 0.85 ± 0.04 0.7 ± 0.07 0.7 ± 0.07 0.60 0.78 0.75 0.30 0.71 3.20 0.84 ± 0.11 0.8 ± 0.18 0.81 ± 0.13 0.62 ± 0.25 0.62 ± 0.25 0.79 ± 0.09 0.89 ± 0.06 0.85 ± 0.05 0.69 ± 0.09 0.69 ± 0.09 0.7 0.88 0.85 0.51 0.81 5.19 1/73 0.014
Avalon FP 0.71 ± 0.19 0.89 ± 0.14 0.8 ± 0.11 0.62 ± 0.21 0.62 ± 0.21 0.8 ± 0.09 0.85 ± 0.06 0.82 ± 0.04 0.65 ± 0.07 0.65 ± 0.07 0.70 0.90 0.87 0.54 0.86 4.83 0.67 ± 0.15 0.81 ± 0.08 0.74 ± 0.1 0.48 ± 0.18 0.48 ± 0.18 0.74 ± 0.09 0.87 ± 0.07 0.81 ± 0.04 0.63 ± 0.08 0.63 ± 0.08 0.7 0.83 0.81 0.43 0.87 5.81 0/73 0.000
Morgan (lv2) FP 0.72 ± 0.17 0.84 ± 0.15 0.78 ± 0.1 0.57 ± 0.22 0.57 ± 0.22 0.76 ± 0.08 0.89 ± 0.07 0.83 ± 0.04 0.66 ± 0.07 0.66 ± 0.07 0.70 0.73 0.73 0.32 0.78 2.39 0.74 ± 0.19 0.87 ± 0.1 0.82 ± 0.04 0.64 ± 0.07 0.64 ± 0.07 0.74 ± 0.08 0.89 ± 0.08 0.82 ± 0.04 0.65 ± 0.07 0.65 ± 0.07 0.9 0.91 0.91 0.71 0.91 7.21 3/73 0.041
Morgan (lv3) FP 0.75 ± 0.19 0.82 ± 0.07 0.78 ± 0.1 0.55 ± 0.23 0.55 ± 0.23 0.69 ± 0.09 0.84 ± 0.07 0.78 ± 0.04 0.54 ± 0.08 0.54 ± 0.08 0.80 0.85 0.84 0.53 0.89 3.99 0.72 ± 0.15 0.87 ± 0.08 0.8 ± 0.1 0.6 ± 0.19 0.6 ± 0.19 0.67 ± 0.1 0.85 ± 0.09 0.77 ± 0.03 0.53 ± 0.07 0.53 ± 0.07 0.7 0.9 0.87 0.54 0.86 5.61 3/73 0.041
Morgan (lv4) FP 0.76 ± 0.07 0.82 ± 0.14 0.79 ± 0.06 0.58 ± 0.11 0.58 ± 0.11 0.81 ± 0.09 0.87 ± 0.05 0.85 ± 0.04 0.69 ± 0.08 0.69 ± 0.08 0.80 0.80 0.80 0.47 0.82 4.70 0.72 ± 0.14 0.84 ± 0.12 0.79 ± 0.07 0.55 ± 0.12 0.55 ± 0.12 0.74 ± 0.08 0.89 ± 0.07 0.83 ± 0.03 0.65 ± 0.06 0.65 ± 0.06 0.8 0.91 0.9 0.64 0.88 7.06 0/73 0.000
Layer FP 0.84 ± 0.1 0.89 ± 0.12 0.86 ± 0.1 0.72 ± 0.2 0.72 ± 0.2 0.93 ± 0.06 0.88 ± 0.07 0.9 ± 0.04 0.81 ± 0.08 0.81 ± 0.08 0.70 0.88 0.86 0.51 0.91 3.90 0.68 ± 0.1 0.74 ± 0.09 0.7 ± 0.07 0.41 ± 0.11 0.41 ± 0.11 0.82 ± 0.08 0.92 ± 0.06 0.87 ± 0.04 0.75 ± 0.08 0.75 ± 0.08 0.8 0.9 0.9 0.6 0.9 4.23 0/73 ####
MACCS FP 0.78 ± 0.22 0.88 ± 0.14 0.84 ± 0.14 0.64 ± 0.31 0.64 ± 0.31 0.79 ± 0.1 0.84 ± 0.08 0.82 ± 0.05 0.63 ± 0.09 0.63 ± 0.09 0.70 0.88 0.86 0.51 0.85 4.28 0.66 ± 0.17 0.8 ± 0.25 0.73 ± 0.2 0.47 ± 0.38 0.47 ± 0.38 0.79 ± 0.08 0.87 ± 0.09 0.83 ± 0.04 0.67 ± 0.09 0.67 ± 0.09 0.7 0.85 0.82 0.46 0.83 4.83 0/73 0.000
Torsion FP 0.85 ± 0.15 0.98 ± 0.06 0.93 ± 0.05 0.86 ± 0.1 0.86 ± 0.1 0.88 ± 0.05 0.99 ± 0.02 0.94 ± 0.03 0.88 ± 0.05 0.88 ± 0.05 0.90 0.97 0.96 0.84 1.00 5.26 0.83 ± 0.05 0.97 ± 0.07 0.92 ± 0.03 0.83 ± 0.06 0.83 ± 0.06 0.86 ± 0.07 0.96 ± 0.03 0.91 ± 0.03 0.83 ± 0.06 0.83 ± 0.06 0.9 0.98 0.97 0.88 0.9 7.81 4/73 0.055
Hepatitis 2D descriptor 0.8 ± 0.11 0.7 ± 0.16 0.75 ± 0.05 0.52 ± 0.1 0.52 ± 0.1 0.74 ± 0.07 0.75 ± 0.05 0.75 ± 0.03 0.49 ± 0.06 0.49 ± 0.06 ### ### 0.83 0.61 0.85 5.06 0.62 ± 0.08 0.71 ± 0.09 0.67 ± 0.06 0.33 ± 0.12 0.33 ± 0.12 0.76 ± 0.06 0.84 ± 0.05 0.8 ± 0.03 0.61 ± 0.07 0.61 ± 0.07 0.67 0.76 0.69 0.37 0.77 9.17 0/77 ####
Atompair FP 0.99 ± 0.04 0.98 ± 0.04 0.99 ± 0.03 0.97 ± 0.06 0.97 ± 0.06 1 ± 0.02 0.98 ± 0.02 0.99 ± 0.02 0.98 ± 0.03 0.98 ± 0.03 0.99 0.96 0.98 0.94 1.00 10.85 0.99 ± 0.02 0.99 ± 0.03 0.99 ± 0.02 0.98 ± 0.03 0.98 ± 0.03 0.98 ± 0.02 0.99 ± 0.01 0.99 ± 0.01 0.97 ± 0.02 0.97 ± 0.02 0.95 0.95 0.95 0.88 0.98 8.95 7/77 0.091
Avalon count FP 0.67 ± 0.11 0.85 ± 0.04 0.76 ± 0.07 0.52 ± 0.12 0.52 ± 0.12 0.74 ± 0.07 0.83 ± 0.06 0.79 ± 0.04 0.57 ± 0.08 0.57 ± 0.08 0.66 0.67 0.66 0.28 0.77 4.06 0.6 ± 0.04 0.73 ± 0.15 0.67 ± 0.07 0.34 ± 0.16 0.34 ± 0.16 0.76 ± 0.06 0.82 ± 0.06 0.79 ± 0.04 0.58 ± 0.07 0.58 ± 0.07 0.71 0.62 0.69 0.3 0.68 3.58 5/77 0.065
Avalon FP 0.71 ± 0.11 0.83 ± 0.12 0.77 ± 0.12 0.53 ± 0.21 0.53 ± 0.21 0.79 ± 0.07 0.8 ± 0.07 0.79 ± 0.03 0.58 ± 0.05 0.58 ± 0.05 0.80 0.81 0.80 0.55 0.81 5.24 0.64 ± 0.13 0.8 ± 0.07 0.73 ± 0.05 0.45 ± 0.11 0.45 ± 0.11 0.75 ± 0.06 0.82 ± 0.06 0.79 ± 0.03 0.58 ± 0.07 0.58 ± 0.07 0.62 0.76 0.66 0.33 0.72 6.21 0/77 0.000
Morgan (lv2) FP 0.61 ± 0.15 0.8 ± 0.09 0.71 ± 0.11 0.41 ± 0.22 0.41 ± 0.22 0.73 ± 0.09 0.77 ± 0.06 0.75 ± 0.04 0.5 ± 0.07 0.5 ± 0.07 0.70 0.77 0.72 0.41 0.77 4.91 0.71 ± 0.12 0.81 ± 0.09 0.76 ± 0.09 0.51 ± 0.19 0.51 ± 0.19 0.71 ± 0.06 0.81 ± 0.06 0.76 ± 0.03 0.53 ± 0.06 0.53 ± 0.06 0.67 0.81 0.7 0.41 0.82 6.12 8/77 0.104
Morgan (lv3) FP 0.66 ± 0.14 0.71 ± 0.07 0.69 ± 0.08 0.37 ± 0.15 0.37 ± 0.15 0.74 ± 0.07 0.74 ± 0.09 0.74 ± 0.04 0.48 ± 0.07 0.48 ± 0.07 0.72 0.81 0.74 0.46 0.81 5.03 0.69 ± 0.13 0.76 ± 0.05 0.73 ± 0.08 0.46 ± 0.17 0.46 ± 0.17 0.72 ± 0.07 0.75 ± 0.06 0.73 ± 0.03 0.47 ± 0.07 0.47 ± 0.07 0.76 0.81 0.77 0.51 0.79 4.69 6/77 0.078
Morgan (lv4) FP 0.7 ± 0.24 0.85 ± 0.07 0.75 ± 0.13 0.54 ± 0.21 0.54 ± 0.21 0.69 ± 0.1 0.78 ± 0.09 0.73 ± 0.04 0.47 ± 0.07 0.47 ± 0.07 0.73 0.72 0.73 0.40 0.73 4.51 0.68 ± 0.13 0.81 ± 0.05 0.75 ± 0.08 0.5 ± 0.15 0.5 ± 0.15 0.76 ± 0.06 0.8 ± 0.06 0.78 ± 0.03 0.55 ± 0.06 0.55 ± 0.06 0.84 0.67 0.8 0.49 0.8 6.33 2/77 0.026
Layer FP 0.72 ± 0.1 0.86 ± 0.08 0.79 ± 0.06 0.58 ± 0.1 0.58 ± 0.1 0.72 ± 0.06 0.84 ± 0.08 0.78 ± 0.04 0.56 ± 0.06 0.56 ± 0.06 0.73 0.86 0.77 0.52 0.83 3.63 0.69 ± 0.09 0.86 ± 0.06 0.78 ± 0.04 0.56 ± 0.07 0.56 ± 0.07 0.7 ± 0.06 0.86 ± 0.07 0.78 ± 0.03 0.58 ± 0.06 0.58 ± 0.06 0.68 0.67 0.68 0.31 0.67 2.97 0/77 0.000
MACCS FP 0.67 ± 0.14 0.82 ± 0.06 0.74 ± 0.05 0.49 ± 0.08 0.49 ± 0.08 0.69 ± 0.08 0.8 ± 0.07 0.75 ± 0.04 0.49 ± 0.06 0.49 ± 0.06 0.66 0.77 0.68 0.36 0.77 2.71 0.66 ± 0.16 0.78 ± 0.13 0.73 ± 0.06 0.47 ± 0.08 0.47 ± 0.08 0.71 ± 0.06 0.84 ± 0.06 0.78 ± 0.03 0.56 ± 0.07 0.56 ± 0.07 0.68 0.71 0.69 0.35 0.78 4.13 0/77 0.000
Torsion FP 0.85 ± 0.07 0.97 ± 0.03 0.91 ± 0.03 0.82 ± 0.05 0.82 ± 0.05 0.89 ± 0.03 0.98 ± 0.02 0.94 ± 0.02 0.87 ± 0.03 0.87 ± 0.03 0.85 0.96 0.87 0.72 0.94 6.21 0.85 ± 0.11 0.98 ± 0.04 0.91 ± 0.06 0.84 ± 0.11 0.84 ± 0.11 0.89 ± 0.03 0.97 ± 0.02 0.93 ± 0.02 0.86 ± 0.04 0.86 ± 0.04 0.86 0.95 0.88 0.74 0.96 6.82 6/77 0.078
Steatosis 2D descriptor 0.71 ± 0.14 0.72 ± 0.22 0.71 ± 0.1 0.43 ± 0.21 0.43 ± 0.21 0.74 ± 0.07 0.8 ± 0.06 0.77 ± 0.04 0.55 ± 0.08 0.55 ± 0.08 0.59 0.78 0.74 0.31 0.72 2.40 0.64 ± 0.16 0.74 ± 0.1 0.7 ± 0.08 0.38 ± 0.17 0.38 ± 0.17 0.65 ± 0.09 0.83 ± 0.06 0.76 ± 0.04 0.49 ± 0.08 0.49 ± 0.08 0.75 0.66 0.68 0.32 0.7 3.01 1/65 0.015
Atompair FP 0.99 ± 0.04 0.95 ± 0.08 0.96 ± 0.04 0.93 ± 0.07 0.93 ± 0.07 0.93 ± 0.04 0.95 ± 0.04 0.94 ± 0.03 0.88 ± 0.05 0.88 ± 0.05 0.84 0.95 0.93 0.76 0.94 6.86 0.96 ± 0.07 0.97 ± 0.04 0.96 ± 0.04 0.92 ± 0.07 0.92 ± 0.07 0.9 ± 0.04 0.99 ± 0.02 0.95 ± 0.02 0.91 ± 0.04 0.91 ± 0.04 0.92 0.98 0.97 0.9 0.98 8.64 4/65 0.062
Avalon count FP 0.63 ± 0.13 0.77 ± 0.08 0.69 ± 0.08 0.38 ± 0.15 0.38 ± 0.15 0.69 ± 0.08 0.79 ± 0.08 0.74 ± 0.04 0.48 ± 0.08 0.48 ± 0.08 0.67 0.72 0.71 0.32 0.73 2.66 0.65 ± 0.23 0.73 ± 0.12 0.68 ± 0.12 0.39 ± 0.16 0.39 ± 0.16 0.72 ± 0.08 0.82 ± 0.07 0.77 ± 0.05 0.54 ± 0.09 0.54 ± 0.09 0.67 0.7 0.69 0.29 0.68 2.3 3/65 0.046
Avalon FP 0.66 ± 0.22 0.8 ± 0.1 0.73 ± 0.08 0.45 ± 0.19 0.45 ± 0.19 0.69 ± 0.09 0.76 ± 0.09 0.73 ± 0.05 0.45 ± 0.09 0.45 ± 0.09 0.75 0.85 0.84 0.53 0.72 3.51 0.68 ± 0.16 0.72 ± 0.17 0.71 ± 0.1 0.41 ± 0.22 0.41 ± 0.22 0.69 ± 0.09 0.83 ± 0.09 0.76 ± 0.05 0.54 ± 0.1 0.54 ± 0.1 0.83 0.74 0.75 0.46 0.81 5.24 0/65 0.000
Morgan (lv2) FP 0.69 ± 0.1 0.67 ± 0.26 0.67 ± 0.11 0.37 ± 0.21 0.37 ± 0.21 0.65 ± 0.07 0.82 ± 0.08 0.74 ± 0.04 0.48 ± 0.07 0.48 ± 0.07 0.84 0.76 0.77 0.48 0.82 6.00 0.63 ± 0.17 0.71 ± 0.15 0.69 ± 0.09 0.36 ± 0.15 0.36 ± 0.15 0.72 ± 0.07 0.7 ± 0.08 0.71 ± 0.04 0.42 ± 0.08 0.42 ± 0.08 0.67 0.79 0.77 0.39 0.69 2.39 1/65 0.015
Morgan (lv3) FP 0.78 ± 0.17 0.81 ± 0.16 0.77 ± 0.13 0.57 ± 0.24 0.57 ± 0.24 0.73 ± 0.12 0.79 ± 0.1 0.76 ± 0.06 0.53 ± 0.1 0.53 ± 0.1 0.75 0.78 0.77 0.44 0.76 5.25 0.81 ± 0.06 0.68 ± 0.1 0.75 ± 0.06 0.49 ± 0.13 0.49 ± 0.13 0.78 ± 0.08 0.75 ± 0.07 0.76 ± 0.04 0.53 ± 0.08 0.53 ± 0.08 0.75 0.74 0.74 0.39 0.78 4.59 0/65 0.000
Morgan (lv4) FP 0.7 ± 0.22 0.87 ± 0.06 0.77 ± 0.1 0.57 ± 0.17 0.57 ± 0.17 0.66 ± 0.11 0.86 ± 0.08 0.76 ± 0.05 0.53 ± 0.09 0.53 ± 0.09 0.92 0.80 0.82 0.59 0.87 5.28 0.75 ± 0.18 0.66 ± 0.12 0.71 ± 0.07 0.42 ± 0.17 0.42 ± 0.17 0.81 ± 0.08 0.8 ± 0.08 0.8 ± 0.04 0.61 ± 0.08 0.61 ± 0.08 0.67 0.79 0.77 0.39 0.78 6.92 3/65 0.046
Layer FP 0.77 ± 0.15 0.85 ± 0.06 0.8 ± 0.09 0.62 ± 0.16 0.62 ± 0.16 0.75 ± 0.08 0.83 ± 0.06 0.79 ± 0.04 0.58 ± 0.08 0.58 ± 0.08 ### ### 0.85 0.60 0.92 5.10 0.74 ± 0.15 0.8 ± 0.1 0.77 ± 0.09 0.55 ± 0.18 0.55 ± 0.18 0.77 ± 0.06 0.85 ± 0.06 0.81 ± 0.04 0.63 ± 0.07 0.63 ± 0.07 0.67 0.79 0.77 0.39 0.73 3.27 0/65 ####
MACCS FP 0.75 ± 0.18 0.72 ± 0.13 0.72 ± 0.13 0.46 ± 0.26 0.46 ± 0.26 0.76 ± 0.09 0.76 ± 0.09 0.76 ± 0.04 0.52 ± 0.08 0.52 ± 0.08 0.75 0.78 0.77 0.44 0.80 3.89 0.65 ± 0.12 0.78 ± 0.11 0.72 ± 0.08 0.44 ± 0.16 0.44 ± 0.16 0.7 ± 0.09 0.79 ± 0.07 0.75 ± 0.04 0.5 ± 0.08 0.5 ± 0.08 0.83 0.68 0.71 0.4 0.81 2.95 0/65 0.000
Torsion FP 0.84 ± 0.1 0.99 ± 0.04 0.91 ± 0.06 0.83 ± 0.11 0.83 ± 0.11 0.82 ± 0.06 0.98 ± 0.03 0.9 ± 0.03 0.8 ± 0.06 0.8 ± 0.06 0.84 0.99 0.96 0.85 0.96 7.38 0.83 ± 0.09 0.97 ± 0.04 0.9 ± 0.05 0.8 ± 0.09 0.8 ± 0.09 0.84 ± 0.06 0.99 ± 0.02 0.92 ± 0.03 0.84 ± 0.05 0.84 ± 0.05 0.92 0.98 0.97 0.9 0.95 8.8 3/65 0.046

*SE, sensitivity; SP, specificity; ACC, accuracy; MCC, Matthew's correlation coefficient; AUC, area under the ROC curve; OD, out-of-domain. Bolded and italic texts highlighted best performance among models.