Skip to main content
. 2020 Sep 7;20(18):5073. doi: 10.3390/s20185073

Table 2.

CMS performance in the form of Average Precision, Recall, F1-measure, and AUC metrics.

Database Year Method Precision Recall L-AUC F1-Measure
2015 Ren et al. [113] 95.8 3.5 6.7
NWPU-crowd 2017 Hu et al. [114] 52.9 61.1 56.7
2019 Gao et al. [115] 55.8 49.6 52.5
2019 Liu et al. [116] 66.6 54.3 59.8
2018 Idrees et al. [43] 75.8 63.5 0.591
2015 Badrinarayanan et al. [117] 71.8 62.9 0.67
2016 Huang et al. [118] 70.1 58.1 0.637
2016 He et al. [119] 61.6 66.9 0.612
UCF_QNRF 2018 Shen et al. [120] 75.6 59.7
2018 Liu et al. [116] 59.3 63.0
2015 Zhang et al. [44] 78.1 65.1
2019 Liu et al. [116] 81.5 71.1
2016 Zhang et al. [50] 71.0 72.4
2020 Xue et al. [121] 82.4 78.3
2019 Liu et al. [116] 12.0 32.6
2018 Shen et al. [120] 79.2 82.2
2018 Liu et al. [116] 82.2 73.3
2015 Zhang et al. [44] 81.9 77.9
Shanghai Tech. A 2019 Liu et al. [116] 86.5 69.7
2018 Idrees et al. [43] 79.0 72.3
2016 Zhang et al. [50] 76.5 81.7
2020 Xue et al. [121] 87.3 79.2
2019 Liu et al. [116] 15.6 37.5
2019 Liu et al. [116] 79.1 60.1
2018 Shen et al. [120] 80.2 78.8
2018 Liu et al. [116] 75.4 79.3
Shanghai Tech. B 2015 Zhang et al. [44] 84.1 75.8
2019 Liu et al. [116] 78.1 73.9
2019 Idrees et al. [43] 76.8 78.0
2019 Zhang et al. [50] 82.4 76.0
2020 Xue et al. [121] 86.7 80.5
2019 Liu et al. [116] 60.0 23.0
2019 Liu et al. [116] 73.7 79.6
2018 Shen et al. [120] 68.5 81.2
2018 Liu et al. [116] 73.8 78.2
World Expo 2015 Zhang et al. [44] 79.5 73.1
2019 Liu et al. [116] 71.6 75.4
2019 Idrees et al. [43] 72.4 78.3
2019 Zhang et al. [50] 80.9 77.5
2020 Xue et al. [121] 82.0 81.5