Table 4.
The auxiliary performance of Interpretable Eye Diseases Screening System (IEDSS) in the real-world scenario.
| Diseases | IEDSS |
Junior ophthalmologist (JO) |
Senior ophthalmologist (SO) |
||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| ACC (%)(95%CI) | Sensitivity (%) (95%CI) | Specificity (%) (95%CI) |
P value |
Without IEDSS |
With IEDSS |
P value | Without IEDSS |
With IEDSS |
P value | ||||||||||
| IEDSS vs JO | IEDSS vs SO | ACC (%)(95%CI) | Sensitivity (%) (95%CI) | Specificity (%) (95%CI) | ACC (%)(95%CI) | Sensitivity (%) (95%CI) | Specificity (%) (95%CI) | ACC (%)(95%CI) | Sensitivity (%) (95%CI) | Specificity (%) (95%CI) | ACC (%)(95%CI) | Sensitivity (%) (95%CI) | Specificity (%) (95%CI) | ||||||
| DR | 97·36(96·73-97·98) | 97·62(95·18-98·89) | 97·32(96·53-97·93) | 0·001⁎⁎ | 0·268 | 97·83(97·26-98·40) | 91·67(88·05-94·30) | 98·77(98·19-99·17) | 98·62(98·17-99·07) | 93·75(90·46-96·00) | 99·36(98·91-99·64) | 0·299 | 98·93(98·54-99·33) | 96·13(93·31-97·84) | 99·36(98·91-99·64) | 99·45(99·16-99·74) | 97·92(95·57-99·08) | 99·68(99·31-99·86) | 0·173 |
| CSCR | 97·20(96·56-97·84) | 88·37(79·21-93·98) | 97·51(96·79-98·07) | 0·012* | 0·648 | 98·46(97·98-98·94) | 73·26(62·44-81·96) | 99·35(98·92-99·61) | 99·17(98·82-99·52) | 87·21(77·85-93·13) | 99·59(99·22-99·79) | 0·022 | 98·90(98·49-99·30) | 86·05(76·50-92·27) | 99·35(98·92-99·61) | 99·37(99·06-99·68) | 91·86(83·42-96·39) | 99·63(99·28-99·82) | 0·224 |
| MH | 99·41(99·11-99·71) | 96·55(87·05-99·40) | 99·48(99·08-99·71) | 0·015 * | 0·083 | 99·61(99·36-99·85) | 82·76(70·12-90·99) | 100·00(99·81-100·00) | 99·92(99·81-100·00) | 96·55(87·05-99·40) | 100·00(99·81-100·00) | 0·015* | 99·72(99·52-99·93) | 87·93(76·09-94·61) | 100·00(99·81-100·00) | 99·96(99·88-100·00) | 98·28(89·54-99·91) | 100·00(99·81-100·00) | 0·028* |
| EMM | 98·78(98·35-99·20) | 93·94(88·21-97·15) | 99·04(98·54-99·38) | 0·000⁎⁎ | 0·025* | 98·70(98·26-99·14) | 78·03(69·82-84·57) | 99·83(99·54-99·95) | 99·65(99·41-99·59) | 93·94(88·02-97·15) | 99·96(99·73-100·00) | 0·000** | 99·25(98·91-99·59) | 85·61(78·18-90·89) | 100·00(99·80-100·00) | 99·65(99·41-99·88) | 93·18(87·08-96·64) | 100·00(99·80-100·00) | 0·046* |
| Wet-AMD | 97·59(97·00-98·19) | 93·48(87·62-96·78) | 97·83(97·14-98·36) | 0·008⁎⁎ | 0·099 | 98·07(97·53-98·60) | 83·33(75·83-88·93) | 98·92(98·39-99·28) | 99·25(98·91-99·59) | 91·30(84·98-95·22) | 99·71(99·37-99·87) | 0·047* | 99·05(98·68-99·43) | 87·68(80·74-92·45) | 99·71(99·37-99·87) | 99·57(99·31-99·82) | 93·48(87·62-96·78) | 99·92(99·66-99·99) | 0·099 |
| CRVO | 95·94(95·17-96·71) | 99·04(93·99-99·95) | 95·80(94·91-96·55) | 0·010* | 0·031* | 98·86(98·44-99·27) | 91·35(83·78-95·72) | 99·18(98·71-99·48) | 99·17(98·82-99·52) | 94·23(87·36-97·63) | 99·38(98·96-99·64) | 0·421 | 99·33(99·01-99·65) | 93·27(86·15-97·02) | 99·59(99·22-99·79) | 99·68(99·47-99·90) | 97·12(91·19-99·25) | 99·79(99·49-99·92) | 0·195 |
| BRVO | 99·13(98·77-99·49) | 98·39(94·98-99·58) | 99·19(98·74-99·50) | 0·006 ⁎⁎ | 0·311 | 99·17(98·82-99·52) | 92·47(87·44-95·67) | 99·70(99·36-99·87) | 99·61(99·36-99·85) | 96·24(92·09-98·34) | 99·87(99·59-99·97) | 0·116 | 99·72(99·52-99·93) | 96·77(92·79-98·68) | 99·96(99·72-100·00) | 99·80(99·63-99·98) | 97·85(94·23-99·31) | 99·96(99·72-100·00) | 0·5210 |
| RT | 99·80(99·63-99·98) | 98·72(96·01-99·67) | 99·91(99·65-99·98) | 0·000 ⁎⁎ | 0·127 | 98·93(98·54-99·33) | 88·51(83·56-92·16) | 100·00(99·79-100·00) | 99·88(99·75-100·00) | 98·72(96·01-99·67) | 100·00(99·79-100·00) | 0·000⁎⁎ | 99·68(99·47-99·90) | 96·60(93·15-98·41) | 100·00(99·79-100·00) | 99·96(99·88-100·00) | 99·57(97·28-99·98) | 100·00(99·79-100·00) | 0·018* |
| ODE | 99·96(99·88-100·00) | 100·00(88·57-100·00) | 99·88(99·62-99·97) | 0·005⁎⁎ | 0·314 | 99·72(99·52-99·93) | 81·58(65·11-91·68) | 100·00(99·81-100·00) | 99·96(99·88-100·00) | 97·37(84·57-99·86) | 100·00(99·81-100·00) | 0·025* | 99·96(99·98-100·00) | 97·37(84·57-99·86) | 100·00(99·81-100·00) | 100·00(100·00-100·00) | 100·00(88·57-100·00) | 100·00(99·81-100·00) | 0·314 |
| OA | 99·61(99·36-99·85) | 98·82(92·71-99·94) | 99·63(99·28-99·82) | 0·096 | 0·560 | 99·80(99·63-99·98) | 94·12(86·20-97·81) | 100·00(99·80-100·00) | 99·96(99·88-100·00) | 98·82(92·71-99·94) | 100·00(99·80-100·00) | 0·096 | 99·92(99·81-100·00) | 97·65(90·96-99·59) | 100·00(99·80-100·00) | 99·96(99·88-100·00) | 98·82(92·71-99·94) | 100·00(99·80-100·00) | 0·560 |
| SG | 99·57(99·31-99·82) | 97·86(94·81-99·21) | 99·17(98·69-99·49) | 0·000⁎⁎ | 0·055 | 99·25(98·91-99·59) | 91·88(87·42-94·91) | 100·00(99·79-100·00) | 99·80(99·63-99·98) | 97·86(94·81-99·21) | 100·00(99·79-100·00) | 0·003⁎⁎ | 99·68(99·47-99·90) | 96·58(93·13-98·40) | 100·00(99·79-100·00) | 99·84(99·69-100·00) | 98·29(95·39-99·45) | 100·00(99·79-100·00) | 0·242 |
| RD | 99·84(99·69-100·00) | 99·29(97·77-99·82) | 99·95(99·69-99·99) | 0·033* | 0·563 | 99·72(99·52-99·93) | 98·34(96·46-99·27) | 100·00(99·77-100·00) | 99·96(99·88-100·00) | 99·76(98·48-99·99) | 100·00(99·77-100·00) | 0·033* | 99·92(99·81-100·00) | 99·53(98·11-99·92) | 100·00(99·77-100·00) | 99·96(99·88-100·00) | 99·76(98·48-99·99) | 100·00(99·77-100·00) | 0·563 |
| RMO | 98·07(97·53-98·60) | 95·65(91·91-97·78) | 98·31(97·67-98·77) | 0·662 | 0·189 | 99·17(98·82-99·52) | 94·78(90·84-97·15) | 99·61(99·23-99·81) | 99·53(99·26-99·79) | 95·65(91·91-98·77) | 99·91(99·65-99·99) | 0·662 | 99·68(99·47-99·90) | 97·83(94·72-99·20) | 99·87(99·59-99·97) | 99·76(99·88-100·00) | 97·83(94·72-99·20) | 99·87(99·59-99·97) | 1·000 |
| VH | 99·87(99·57-99·95) | 98·80(96·26-99·69) | 99·87(99·5-99·96) | 0·080 | 1·000 | 99·49(99·21-99·77) | 96·41(93·17-98·24) | 99·82(99·52-99·94) | 99·76(99·57-99·95) | 99·20(96·84-99·86) | 99·82(99·52-99·94) | 0·033* | 99·60(99·36-99·85) | 98·80(96·26-99·69) | 99·91(99·65-99·98) | 99·92(99·81-100·00) | 99·60(97·45-99·98) | 99·96(99·72-100·00) | 0·315 |
DR, diabetic retinopathy; CSCR, central serous chorioretinopathy; MH, macular hole; EMM, epimacular membrane; wet-AMD, wet age-related macular degeneration; CRVO, central retinal vein occlusion; BRVO, branch retinal vein occlusion; RT, retinal tears; ODE, optic disc edema; OA, optic atrophy; SG, suspected glaucoma; RD, retinal detachment; RMO, refractive media opacity; VH, vitreous hemorrhage.
⁎
p < 0·05,
⁎⁎
p < 0·01.