Table 2. Downs and Black methodological quality.
| Reporting | External Validity | Internal Validity-Bias- | Internal Validity-Confounding- | |||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Study | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 | 18 | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 | 27 | D&B Score |
| Chen A et al 2012 [6] | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | N | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | N | N | Y | 18/28 |
| Chen H et al 2012 [7] | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | U | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | U | 24/28 |
| den Hertog et al 2012 [44] | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | N | Y | U | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | 26/28 |
| Gulotta et al 2011 [46] | Y | Y | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | Y | U | U | 21/28 |
| Isaac et al 2005 [15] | Y | Y | Y | Y | N | Y | Y | Y | N | Y | Y | U | Y | Y | U | Y | Y | Y | Y | Y | Y | Y | N | N | N | U | U | 18/28 |
| Juliano et al 2011 [17] | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | N | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | N | N | Y | 19/28 |
| Labraca et al 2011 [20] | Y | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | Y | U | Y | Y | Y | Y | Y | Y | Y | Y | Y | N | N | Y | U | 23/28 |
| Larsen et al 2008 [21] | Y | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | Y | Y | U | Y | Y | Y | Y | Y | Y | N | N | N | Y | Y | Y | 23/28 |
| Larsen et al 2009 [22] | Y | Y | Y | Y | P | Y | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | Y | Y | Y | Y | Y | N | N | N | Y | U | 22/28 |
| Larsen et al 2008 [23] | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | Y | 24/28 |
| Larsen et al 2008 [24] | Y | Y | Y | Y | P | Y | Y | Y | Y | Y | Y | Y | N | Y | U | Y | Y | Y | Y | Y | Y | N | Y | Y | Y | Y | Y | 24/28 |
| Pua & Ong 2014 [35] | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | Y | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | Y | N | U | 19/28 |
| Raphael et al 2011 [50] | Y | Y | Y | Y | Y | Y | Y | Y | N | N | Y | N | Y | U | N | Y | Y | Y | Y | Y | Y | Y | N | N | Y | U | U | 19/28 |
| Reilly et al 2005 [45] | Y | Y | Y | Y | P | Y | Y | Y | Y | Y | Y | Y | Y | Y | U | Y | Y | Y | Y | Y | Y | U | Y | Y | N | Y | Y | 24/28 |
| Robbins et al 2014 [36] | Y | Y | Y | Y | N | Y | Y | Y | N | N | Y | N | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | N | N | U | 16/28 |
| Tayrose et al 2013 [40] | Y | Y | Y | Y | Y | Y | Y | N | N | Y | Y | N | Y | U | U | Y | Y | Y | Y | Y | Y | Y | N | N | N | N | U | 19/28 |
| Wellman et al 2011 [42] | Y | Y | Y | Y | N | Y | Y | Y | N | N | Y | Y | Y | U | U | Y | Y | U | Y | Y | Y | Y | N | N | N | N | U | 16/28 |
Criteria based on Downs and Black check list (S1 Appendix): Y (yes) = criterion met, N (no) = criterion not met, P (partial) = criterion partially met, and U (Unable to determine) = criterion unable to be determined. Generally scoring is as follows: Y = 1, N = 0, U = 0. However for item 5, Y = 2, P = 1, N = 0.