Table 5.
Estimated type-I error rate (FPR) and power for ANOVA, compared with and for the proposed model under each simulation scenario. Power and FPR for the ANOVA model are estimated at the 0.05 level of significance. and for the proposed model are computed via Equations 2.2 and 2.3. Dashes fill cells where there is no relevant quantity.
| Method |
|||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Proposed |
ANOVA |
||||||||||||
| Scenario | Parameter | Condition |
Side |
Interaction |
Condition |
Side |
Interaction |
||||||
| Power | FPR | Power | FPR | Power | FPR | ||||||||
| 1 | α 1 | 0.04 | 0.00 | 0.00 | 0.02 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.02 | 0.02 | 0.06 | 0.02 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.04 | 0.08 | 0.02 | 0.02 | 0.04 | 0.00 | –– | 0.06 | –– | 0.06 | –– | 0.06 | |
| τ | 0.10 | 0.02 | 0.08 | 0.06 | 0.04 | 0.14 | –– | 0.12 | –– | 0.12 | –– | 0.16 | |
| 2 | α 1 | 0.00 | 0.02 | 0.00 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.02 | 0.02 | 0.02 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.04 | 0.02 | 0.02 | 0.00 | 0.00 | 0.00 | –– | 0.06 | –– | 0.08 | –– | 0.06 | |
| τ | 0.00 | 1.00 | 0.04 | 0.08 | 0.08 | 0.06 | 1.00 | –– | –– | 0.18 | –– | 0.14 | |
| 3 | α 1 | 0.02 | 0.00 | 0.00 | 0.02 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.02 | 0.02 | 0.00 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.02 | 0.08 | 0.00 | 0.04 | 0.00 | 0.02 | –– | 0.04 | –– | 0.10 | –– | 0.04 | |
| τ | 0.04 | 0.18 | 0.92 | 0.00 | 0.10 | 0.06 | –– | 0.22 | 0.94 | –– | –– | 0.18 | |
| 4 | α 1 | 0.00 | 0.02 | 0.00 | 0.00 | 0.00 | 0.02 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.02 | 0.00 | 0.00 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.00 | 0.02 | 0.00 | 0.02 | 0.02 | 0.02 | –– | 0.02 | –– | 0.08 | –– | 0.00 | |
| τ | 0.00 | 1.00 | 0.80 | 0.00 | 0.00 | 1.00 | 1.00 | –– | 0.56 | –– | 0.98 | –– | |
| 5 | α 1 | 0.02 | 0.00 | 0.00 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.02 | 0.00 | 0.00 | 0.02 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.02 | 0.02 | 0.00 | 0.08 | 0.00 | 0.02 | –– | 0.06 | –– | 0.02 | –– | 0.12 | |
| τ | 0.00 | 1.00 | 0.94 | 0.00 | 0.00 | 1.00 | 1.00 | –– | 0.34 | –– | 0.94 | –– | |
| 6 | α 1 | 0.00 | 0.00 | 0.00 | 0.00 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– |
| α 2 | 0.00 | 0.04 | 0.02 | 0.02 | 0.00 | 0.00 | –– | –– | –– | –– | –– | –– | |
| γ | 0.02 | 0.08 | 0.00 | 0.08 | 0.04 | 0.02 | –– | 0.06 | –– | 0.02 | –– | 0.12 | |
| τ | 0.00 | 0.96 | 0.38 | 0.00 | 0.00 | 0.72 | 1.00 | –– | 0.14 | –– | 0.44 | –– | |