Resumen
Objetivo
Establecer la validez y la fiabilidad de dos versiones cortas de la escala para depresión del Centro de Estudios Epidemiológicos (CES-D) en adolescentes escolarizados colombianos.
Diseño
Estudio de validación.
Emplazamiento
Colegios de secundaria de Bucaramanga, Colombia.
Participantes
Se seleccionó, en tres etapas, a 474 estudiantes, 68 no aceptaron, 8 fueron excluidos y 8 no completaron el proceso.
Mediciones principales
Aplicación de manera independiente de la escala CES-D y la Entrevista Clínica Estructurada para los Trastornos del Eje I del DSM-IV (SCID-I), versión clínica. Se reaplicó la escala CES-D entre 3 y 28 días después. Se eliminaron los componentes con menor correlación lineal de Pearson con respecto a la puntuación total de la escala. Para la versión ultracorta de 3 componentes y la breve de 10 se calculó el índice alfa de Cronbach, el análisis de los factores, la curva ROC, la sensibilidad, la especificidad y el coeficiente de Lin.
Resultados
Para la escala breve el alfa de Cronbach fue 0,86 y el coeficientes de Lin, 0,77. El área bajo la curva ROC, 0,83; con sensibilidad del 77,8% y especificidad del 74,1%. Dos factores explicaron el 55,8% de la variancia. Para la escala ultracorta el alfa de Cronbach fue 0,76 y el coeficiente de Lin, 0,74. El área bajo la curva ROC fue 0,80, con una sensibilidad del 75,56% y una especificidad del 70,67%. Un factor explicó el 68,19% de la variancia.
Conclusiones
La escala breve y la ultracorta del CES-D son tan útiles como la original para el cribado del trastorno depresivo mayor en adolescentes, aunque la ultracorta no preserva la estructura factorial de la original.
Palabras clave: Validez de las pruebas, Trastorno depresivo mayor, Adolescente, Escalas de valoración psiquiátrica, Cribado
Abstract
Objective
To establish the validity and reliability of a Brief and Ultra-short Center for Epidemiological Studies Depression (CES-D) Scale in adolescents.
Design
Validation study.
Setting
Secondary schools in Bucaramanga, Colombia.
Participants
A total of 474 students were selected through a three stage process; 68 did not agree to participate, 8 were excluded and 8 did not complete the process.
Main measurements
Adolescent students were evaluated with CES-D and the clinical interview for Diagnostic and Statistical Manual of Mental Disorders, Fourth Edition. The CES-D scale was re-applied 3 to 28 days after the first application. The ten items and the three items with the highest correlation with total score were selected to construct a Brief scale and Ultra-short scale, respectively. Construct validity, criterion validity, test-retest reliability and internal consistency were analyzed.
Results
For the Brief CES-D Scale the Cronbach's alpha was 0.86 and Lin's coefficient was 0.77. The area under ROC curve was 0.83, with a sensitivity of 77.8%; specificity 74.1%. Two main factors were identified to explain the 55.81% variance. For the Ultra-short Scale the Cronbach's alpha was 0.76 and Lin's coefficient was 0.74. The area under ROC curve was 0.80, with a sensitivity of 75.56%; specificity 70.67%. One main factor was identified to explain the 68.19% of variance.
Conclusions
The Brief and Ultra-Short CES-D Scale are as useful as the original scale for the screening of MDD in adolescents; Ultra-short CES-D Scale does not preserve the original factorial structure.
Keywords: Validity, Depressive disorder, Adolescent, Psychiatric status rating scales, Screening
Introducción
El trastorno depresivo mayor (TDM) en adolescentes causa malestar clínico y en las relaciones, ausentismo escolar y bajo rendimiento1; aumenta el riesgo de abuso de sustancias, conductas antisociales, conductas riesgosas sexuales y en la alimentación, intentos suicidas y suicidios2, 3, 4. La prevalencia del TDM en adolescentes puede variar del 0,7 al 11%5, 6, 7, 8.
El diagnóstico del TDM implica la realización de una entrevista por un profesional entrenado. Hay varias escalas para cribado que aumentan la probabilidad de realizar un diagnóstico temprano y pueden ser utilizadas en investigación con propiedades psicométricas similares entre sí9, 10. La escala de la depresión del Centro de Estudios Epidemiológicos (CES-D) se ha utilizado para detección de síntomas depresivos en adolescentes, a pesar de diseñarse inicialmente para adultos, posee propiedades psicométricas similares a las escalas utilizadas en menores y tiene la ventaja que puede usarse sin restricción10, 11. Se han propuesto versiones abreviadas con el objeto de reducir los problemas de fatiga y pérdida de atención que pueden ser mayores en este grupo de edad y naturalmente reduciría el tiempo de respuesta12, 13. No obstante, las escalas breves tienen limitaciones psicométricas. Primero, es poco factible que abarquen con suficiencia un constructo complejo como el concepto de TDM14. Segundo, la fiabilidad podría reducirse si se compara con escalas más extensas15.
El objetivo de este estudio es establecer la validez y la fiabilidad de dos versiones cortas de la escala CES-D en adolescentes escolarizados colombianos.
Material y métodos
El estudio fue aprobado por el Comité de Ética en Investigación de la Facultad de Medicina de la Universidad Autónoma de Bucaramanga. Se solicitó el consentimiento informado por escrito de los padres y del estudiante.
Instrumento
La escala CES-D es un instrumento tipo Likert de 0–3 puntos en la semana previa y está compuesta de 20 ítems autoadministrados. Cada pregunta cuantifica la frecuencia y la intensidad de los síntomas depresivos16. La versión utilizada se tradujo por el método back-translation y está descrito en otra publicación17.
Tamaño de muestra
La población objeto fueron los 68.000 adolescentes matriculados durante 2005 en colegios de secundaria de Bucaramanga, Colombia. El tamaño de la muestra se estimó bajo el supuesto de una prevalencia de TDM del 10%, sensibilidad del 80% y especificidad del 80%18. Para ello era necesaria una muestra de 370 estudiantes y se hizo un ajuste del 20% por posibles pérdidas.
Procedimiento
El muestreo fue multietápico: en la primera etapa se aleatorizaron los colegios según el nivel económico; posteriormente, se realizó un muestreo aleatorio por conglomerados (salones de clase por colegio); por último, un muestreo por cuotas seleccionando a los adolescentes de 13 a 17 años de cada salón de clase seleccionado19.
Los estudiantes contestaron la escala y datos sociodemográficos en el salón de clase a manera de autoinforme. Luego se los invitó a asistir a una evaluación clínica por parte de un psiquiatra, quien aplicó la entrevista clínica estructurada para los trastornos del eje I del DSM-IV, versión clínica20. El entrevistador y el estudiante estaban enmascarados respecto al resultado de la escala CES-D. En la sala de espera para la entrevista clínica se aplicó nuevamente la escala para evaluar su reproducibilidad. La reaplicación se realizó entre 3 y 28 días. En caso de diagnosticarse algún trastorno mental se refería al adolescente al profesional idóneo.
Construcción de las versiones de la escala
Para escoger los componentes que formarían las nuevas versiones se fueron eliminando aquellos que tuviesen la menor correlación lineal de Pearson con respecto a la puntuación total de la escala. Esta medida muestra una relación importante con la «comunalidad» y el coeficiente de cada componente de una solución de factores; generalmente, los componentes que exhiben una baja correlación de Pearson presentan una pobre «comunalidad» y aportan muy poco a los factores21. La curva de las características de receptor operador (ROC) de cada versión se comparaba con la curva de la versión original mediante el método de Sidak22; si no era estadísticamente distinta, se procedía a eliminar el siguiente componente hasta que la diferencia fue significativa (p<0,05), lo cual se presentó con dos componentes, se adoptó así la versión ultracorta de tres componentes; además de la versión breve de diez componentes por las posibles desventajas anotadas en las versiones excesivamente cortas14, 15.
Validación de las versiones
Para las dos versiones elegidas se determinó la consistencia interna mediante el coeficiente alfa de Cronbach. Para validar el constructo se inició con la aplicación de la prueba de la esfericidad de Bartlett para establecer las características de la matriz de los coeficientes. Para estimar la correlación de los componentes con el constructo explorado se realizó la prueba de adecuación de la muestra de Kayser-Meyer-Olkin. Se verificó un análisis de factores por el método de componentes principales y rotación Promax23. Se definieron como factores principales los que mostraron valores propios mayores de 1. La reproducibilidad de la prueba-reprueba se evaluó con el coeficiente de correlación de Lin.
Esquema general del estudio. Estudio de validación del cuestionario.
Se escogió el mejor punto de corte en las dos versiones con la curva ROC. Para este punto se calculó sensibilidad, especificidad, valores predictivos y razones de probabilidad, e intervalos de confianza (IC) del 95%. Los datos se procesaron en el paquete estadístico STATA 9.0.
Resultados
En el esquema general del estudio se detalla el flujograma de los participantes. Completaron la evaluación 217 (55,6%) mujeres y 173 (44,4%) varones. Las mujeres tenían mayor edad que los varones (15 años; IC del 95%, 14,9–15,2 frente a 14,5 años; IC del 95%, 14,3–14,7; p<0,001). El nivel socioeconómico informado era bajo en 133 (34,3%) estudiantes, medio en 227 (58,8%) y alto en 27 (6,9%). Un total de 45 estudiantes fueron diagnosticados de TDM durante la entrevista clínica (prevalencia del 11,5%; IC del 95%, 8,5–15,1). El TDM fue más frecuente en las mujeres, de los cursos superiores y con mayor edad (tabla 1).
Tabla 1.
Variables | Sin TDM (n=345) | Con TDM (n=45) | p |
---|---|---|---|
Edad, media | 14,7±1,2 | 15,4±1,3 | 0,001a |
Varones | 162 (47%) | 11 (24,4%) | 0,004b |
Estrato socioeconómico | 0,228c | ||
Bajo | 120 (34,8%) | 13 (28,9%) | |
Medio | 197 (57,1%) | 31 (68,8%) | |
Alto | 26 (7,6%) | 1 (21,2%) | |
Colegio público | 307 (90%) | 44 (97,7%) | 0,064c |
Nivel educativo | 0,004b | ||
Básica secundaria | 183 (53%) | 13 (28,9%) | |
Media vocacional | 162 (47%) | 32 (71,1%) |
Prueba de Mann-Whitney.
Prueba de la χ2.
Prueba exacta de Fisher.
En la tabla 2 se observan los índices de validez de criterio de las dos escalas con el punto de corte de 11 para la breve y 4 para la ultracorta; en la figura 1 se comparan la curvas ROC de las dos versiones con la original.
Tabla 2.
Versión breve (10 ítems) |
Versión ultracorta (3 ítems) |
|||
---|---|---|---|---|
Índice | Valor | IC del 95% | Valor | IC del 95% |
Eficiencia | 74,6% | 69,8%–78,8% | 71,3% | 66,4%–75,7% |
Sensibilidad | 78,8% | 62,5%–88,3% | 75,6% | 60,1%–86,6% |
Especificidad | 74,1% | 69,1%–78,6% | 70,7% | 65,5%–75,4% |
VPP | 28,5% | 20,9%–37,4% | 25,4% | 18,4%–33,8% |
VPN | 96,2% | 92,8%–98,1% | 95,6% | 92,1%–97,7% |
RPP | 3,01 | 2,37–3,81 | 2,58 | 2,04–3,26 |
RPN | 0,30 | 0,17–0,52 | 0,35 | 0,21–0,58 |
IC: intervalo de confianza; RPN: razón de probabilidad negativa; RPP: razón de probabilidad positiva; VPN: valor predictivo negativo; VPP: valor predictivo positivo.
La consistencia interna de la versión breve fue 0,86 y de la ultracorta, 0,76. La prueba de esfericidad de Bartlett fue significativa para la versión breve (χ2, 1.300,57; gl=45; p<0,001) y ultracorta (χ2, 300,40; gl=3; p<0,001). La prueba de adecuación de la muestra de Kaiser-Meyer-Olkin fue excelente en la versión breve (0,904) y buena en la ultracorta (0,688). Dos factores componen la versión breve y explican el 55,8% de la variancia. Para la versión ultracorta se identificó un factor que explica el 68,2% de la variancia. La solución y la matriz de factores se presentan en la tabla 3.
Tabla 3.
Pregunta | Factores CES-D breve |
Factor CES-D ultracorta | |
---|---|---|---|
Afecto depresivo | Afecto positivo | Afecto depresivo | |
3. Triste a pesar | 0,66 | 0,122 | NA |
6. Depresión | 0,658 | 0,187 | 0,844 |
9. Fracaso | 0,653 | 0,066 | NA |
10. Nervios | 0,765 | 0,3 | NA |
12. Felicidad | 0,005 | 0,866 | NA |
14. Soledad | 0,691 | 0,06 | 0,788 |
16. Disfrute | 0,05 | 0,811 | NA |
17. Llanto | 0,736 | 0,004 | NA |
18. Tristeza | 0,671 | 0,181 | 0,844 |
20. No continúo | 0,648 | 0,021 | NA |
Valor propio | 4,536 | 1,049 | 2,045 |
Variancia (%) | 45,35 | 10,46 | 68,19 |
El coeficiente de correlación de Lin fue 0,77 (IC del 95%, 0,73–0,81) para la versión breve y 0,74 (0,69–0,78) para la ultracorta.
Discusión
En este estudio se muestra que una versión breve en español de la escala CES-D tiene una adecuada validez de criterio, una excelente consistencia interna y una buena reproducibilidad para la detección del TDM en una muestra representativa de adolescentes escolarizados colombianos. La versión ultracorta conserva adecuada validez de criterio, buena consistencia interna y reproducibilidad, pero no preserva el constructo teórico de la CES-D original.
Las dos versiones abreviadas conservan los índices de validez de criterio de la versión original en adolescentes colombianos24. Desafortunadamente, ninguna versión presenta una sensibilidad mayor del 90%, ideal para escalas de cribado. Esto podría explicarse por la alta puntuación de síntomas transitorios, anímicos e interpersonales en adolescentes sin TDM, posiblemente similar a la puntuación de adolescentes con esta afección de grado leve25. Sin embargo, el cuestionario es útil en la medida que el análisis de la curva ROC es bueno, ya que áreas bajo esta curva por arriba de 0,75 indican que la capacidad diagnóstica de una prueba es apropiada26.
La sensibilidad de la CES-D en otros estudios poblacionales fue mejor o similar (del 60 al 90%) a la hallada en las dos versiones, al igual que la especificidad (del 73 al 94%). El valor predictivo positivo fue superior en esta muestra, lo cual se explica por la mayor prevalencia del TDM en los adolescentes estudiados17, 27, 28, 29, 30.
Se estima que el coeficiente alfa de Cronbach31 es bueno cuando se encuentra entre 0,70 y 0,90. En la versión breve estuvo por encima de 0,80, lo que indica una consistencia interna excelente, como la informada en otras poblaciones tanto de adultos como de adolescentes17, 27, 28, 29, 30, 32. Sin embargo, en la versión ultracorta este coeficiente estuvo entre 0,7 y 0,8 que, aunque es bueno, indica una pérdida de fiabilidad.
La reproducibilidad prueba-reprueba fue buena para ambas versiones. Sin embargo, la aplicación de los 20 ítems en un solo momento limita la interpretación de esta medida, pues cada respuesta pudo estar sesgada por las respuestas anteriores.
La estructura factorial de la escala CES-D descrita inicialmente está compuesta por cuatro factores: afecto depresivo, afecto positivo, somático y relaciones interpersonales16. Sin embargo, esta estructura factorial no se mantiene en todas las poblaciones, pues en algunas desaparece el factor de relaciones interpersonales y en otra se fusionan el dominio de afecto depresivo y el somático12, 17, 33, 34, 35. La versión breve presenta un factor mixto de síntomas depresivos y somáticos y otro compuesto de dos ítems de los cuatro del componente afecto positivo original. De esta forma reproduce la estructura factorial hallada en algunas poblaciones con la versión original. La versión ultracorta tiene un solo factor con tres componentes del dominio afecto depresivo original, lo cual no preserva la estructura factorial de la CES-D original.
El personal sanitario de atención primaria es clave para establecer de forma precoz el estado mental de los adolescentes. La escasa disponibilidad de tiempo hace necesario investigar sobre métodos de cribado breves, como las versiones presentadas. Hay que recordar que tanto estas como otras escalas no deben ser consideradas nunca como pruebas diagnósticas, sino como métodos de cribado rápido y una ayuda para la clasificación de pacientes susceptibles de ser evaluados por un profesional de salud mental.
En conclusión, la escala breve y la ultracorta del CES-D son tan útiles como la original, aunque la ultracorta no preserva la estructura factorial de la original.
Lo conocido sobre el tema
-
•
El trastorno depresivo mayor es frecuente en adolescentes pero de difícil detección.
-
•
La escala CES-D se utiliza en adultos y adolescentes para el cribado del trastorno depresivo mayor.
-
•
Las escalas breves facilitan la concentración y reducen el tiempo de respuesta.
Qué aporta este estudio
-
•
Las versiones breve y ultracorta de la escala CES-D son tan útiles como la original en adolescentes escolarizados.
-
•
Se recomienda la utilización de la versión breve de la escala CES-D pues tiene similares propiedades psicométricas que la original.
Financiación
Trabajo financiado por el Centro de Investigaciones Biomédicas.
Bibliografía
- 1.Fergusson D.M., Woodward L.J. Mental health, educational, and social role outcomes of adolescents with depression. Arch Gen Psychiatry. 2002;59:225–231. doi: 10.1001/archpsyc.59.3.225. [DOI] [PubMed] [Google Scholar]
- 2.Richardson J.L., Radziszewska B., Dent C.W., Flay B.R. Relationship between after-school care of adolescents and substance use, risk taking, depressed mood, and academic achievement. Pediatrics. 1993;92:32–38. [PubMed] [Google Scholar]
- 3.Shrier L.A., Harris S.K., Beardslee W.R. Temporal associations between depressive symptoms and self-reported sexually transmitted disease among adolescents. Arch Pediatr Adolesc Med. 2002;156:599–606. doi: 10.1001/archpedi.156.6.599. [DOI] [PubMed] [Google Scholar]
- 4.Evans E., Hawton K., Rodham K., Deeks J. The prevalence of suicidal phenomena in adolescents: a systematic review of population-based studies. Suicide Life Threat Behav. 2005;35:239–250. doi: 10.1521/suli.2005.35.3.239. [DOI] [PubMed] [Google Scholar]
- 5.Fergusson D.M., Horwood L.J., Lynskey M.T. Prevalence and comorbidity of DSM-III-R diagnoses in a birth cohort of 15-year-olds. J Am Acad Child Adolesc Psychiatry. 1993;32:1127–1134. doi: 10.1097/00004583-199311000-00004. [DOI] [PubMed] [Google Scholar]
- 6.Regier D.A., Farmer M.E., Rae D.S., Myers J.K., Kramer M., Robins L.N. One-month prevalence of mental disorders in the United States and sociodemographic characteristics: the Epidemiologic Catchment Area study. Acta Psychiatr Scand. 1993;88:35–47. doi: 10.1111/j.1600-0447.1993.tb03411.x. [DOI] [PubMed] [Google Scholar]
- 7.Blazer D.G., Kessler R.C., McGonagle K.A., Swartz M.S. The prevalence and distribution of major depression in a national community sample: the National Comorbidity Survey. Am J Psychiatry. 1994;151:979–986. doi: 10.1176/ajp.151.7.979. [DOI] [PubMed] [Google Scholar]
- 8.Rueda-Jaimes G.E., Camacho P.A., Navarro-Mancilla A.A. Prevalencia del trastorno obsesivo compulsivo y su comorbilidad con el trastorno depresivo mayor en adolescentes escolarizados. Vertex Revista Argentina de Psiquiatría. 2008;19:5–9. [PubMed] [Google Scholar]
- 9.Rey J.M., Grayson D., Mojarrad T., Walter G. Changes in the rate of diagnosis of major depression in adolescents following routine use of a depression rating scale. Aus N Z Psychiatry. 2002;36:229–233. doi: 10.1046/j.1440-1614.2002.00995.x. [DOI] [PubMed] [Google Scholar]
- 10.McDowell I., Newell C. 2.a ed. Oxford University; Washington: 1996. Measuring health. depression. En. A guide to rating scales and questionnaires. [Google Scholar]
- 11.Wilcox H., Field T., Prodromidis M., Scafidi F. Correlations between the BDI and CES-D in a sample of adolescent mothers. Adolescence. 1998;33:565–574. [PubMed] [Google Scholar]
- 12.Shrout P.E., Yager T.J. Reliability and validity of screening scales: Effect of reducing scale length. J Clin Epidemiol. 1989;42:69–78. doi: 10.1016/0895-4356(89)90027-9. [DOI] [PubMed] [Google Scholar]
- 13.Poulin C., Hand D., Boudreau B. Validity of a 12-item version of the CES-D used in the National Longitudinal Study of Children and Youth. Chronic Dis Can. 2005;26:65–72. [PubMed] [Google Scholar]
- 14.Jaju A., Crask M.R. The perfect design: optimization between reliability, validity, redundancy in scale items and response rates. Am Market Assoc. 1999;10:127–131. [Google Scholar]
- 15.Streiner D.L. Figuring out factors: the use and misuse of factor analysis. Can J Psychiatry. 1994;39:135–140. doi: 10.1177/070674379403900303. [DOI] [PubMed] [Google Scholar]
- 16.Radloff L. A self-report depression scale for research in the general population. Applied Psychological Measure. 1977;1:385–401. [Google Scholar]
- 17.Campo-Arias A., Díaz-Martínez L.A., Rueda-Jaimes G.E., Cadena-Afanador L.P., Hernández N.L. Psychometric properties of CES-D scale among Colombian adults from the general population. Rev Colom Psiquiatr. 2007;36:664–674. [Google Scholar]
- 18.Obuchowski N.A. Sample size calculations in studies of test accuracy. Stat Methods Med Res. 1998;7:371–392. doi: 10.1177/096228029800700405. [DOI] [PubMed] [Google Scholar]
- 19.Silva L. 1.a ed. Díaz de Santos; Madrid: 2000. Diseño razonado de muestras y captación de datos para la investigación sanitaria. [Google Scholar]
- 20.First M.B., Spitzer R.L., Gibbon M., Williams J.B.W. Masson; Barcelona: 1999. Entrevista clínica estructurada para los trastornos de eje I del DSM-IV (versión clínica) SCID-I. [Google Scholar]
- 21.Ferré L. Selection of components in principal component analysis: a comparison of methods. Comput Stat Data Anal. 1995;19:669–682. [Google Scholar]
- 22.DeLong E.R., DeLong D.M., Clarke-Pearson D.L. Comparing the areas under two or more correlated receiver operating curves: a nonparametric approach. Biometrics. 1988;44:837–845. [PubMed] [Google Scholar]
- 23.Gorsuch R.L. Exploratory factor analysis: its role in item analysis. J Pers Asses. 1997;68:532–560. doi: 10.1207/s15327752jpa6803_5. [DOI] [PubMed] [Google Scholar]
- 24.Camacho P.A., Rueda-Jaimes G.E., Latorre J.F., Navarro-Mancilla A.A., Escobar M., Franco J.A. Validez y confiabilidad de la escala para Depresión del Centro de Estudios Epidemiológicos (CES-D) en estudiantes adolescentes de Colombia. Biomédica. 2008 [en prensa] [PubMed] [Google Scholar]
- 25.Schoenbach V.J., Kaplan B.H., Grimson R.C., Wagner E.H. Use of a symptom scale to study the prevalence of a depressive syndrome in young adolescents. Am J Epidemiol. 1982;116:791–800. doi: 10.1093/oxfordjournals.aje.a113469. [DOI] [PubMed] [Google Scholar]
- 26.Beck J.R., Shultz E.K. The use of relative operating characteristics (ROC) curves in test performance evaluation. Arch Lab Pathol Med. 1986;110:13–20. [PubMed] [Google Scholar]
- 27.Roberts R.E., Lewinsohn P.M., Seeley J.R. Screening for adolescent depression: A comparison of depression scales. J Am Acad Child Adolesc Psychiatry. 1991;30:58–66. doi: 10.1097/00004583-199101000-00009. [DOI] [PubMed] [Google Scholar]
- 28.Beekman A.T., Deeg D.J., Van Limbeek J., Braam A.W., De Vries M.Z., Van Tilburg W. Criterion validity of the Center for Epidemiologic Studies Depression scale (CES-D): results from a community-based sample of older subjects in The Netherlands. Psychol Med. 1997;27:231–235. doi: 10.1017/s0033291796003510. [DOI] [PubMed] [Google Scholar]
- 29.Boyd J.H., Weissman M.M., Thompson D., Myers J.K. Screening for depression in a community sample. Arch Gen Psychiatry. 1982;39:195–199. doi: 10.1001/archpsyc.1982.04290100059010. [DOI] [PubMed] [Google Scholar]
- 30.Breslau N. Depressive symptoms, major depression, and generalized anxiety: a comparison of self-reports on CES-D and results from diagnostic interviews. Psychiatry Res. 1985;15:219–229. doi: 10.1016/0165-1781(85)90079-4. [DOI] [PubMed] [Google Scholar]
- 31.Cortina J.M. What is coefficient alpha? An examination of theory and applications. J Appl Psychol. 1993;78:98–104. [Google Scholar]
- 32.Radloff L.S. The use of the Center for Epidemiologic Studies Depression Scale in adolescents and young adults. J Youth Adolesc. 1991;20:149–166. doi: 10.1007/BF01537606. [DOI] [PubMed] [Google Scholar]
- 33.Schroevers M.J., Sanderman R., Van Sonderen E., Ranchor A.V. The evaluation of the Center for Epidemiologic Studies Depression (CES-D) scale: depressed and positive affect in cancer patients and healthy reference subjects. Quality Life Res. 2000;9:1015–1029. doi: 10.1023/a:1016673003237. [DOI] [PubMed] [Google Scholar]
- 34.Guarnaccia P.J., Angel R., Worebey J.L. The factor structure of the CES-D in the Hispanic Health and Nutrition Examination Survey: the influences of ethnicity, gender, and language. Soc Sci Med. 1989;29:85–94. doi: 10.1016/0277-9536(89)90131-7. [DOI] [PubMed] [Google Scholar]
- 35.Ying Y.W. Depressive symptomatology among chinese-americans as measured by the CES-D. J Clin Psychol. 1988;44:739–746. doi: 10.1002/1097-4679(198809)44:5<739::aid-jclp2270440512>3.0.co;2-0. [DOI] [PubMed] [Google Scholar]