Skip to main content
NCBI home page
CoDAS logoLink to CoDAS
. 2022 Jan 7;34(3):e20210069. doi: 10.1590/2317-1782/20212021069
View full-text in Portuguese

Facial grimace during speech in cleft lip and palate: a proposal for classification

Rafaeli Higa Scarmagnani 1, Ana Paula Fukushiro 2,3, Renata Paciello Yamashita 2,✉
PMCID: PMC9769419  PMID: 35019087

ABSTRACT

Purpose

To investigate the effectiveness of a proposal for classification of facial grimace (FG) and its correlation with objective evaluation of velopharyngeal closure (VPC).

Methods

Twenty individuals with repaired cleft lip and palate underwent velopharyngeal area measurement by means of rhinomanometry and speech sample recording. The FG was rated in two steps, by three speech-language pathologists. First the evaluators rated the FG using their own criteria as: 1= absent FG; 2=mild; 3=moderate; 4=severe. Subsequently, they were submitted to a training session that established the following FG rating criteria: 1=absent FG; 2=movement only of the nose or upper third of the face; 3=strong movement of the nose or upper third of the face; 4=movement of the nose and upper third of the face. The evaluators rated the FG using the established criteria. Intra- and inter-rater agreement were calculated using weighted Kappa coefficient. Correlation between the two stage ratings with the VPC was calculated by Spearman’s correlation coefficient.

Results

In the first stage inter-rater agreement ranged from fair to substantial; in the second stage, from substantial to almost perfect. Intra-rater agreement ranged from moderate to almost perfect in the first stage, and from moderate to substantial in the second stage. The correlation between FG and velopharyngeal area was positive and significant in both stages.

Conclusion

The proposed FG judgement proved to be effective in determining the symptom and reliable in diagnosing the severity of velopharyngeal dysfunction. The significant correlation between perceptual and instrumental methods suggests that FG can be used in predicting VPC.

Keywords: Cleft Palate, Velopharyngeal Insufficiency, Rhinomanometry, Facial Grimace, Speech Perception

INTRODUCTION

One of the characteristics often found in individuals with cleft lip and palate and velopharyngeal dysfunction (VPD) is facial grimace (FG), an unintentional behavior of contracting the nasal valve or, in some cases, eyebrows and forehead, in an attempt to prevent nasal air emission in order to achieve velopharyngeal closure(1). This symptom mainly accompanies the production of oral pressure sounds and, as the other passive speech symptoms, should be identified and classified by means of auditory-perceptual assessment, considered the gold standard for the diagnosis of VPD and, therefore, essential in clinical diagnosis. Despite the undeniable importance of the auditory-perceptual assessment, the diagnosis of the velopharyngeal function and, consequently, the definition of the appropriate treatment for each case also demands instrumental assessments. Rhinomanometry, also known as the pressure-flow technique, is one of the instrumental methods recommended to complement the VPD diagnosis. This method has been the target of several studies which aim at correlating its findings to perceptual speech characteristics, in an attempt to predict the velopharyngeal function(2,3). Facial grimace, for instance, is a characteristic frequently evaluated by clinicians and researchers in the assessment of velopharyngeal function, for being considered a good indicator of velopharyngeal behavior(4) and thus, part of several auditory-perceptual assessment protocols used both in clinical practice and research. The task of identifying the VPD based on speech symptoms perceptively evaluated is very useful in clinical practice, since it allows professionals to make inferences on the velopharyngeal function when there is no access to instrumental assessment. However, as far as is known, no report of well-established and standardized criteria for classification specifically of facial grimace has been found in the literature. Ordinal numerical scales are used, in general, in protocols for the assessment of this symptom, although the results reliability may be questionable due to the subjectivity inherent to this procedure. Another approach reported in the literature, is the representation of facial movements by means of numerical scores, without considering, however, the severity of the symptom(5). Therefore, this finding makes the development of a proposal based on standardized and well-defined criteria for the classification of facial grimace of great importance for clinical practice and research related to the topic.

The study aimed to investigate the effectiveness of a facial grimace rating proposal based on standardized criteria and its correlation with the quantitative objective instrumental evaluation of velopharyngeal closure in individuals with repaired cleft lip and palate.

METHODS

Subjects

This study was approved by the Institutional Review Board (approval number: 2.251.973) and all participants signed an Informed Consent Form. Twenty-subjects with repaired cleft palate associated or not with cleft lip were evaluated, aged between 6 and 38 years.

Since the purpose of this study was to evaluate the effectiveness of a classification of facial grimace and its correlation with rhinomanometry, factors such as cleft type, type of surgical technique used in primary palatoplasty and patient age did not influence the results, therefore, there was no need for distribution of individuals into subgroups. Care was taken to include adults and children in the study in order to establish a comprehensive sample with regard to age range. The age of 6 years was adopted as the minimum age due to the fact that, in general, children from this age range on are capable of understanding the rhinomanometry procedure and collaborate to its performance.

Individuals with physical and/or mental incapacity to perform the tests, acute or chronic allergic respiratory symptoms resulting in nasal congestion during the test, nasal area values below the expected values for age verified in rhinomanometry, residual palate fistulas, presence of pharyngeal flap, and compensatory articulation in the production of the “p” consonant were not included.

Procedures

  • I - Velopharyngeal orifice area measurement by means of rhinomanometry (pressure-flow technique): the velopharyngeal cross-sectional area was determined during the production of the “p” consonant inserted in the word “rampa”(6). Based on the obtained orifice area values, the velopharyngeal closure (VC) was classified according to the following criteria adapted from the literature(2): 0 to 4.9mm2=adequate; 5 to 19.9mm2=borderline; and > 20mm2=inadequate. The PERCI-SARS (Microtronics Corp, version 4.01) computerized system was used for that purpose.

  • II - Digital audiovisual recording of the speech sample composed of sentence reading or repetition: For the speech analysis of this study, 12 sentences composed of 12 pressure consonants (target consonants) spoken in Brazilian Portuguese were used(7). Both procedures (audiovisual recording and rhinomanometry) were performed on the same day. For the video recording, JVC digital camcorder (model GZ-MG555) was used supported by a tripod positioned one meter away from the patient.

  • III - Analysis of speech samples for rating facial grimace: the FG rating was carried out by 3 speech-language pathologists with an average of 7 years experience in treating individuals with cleft lip and palate. The perceptual judgment occurred in two stages. In the first one, the evaluators rated the facial grimace in 20 speech samples. The three raters were instructed to rate the FG based on their own criteria, the same criteria routinely used in clinical practice, using a 4-point ordinal scale with which all raters were familiar: 1=absent facial grimace; 2=mild grimace; 3=moderate grimace; 4=severe grimace. One week later, the raters were submitted to a training in which, through pictures and videos, the new criteria to be used for rating the facial grimace in the second stage were introduced and exemplified, namely: 1=absence of facial grimace; 2=movement only of the nose or upper third of the face; 3=strong movement of the nose or upper third of the face; 4=movement of the nose and upper third of the face.

After training, the raters carried out the second stage of evaluation, classifying FG on the same samples using the newly established criteria. The samples were distributed to the raters in portable memory devices (USB flash drives) and half of them were resubmitted two days on average after the end of each stage for intra-rater analysis. Thus, each rater analyzed a total of 60 speech samples. In both stages, the videos were edited and presented to the raters without the audio resource, to eliminate any type of interference and/or influence of speech resonance and other auditory symptoms of VPD during facial grimace analysis.

Statistical analysis

Inter- and intra-rater agreement was established using the weighted Kappa coefficient following criteria determined for the interpretation of indexes(8) and the comparison between the two stages was performed employing the chi-square test. To investigate the correlation between velopharyngeal orifice size and facial grimace rating, the mode of the scores was calculated given by the raters for facial grimace in the first and second stages. The correlation between the mode of the perceptual judgment of the facial grimace in both stages and the velopharyngeal orifice size determined by the instrumental evaluation was analyzed utilizing Spearman's Correlation Coefficient following criteria for its interpretation(9) and considering a 5% significance level.

RESULTS

Inter- and intra-rater agreement

In the first stage, in which the raters rated facial grimace using their own criteria, inter-rater agreement ranged from fair (0.24) to substantial (0.62). In the second stage, in which the raters rated the grimace according to the criteria defined during training, agreement ranged from substantial (0.66) to almost perfect (0.80), as shown in Table 1. As for the intra-rater agreement, in the first stage, it varied from moderate (0.49) to almost perfect (1.0) while in the second stage this index varied from moderate (0.52) to substantial (0.67), as shown in Table 2.

Table 1. Inter-rater agreement in the first and second stages: kappa index, percentage of agreement and interpretation of the result.

Raters First Stage Second Stage
Kappa Index % Interpretation Kappa Index % Interpretation
1 and 2 0.62 75 Substantial 0.66 75 Substantial
1 and 3 0.24 50 Fair 0.80 85 Almost Perfect
2 and 3 0.33 55 Fair 0.73 80 Substantial
Open in a new tab

Table 2. Intra-rater agreement in the first and second stages: kappa index, percentage of agreement and interpretation of the result.

Raters First Stage Second Stage
Kappa Index % Interpretation Kappa Index % Interpretation
1 1.0 100 Almost Perfect 0.58 70 Moderate
2 1.0 100 Almost Perfect 0.67 80 Substantial
3 0.49 70 Moderate 0.52 70 Moderate
Open in a new tab

Comparative analysis of the inter- and intra-rater agreement between the first and second stages

The inter-rater agreement concerning FG classification obtained in the second stage was higher than that observed in the first stage, although without significance.

The comparison between both judgments by the same rater, there was an increase in the kappa index for rater 3, but a decrease in this index for raters 1 and 2. The differences were not significant.

Correlation between velopharyngeal orifice size and facial grimace

Spearman's correlation coefficient analysis revealed a moderate significant positive correlation between facial grimace and the velopharyngeal orifice area measurement in both the first stage of the analysis (p<0.01; r=0.550) and the second stage (p<0.01; r=0.553).

DISCUSSION

In clinical practice, as well as in well-designed research, countless trials have been increasingly tested in an attempt to develop methods that result in higher agreement and reliability of results, especially in procedures involving perceptual assessments of a subjective nature. Special attention is given to the methods of classification and types of assessment scales of speech symptoms such as resonance, intelligibility, vocal quality, and articulation(2,10-14).

Despite of great importance in the speech assessment of individuals with VPD, the same emphasis is not extended to facial grimace. Although it is an important indicator of VPD, no proposal for classification of facial grimace has so far been published in the literature. Its analysis is based on direct visualization of the speaker and is usually classified by equal interval scales or binary scales, consisting of presence or absence(15).

The facial grimace rating proposal used in the present study was based on the clinical experience of its authors. A brief explanation was carried out considering the criteria used for the analysis of the samples in the second stage of the study to verify their influence on the results.

When analyzing the results of the intra-rater agreement, after the presentation of this new proposal, a reduction in the agreement index was observed. Several internal and external factors may interfere with subjective judgments such as the one in the present study. This is why perceptual assessment is subject to variability even when it is carried out by experienced raters. The physical and emotional state when assessing the samples, as well as the internal standard of each evaluator, which is also unstable, may have contributed to the variability of responses, even in the case of evaluators experienced in the evaluation and treatment of patients with CLP. It is known that the evaluator's internal standard is developed along his/her experience with the severity of the speech symptoms and this information is stored in memory(10). It is speculated that, when facing a proposal that is different from the one usually used and more careful as to the location of the compensatory movement, the internal standards acquired along with their experience (concept of mild, moderate and severe symptom) for this type of assessment, ended up aggregating to the new way of evaluating, making it difficult to repeat the answers.

The same, however, did not occur with the inter-rater analysis. In this analysis, it was verified that the agreement index increased considerably after the presentation of the classification proposal, which speaks in favor of the new approach, especially for use in clinical studies and inter-center result assessment.

This higher agreement after training can be explained by the fact that in this analysis the evaluators had to use the pre-established reference descriptions, that is, they had a model to be followed during the assessments. This, added to the fact that the raters performed the rating right after training, attests to the use of these procedures in subjective analyses.

The fact that the raters were not trained and no criteria for the analysis of facial grimace were pre-established in the first stage of the study may be considered a limitation of the study. This methodology was adopted in order to avoid the influence of prior training on the results of the evaluation performed according to the internal standards and criteria used in the clinical routine of the evaluators.

The correlation of the facial grimace judgment with the velopharyngeal orifice dimension measured by the objective instrumental evaluation, in both stages, proved to be positive and significant, indicating that the higher the movement intensity during facial grimace, the higher the velopharyngeal gap size.

The use of rhinomanometry for evaluating VPD, as it is an objective method that determines the real size of the velopharyngeal gap is of great importance in clinical practice. For that reason, a group of researchers in Brazil has used this instrument to elaborate proposals of speech characteristic assessment protocols of patients with VPD, whose results are based on information also coming from this instrument(2,3). It is expected, with the results of these studies, that professionals who do not have access to this kind of equipment may, based on the perceptual speech characteristics, be able to predict the size of the velopharyngeal gap, thus allowing safer and more effective conduct.

CONCLUSION

The proposal of visual facial grimace judgment based on standardized criteria proved to be effective in determining the symptom and reliable in diagnosing the severity of VPD. The significant correlation between perceptual and instrumental evaluation methods suggests that facial grimace can be used to predict velopharyngeal closure.

Funding Statement

Fonte de financiamento: Fundação de Amparo à Pesquisa do Estado de São Paulo-FAPESP (17315-4/2013).

Footnotes

Study conducted at Laboratório de Fisiologia, Hospital de Reabilitação de Anomalias Craniofaciais – HRAC, Universidade de São Paulo – USP - Bauru (SP), Brasil.

Financial support: Fundação de Amparo à Pesquisa do Estado de São Paulo-FAPESP (17315-4/2013).

REFERENCES

  • 1.Kummer AW. Speech evaluation for patients with cleft palate. Clin Plast Surg. 2014;41(2):241–251. doi: 10.1016/j.cps.2013.12.004. [DOI] [PubMed] [Google Scholar]
  • 2.Scarmagnani RH, Barbosa DA, Fukushiro AP, Salgado MH, Trindade IEK, Yamashita RP. Relationship between velopharyngeal closure, hypernasality, nasal air emission and nasal rustle in subjects with repaired cleft palate. CoDAS. 2015;27(3):267–272. doi: 10.1590/2317-1782/20152014145. [DOI] [PubMed] [Google Scholar]
  • 3.Yamashita RP, Fukushiro AP, Scarmagnani RH, Trindade IEK. In: Tratado de motricidade orofacial. da Silva HJ, Tessitore A, Motta AR, da Cunha DA, Berretin-Felix G, Marchesan IQ, editors. São José dos Campos: Pulso Editorial; 2019. Instrumentação para a avaliação aerodinâmica da fala. pp. 355–364. [Google Scholar]
  • 4.Lipira AB, Grames LM, Molter D, Govier D, Kane AA, Woo AS. Videofluoroscopic and nasendoscopic correlates of speech in velopharyngeal dysfunction. Cleft Palate Craniofac J. 2011;48(5):550–560. doi: 10.1597/09-203. [DOI] [PubMed] [Google Scholar]
  • 5.Sell D, Harding A, Grunwell P. A screening assessment of cleft palate speech (Great Ormond Street Speech Assessment) Eur J Disord Commun. 1994;29(1):1–15. doi: 10.3109/13682829409041477. [DOI] [PubMed] [Google Scholar]
  • 6.Trindade IEK, Yamashita RP, Bento Gonçalves CGA. In: Fissuras labiopalatinas: uma abordagem interdisciplinar. Trindade IEK, Silva OG Filho, editors. São Paulo: Editora Santos; 2007. Diagnóstico instrumental da disfunção velofaríngea. pp. 123–144. [Google Scholar]
  • 7.Pegoraro-Krook MI, Marino VCC, Dutka JCR. In: Tratado de motricidade orofacial. da Silva HJ, Tessitore A, Motta AR, da Cunha DA, Berretin-Felix G, Marchesan IQ, editors. São José dos Campos: Pulso Editorial; 2019. Avaliação das alterações de fala na fissura labiopalatina e disfunção velofaríngea. pp. 695–706. [Google Scholar]
  • 8.Landis JR, Koch GG. The measurement of observer agreement for categorical data. Biometrics. 1977;33(1):159–174. doi: 10.2307/2529310. [DOI] [PubMed] [Google Scholar]
  • 9.Mukaka MM. Statistics corner: a guide to appropriate use of correlation coefficient in medical research. Malawi Med J. 2012;24(3):69–71. [PMC free article] [PubMed] [Google Scholar]
  • 10.Yamashita RP, Borg E, Granqvist S, Lohmander A. Reliability of hipernasality rating: comparison of three different methods for perceptual assessment. Cleft Palate Craniofac J. 2018;55(8):1060–1071. doi: 10.1177/1055665618767116. [DOI] [PubMed] [Google Scholar]
  • 11.Oliveira ACASF, Scarmagnani RH, Fukushiro AP, Yamashita RP. Influência do treinamento dos avaliadores no julgamento perceptivo da hipernasalidade. CoDAS. 2016;28(2):141–148. doi: 10.1590/2317-1782/20162015163. [DOI] [PubMed] [Google Scholar]
  • 12.Ramos-Favaretto FS, Fukushiro AP, Scarmagnani RH, Yamashita RP. Escala de Borg: um novo método para avaliação da hipernasalidade de fala. CoDAS. 2019;31(6):e20180296. doi: 10.1590/2317-1782/20192018296. [DOI] [PubMed] [Google Scholar]
  • 13.Lee A, Whitehill TL, Ciocca V. Effect of listener training on perceptual judgement of hypernasality. Clin Linguist Phon. 2009;23(5):319–334. doi: 10.1080/02699200802688596. [DOI] [PubMed] [Google Scholar]
  • 14.Chan KM, Yiu EM. A comparison of two perceptual voice evaluation training programs for naive listeners. J Voice. 2006;20(2):229–241. doi: 10.1016/j.jvoice.2005.03.007. [DOI] [PubMed] [Google Scholar]
  • 15.Hortis-Dzierzbicka M, Radkowska E, Fudalej PS. Speech outcomes in 10-year-old children with complete unilateral cleft lip and palate after one-stage lip and palate repair in the first year of life. J Plast Reconstr Aesthet Surg. 2012;65(2):175–181. doi: 10.1016/j.bjps.2011.09.015. [DOI] [PubMed] [Google Scholar]
Codas. 2022 Jan 7;34(3):e20210069. [Article in Portuguese]

Mímica facial durante a fala em fissura labiopalatina: uma proposta de classificação

Rafaeli Higa Scarmagnani 1, Ana Paula Fukushiro 2,3, Renata Paciello Yamashita 2,✉

RESUMO

Objetivo

Investigar a efetividade de proposta de classificação da mímica facial (MF), e sua correlação com avaliação objetiva do fechamento velofaríngeo (FVF).

Método

Vinte indivíduos com fissura labiopalatina reparada foram submetidos à medida da área velofaríngea por meio da rinomanometria e à gravação de amostra de fala. A MF foi classificada em dois momentos, por três fonoaudiólogas. Inicialmente as avaliadoras classificaram a MF, utilizando critérios próprios, em: 1=MF ausente; 2=leve; 3=moderada; 4=grave. Posteriormente, foram submetidas a um treinamento com o estabelecimento dos seguintes critérios de classificação: 1=MF normal; 2=movimento somente de nariz ou terço superior da face; 3=movimento acentuado de nariz ou terço superior da face; 4=movimento de nariz e terço superior da face e, classificaram a MF utilizando os critérios estabelecidos. Concordância intra e interavaliadores foram calculadas pelo coeficiente Kappa ponderado. A correlação entre os resultados das etapas com o FVF foi feita pelo coeficiente de correlação de Spearman.

Resultados

Na primeira etapa, a concordância interavaliadores variou de regular a substancial e na segunda, de substancial a quase perfeita. A concordância intra-avaliadores variou de moderada a quase perfeita na primeira etapa, e de moderada a substancial, na segunda etapa. A correlação entre a MF e área velofaríngea na primeira e na segunda etapa foi positiva e significativa.

Conclusão

A proposta de julgamento da MF mostrou-se efetiva na determinação do sintoma e confiável no diagnóstico da gravidade da disfunção velofaríngea. A correlação significativa entre os métodos perceptivo e instrumental sugere que a MF pode ser utilizada na previsão do FVF.

Descritores: Fissura Palatina, Insuficiência Velofaríngea, Rinomanometria, Mímica Facial, Percepção da Fala

INTRODUÇÃO

Uma das características frequentemente encontradas em indivíduos com fissura labiopalatina e disfunção velofaríngea (DVF) é a mímica facial (MF), um comportamento não intencional de contrair a válvula nasal ou, em alguns casos, sobrancelhas e testa, na tentativa de impedir o escape de ar nasal, a fim de alcançar o fechamento velofaríngeo(1). Esse tipo de sintoma acompanha, principalmente, a produção de sons orais de pressão da fala e deve ser, assim como os demais sintomas passivos de fala, identificado e classificado por meio da avaliação perceptivo-auditiva da fala, considerada padrão ouro para o diagnóstico da DVF e, portanto, essencial no diagnóstico clínico. Apesar da inegável importância da avaliação perceptivo-auditiva, o diagnóstico da função velofaríngea e, consequentemente, a definição de conduta terapêutica apropriada para cada caso exige, também, a avaliação instrumental. Dentre os métodos instrumentais recomendados para o complemento do diagnóstico da DVF está a rinomanometria, também conhecida como técnica fluxo-pressão. Este método tem sido alvo de diversos estudos que visam correlacionar os seus achados às características perceptivas da fala, na tentativa de, a partir destas características, prever a função velofaríngea(2,3). A mímica facial, por exemplo, é uma característica frequentemente avaliada por clínicos e pesquisadores na avaliação da função velofaríngea, por ser considerada um bom indicador do comportamento velofaríngeo(4) integrando, assim, diversos protocolos de avaliação perceptivo-auditiva da fala empregados tanto na prática clínica quanto em pesquisas. A tarefa de identificar a DVF com base nos sintomas de fala avaliados perceptivamente é bastante útil na prática clínica, pois, possibilita ao profissional fazer inferências sobre a função velofaríngea quando não se tem acesso a equipamentos para o diagnóstico instrumental. No entanto, até onde se sabe, nenhuma proposta com critérios bem estabelecidos e padronizados de classificação especificamente da mímica facial foi encontrada na literatura. O que se usa nos protocolos para a avaliação deste sintoma, de modo geral, são as escalas numéricas ordinais, para as quais, a confiabilidade dos resultados pode ser questionável devido à subjetividade inerente a este procedimento. Ou, ainda, como já proposto na literatura, a representação do movimento facial por meio de escores numéricos, sem considerar, entretanto, a gravidade do sintoma(5). Tal constatação torna a elaboração de uma proposta baseada em critérios padronizados e bem definidos para a classificação da mímica facial, de grande importância para a prática clínica e pesquisas relacionadas ao tema.

Desse modo, este estudo teve como objetivo investigar a efetividade de uma proposta de classificação da mímica facial baseada em critérios padronizados e sua correlação com a avaliação instrumental objetiva quantitativa do fechamento velofaríngeo em indivíduos com fissura labiopalatina reparada.

MÉTODO

Casuística

Este estudo teve aprovação do Comitê de Ética em Pesquisa (número do parecer: 2.251.973) e todos os participantes assinaram o Termo de Consentimento Livre e Esclarecido. Foram avaliados 20 indivíduos com fissura palatina reparada associada ou não à fissura de lábio, com idade entre 6 e 38 anos.

Por tratar-se de um estudo cujo objetivo foi avaliar a efetividade de uma proposta de classificação da mímica facial e sua correlação com a rinomanometria, fatores como tipo de fissura, tipo de técnica cirúrgica utilizada na correção primária do palato e, idade do paciente não influenciaram os resultados, não havendo, portanto, necessidade de distribuição dos indivíduos em grupos distintos. Tomou-se o cuidado, inclusive, de incluir no estudo adultos e crianças a fim de se estabelecer uma amostra abrangente no que se refere à faixa etária. A idade de 6 anos foi adotada como idade mínima neste estudo pelo fato de que, crianças a partir desta faixa etária, de modo geral, são capazes de compreender o exame de rinomanometria e colaborar para a sua realização.

Não foram incluídos os indivíduos com incapacidade física e/ou mental para realizar os exames, sintomas respiratórios alérgicos agudos ou crônicos que resultassem em congestão nasal ao exame, valores de área nasal abaixo do esperado para a idade verificados na rinomanometria, fístulas residuais no palato, presença de retalho faríngeo e articulação compensatória na produção da consoante “p”.

Procedimentos

  • I – Medida da área do orifício velofaríngeo por meio da rinomanometria (técnica fluxo-pressão): A área de secção transversa da velofaringe foi determinada durante a produção da consoante “p” inserida no vocábulo “rampa” (6). A partir dos valores de área obtidos, o fechamento velofaríngeo (FVF) foi classificado com base no seguinte critério adaptado da literatura(2): 0 a 4,9mm2=fechamento velofaríngeo adequado; 5 a 19,9mm2=fechamento marginal e, >20mm2=fechamento inadequado. Para tanto foi utilizado o sistema computadorizado PERCI-SARS, versão 4.01 (Microtronics Corp.).

  • II - Gravação digital audiovisual da amostra de fala composta por leitura ou repetição de sentenças: Para a análise de fala deste estudo foram utilizadas 12 sentenças compostas por 12 consoantes de pressão (consoantes alvo) faladas no Português Brasileiro(7). Ambos os procedimentos (gravação e rinomanometria) foram realizados no mesmo dia. Para o registro em vídeo, utilizou-se uma filmadora digital marca JVC, modelo GZ-MG555, sustentada por um tripé posicionado a um metro de distância do paciente.

  • III - Análise das amostras de fala para a classificação da mímica facial: A classificação da MF foi realizada por 3 fonoaudiólogas com experiência de 7 anos, em média, no tratamento de indivíduos com fissura labiopalatina. O julgamento perceptivo ocorreu em duas etapas. Na primeira etapa, as avaliadoras classificaram a mímica facial em 20 amostras de fala. Para tal, as três avaliadoras foram orientadas a classificar a MF com base em seus próprios critérios, os mesmos utilizados de rotina na prática clínica e utilizando, para tanto, a escala ordinal de 4 pontos, que todas as avaliadoras estavam familiarizadas: 1=mímica facial ausente; 2=mímica leve; 3=mímica moderada; 4=mímica grave. Uma semana depois, as avaliadoras foram submetidas a um treinamento no qual, por meio de figuras e vídeos, foram introduzidos e exemplificados os novos critérios a serem utilizados para a classificação da mímica facial na segunda etapa de avaliação, quais sejam: 1=ausência de mímica facial; 2=movimento somente de nariz ou terço superior da face; 3=movimento acentuado de nariz ou terço superior da face; 4=movimento de nariz e terço superior da face.

Após o treinamento, as avaliadoras realizaram a segunda etapa de avaliação classificando, nas mesmas amostras, a mímica facial utilizando os novos critérios estabelecidos. As amostras foram distribuídas às avaliadoras em dispositivos de memória portátil (pen-drives) e metade delas foi reapresentada dois dias, em média, após o final de cada etapa para a análise intra-avaliadores. Assim, cada avaliadora analisou um total de 60 amostras de fala. Em ambas as etapas, os vídeos foram editados e apresentados às avaliadoras sem o recurso do áudio, a fim de eliminar qualquer tipo de interferência e/ou influência da ressonância de fala e outros sintomas auditivos da DVF durante a análise da mímica facial.

Análise estatística

As concordâncias inter e intra-avaliadores foram estabelecidas por meio do coeficiente Kappa ponderado seguindo critérios determinados para a interpretação dos índices(8) e a comparação entre as duas etapas foi realizada por meio do teste qui-quadrado. Para investigar a correlação entre o tamanho do orifício velofaríngeo e a classificação da mímica facial, calculou-se a moda dos escores atribuídos pelas avaliadoras para a mímica facial na primeira e segunda etapas. A correlação entre a moda do julgamento perceptivo da mímica facial de ambas as etapas e o tamanho do orifício velofaríngeo determinado pela avaliação instrumental foi analisada por meio do Coeficiente de Correlação de Spearman seguindo critérios para sua interpretação(9) e considerando-se o nível de significância de 5%.

RESULTADOS

Concordância Inter e Intra-avaliadores

Na primeira etapa, na qual as avaliadoras classificaram a mímica facial utilizando seus próprios critérios, a concordância interavaliadores variou de regular (0,24) a substancial (0,62). Na segunda etapa, na qual as avaliadoras classificaram a mímica de acordo com os critérios definidos durante o treinamento, a concordância variou de substancial (0,66) a quase perfeita (0,80), conforme apresentado na Tabela 1. Quanto à concordância intra-avaliadores, na primeira etapa, variou de moderada a (0,49) a quase perfeita (1,0) enquanto que, na segunda etapa esse índice variou de moderada (0,52) a substancial (0,67), como mostra a Tabela 2.

Tabela 1. Concordância interavaliadores na primeira e segunda etapa: índice kappa, porcentagem de concordância e interpretação do resultado.

Avaliadoras Primeira Etapa Segunda Etapa
Índice Kappa % Interpretação Índice Kappa % Interpretação
1 e 2 0,62 75 Substancial 0,66 75 Substancial
1 e 3 0,24 50 Regular 0,80 85 Quase Perfeita
2 e 3 0,33 55 Regular 0,73 80 Substancial
Open in a new tab

Tabela 2. Concordância intra-avaliadores na primeira e segunda etapa: índice kappa, porcentagem de concordância e interpretação do resultado.

Avaliadoras Primeira Etapa Segunda Etapa
Índice Kappa % Interpretação Índice Kappa % Interpretação
1 1,0 100 Quase perfeita 0,58 70 Moderada
2 1,0 100 Quase Perfeita 0,67 80 Substancial
3 0,49 70 Moderada 0,52 70 Moderada
Open in a new tab

Análise comparativa da concordância inter e intra-avaliadores entre a primeira e a segunda etapa

O índice de concordância entre as avaliadoras quanto à classificação da MF obtido na segunda etapa foi maior do que aquele observado na primeira etapa, embora sem significância.

No que se refere à comparação entre ambos os julgamentos de uma mesma avaliadora, verificou-se aumento do índice kappa para a avaliadora 3, porém houve uma diminuição deste índice para as avaliadoras 1 e 2. Estas diferenças não foram significantes.

Correlação entre o tamanho do orifício velofaríngeo e a mímica facial

A análise do coeficiente de correlação de Spearman revelou correlação positiva significativa moderada entre a mímica facial e a medida da área do orifício velofaríngeo tanto na primeira etapa da análise (p<0,01; r=0,550) quanto na segunda (p<0,01; r=0,553).

DISCUSSÃO

Na prática clínica, bem como em pesquisas bem delineadas, cada vez mais, inúmeros ensaios têm sido testados na tentativa de se desenvolver métodos que resultem em maior concordância e confiabilidade de resultados, principalmente em procedimentos que envolvam avaliações perceptivas de natureza subjetiva. Atenção especial se dá aos métodos de classificação e escalas de avaliação de sintomas de fala tais como ressonância, inteligibilidade, qualidade vocal e articulação(2,10-14).

Ainda que de grande importância na avaliação da fala de indivíduos com DVF, o mesmo destaque não é extensivo à mímica facial. Embora seja um importante indicador da DVF, nenhuma proposta para classificação da mímica facial foi, até então, publicada na literatura. Sua análise baseia-se na visualização direta do falante e usualmente, é classificada por escalas numéricas ordinais ou por escalas binárias, constituídas por presença ou ausência(15).

A proposta de classificação da mímica facial utilizada no presente estudo baseou-se na experiência clínica de seus autores. Fez-se, então, uma breve explanação sobre os critérios utilizados para a análise das amostras na segunda etapa do estudo, a fim de verificar sua influência sobre os resultados.

Ao analisarmos os resultados da concordância intra-avaliadores, após a apresentação desta nova proposta, verificou-se redução do índice de concordância. Diversos fatores internos e externos, podem interferir em julgamentos subjetivos tal qual o do presente estudo, motivo pelo qual a avaliação perceptiva está sujeita à variabilidade mesmo quando é realizada por avaliadores experientes. O estado físico e emocional ao avaliar as amostras, bem como o padrão interno de cada avaliador, que é, também, instável podem ter contribuído para a variabilidade das respostas, mesmo em se tratando de avaliadores experientes na avaliação e tratamento de pacientes com FLP. Sabe-se que o padrão interno de um avaliador é desenvolvido ao longo de sua experiência com os diversos sintomas de fala em seus diferentes graus e, essas informações ficam armazenadas em sua memória(10). Especula-se que, ao se confrontarem com uma proposta diferente da usualmente utilizada e, mais criteriosa no que se refere a localização do movimento compensatório, os padrões internos adquiridos ao longo de sua experiência (conceito de sintoma leve, moderado e grave) para este tipo de avaliação, acabaram por se agregar à nova maneira de avaliar, dificultando a repetição das respostas.

O mesmo, entretanto, não ocorreu com a análise interavaliadores. Nessa análise, verificou-se que o índice de concordância aumentou consideravelmente, após a apresentação da proposta de classificação, o que fala a favor da nova abordagem, principalmente no uso em estudos clínicos e em avaliação de resultados inter centros.

Esta maior concordância após o treinamento pode ser explicada pelo fato de que, nesta análise, os avaliadores utilizaram as descrições de referências pré-estabelecidas, ou seja, contaram com um modelo a ser seguido durante as avaliações. Isto, somado ao fato de que as avaliadoras realizaram a classificação logo após o treinamento, atesta a utilização destes procedimentos em análises subjetivas.

O fato de não ter sido realizado um treinamento das avaliadoras e não terem sido pré-estabelecidos critérios de análise da mímica facial na primeira etapa do estudo, como foi feito na segunda etapa, pode ser considerada uma limitação do estudo. Tal metodologia foi adotada a fim de evitar uma possível influência de um treinamento prévio, sobre os resultados da avaliação do sintoma feita seguindo os padrões internos e critérios utilizados na rotina clínica das avaliadoras.

A correlação do julgamento da mímica facial com a dimensão do orifício velofaríngeo aferido pela avaliação instrumental objetiva, em ambas as etapas, mostrou-se positiva e significante indicando que, quanto maior a intensidade de movimento durante a mímica facial, maior o tamanho da falha velofaríngea.

O emprego da rinomanometria para a avaliação da DVF, por se tratar de um método objetivo que determina o tamanho real da falha velofaríngea (gap, em inglês) é de grande importância na prática clínica. Por essa razão, um grupo de pesquisadores no Brasil tem utilizado este instrumento para elaborar propostas de protocolos de avaliações das características de fala de pacientes com DVF, cujos resultados, são baseados em informações, também, advindas deste instrumento(2,3).

Espera-se, com os resultados destes estudos, que profissionais que não têm acesso a este tipo de equipamento possam, a partir das características perceptivas de fala, prever o tamanho da falha velofaríngea, possibilitando assim, uma conduta mais segura e efetiva.

CONCLUSÃO

A proposta de julgamento visual da mímica facial baseada em critérios padronizados mostrou-se efetiva na determinação do sintoma e confiável no diagnóstico da gravidade da DVF. A correlação significativa entre os métodos perceptivo e instrumental de avaliação sugere que a mímica facial pode ser utilizada na previsão do fechamento velofaríngeo.

Funding Statement

Financial support: Fundação de Amparo à Pesquisa do Estado de São Paulo-FAPESP (17315-4/2013).

Footnotes

Trabalho realizado no Laboratório de Fisiologia, Hospital de Reabilitação de Anomalias Craniofaciais – HRAC, Universidade de São Paulo – USP - Bauru (SP), Brasil.

Fonte de financiamento: Fundação de Amparo à Pesquisa do Estado de São Paulo-FAPESP (17315-4/2013).

Articles from CoDAS are provided here courtesy of Sociedade Brasileira de Fonoaudiologia

RESOURCES