Evidence of validity of the Competence Scale of Actions of Nurses in Emergencies

Objetivo: avaliar evidências de validade da Escala de Competências das Ações do Enfermeiro em Emergências com base na estrutura interna, na consistência interna e no critério externo. Métodos: estudo metodológico para verificação de novas evidências de validade da Escala, com conteúdos previamente validados. A Escala com 81 ações mensuráveis em cinco níveis de competências pode ser realizada tanto para o enfermeiro se autoavaliar como outros o avaliarem. Resultados: participaram 407 enfermeiros assistenciais e 41 gestores das cinco regiões do Brasil, atuantes em emergências pré-hospitalar móvel, fixa ou hospitalar. A dimensionalidade foi evidenciada mediante análise fatorial exploratória dos 81 itens, apontando sete fatores que explicaram 66,5% da variância total dos dados. O alfa de Cronbach variou de 0,79 a 0,98. O Kaiser- Meyer-Olkin 0,988 indicou que as correlações entre os itens foram significantes. No critério externo, correlações de Pearson entre escores de competências de heteroavaliação e classificação subjetiva do gestor foram significantes (p<0,001), bem como diferenças das médias dessas competências por grupo critério. Adicionalmente, avaliaram-se escores por características, verificando-se médias estatisticamente distintas. Conclusão: por meio dos Procedimentos Estatísticos adotados, com multimétodos e multi-informantes, analisaram-se diferentes propriedades psicométricas, gerando um sumário de evidências, demostrando que a Escala é válida e confiável.Objetivo: evaluar evidencias de validez de la Escala de Competencias de las Acciones del Enfermero en Emergencias con base en la estructura interna, en la consistencia interna y en el criterio externo. Métodos: estudio metodológico para verificación de nuevas evidencias de validez de la Escala, con contenidos previamente validados. La Escala con 81 acciones mensurables en cinco niveles de competencias puede ser realizada tanto para que el enfermero se autoevalúe como otros lo evalúen. Resultados: participaron 407 enfermeros asistenciales y 41 gestores de las cinco regiones de Brasil, actuantes en emergencias pre-hospitalaria móvil, fija o hospitalaria. La dimensionalidad fue evidenciada mediante análisis factorial exploratoria de los 81 ítems, apuntando siete factores que explicaron 66,5% de la variancia total de los datos. El alfa de Cronbach varió de 0,79 a 0,98. El Kaiser- Meyer-Olkin 0,988 indicó que las correlaciones entre los ítems fueron significantes. En el criterio externo, correlaciones de Pearson entre puntajes de competencias de heteroevaluación y clasificación subjetiva del gestor fueron significantes (p<0,001), así como diferencias de las medias de esas competencias por grupo criterio. Adicionalmente, se evaluaron puntajes por características, verificándose medias estadísticamente distintas. Conclusión: por medio de los Procedimientos Estadísticos adoptados, con multimétodos y multiinformantes, se analizaron diferentes propiedades psicométricas, generando un sumario de evidencias, demostrando que la Escala es válida y confiable.Objective: to evaluate the validity of the Competence Scale of Actions of Nurses in Emergencies based on internal structure, internal consistency, and external criteria. Methods: methodological study to verify new evidence of validity of the Scale, with contents previously validated. The Scale has 81 measurable actions at five levels of competence and can be applied both for self- and/or hetero-evaluation. Results: one hundred and forty seven nursing assistants and 41 managers from the five regions of Brazil participated in the study. They were linked to mobile prehospital emergency service, fixed prehospital emergency service, or hospital emergencies. Dimensionality was evidenced by exploratory factorial analysis of the 81 items, pointing out seven factors that explained 66.5% of the total data variance. Cronbach’s alpha ranged from 0.79 to 0.98. The Kaiser-Meyer-Olkin 0.988 indicated that the correlations between the items were significant. In the external criterion, Pearson’s correlations between hetero-evaluation competence scores and the manager’s subjective classification were significant (p < 0.001), as well as differences in the means of these competencies by criterion group. In addition, scores by characteristics were evaluated to detect statistically different means. Conclusion: through the adopted Statistical Procedures, with multi-methods and multi-informants, different psychometric properties were analyzed. A summary of evidence was generated showing that the Scale is valid and reliable