• Reliability and validity of the Brazilian version of the HSOPSC: a reassessment study Methodological Issues

    Reis, Cláudia Tartaglia; Laguardia, Josué; Barros, Cláudia Garcia de; Andreoli, Paola Bruno de Araujo; Martins, Mônica

    Abstract in Portuguese:

    Resumo: O estudo teve como objetivo reavaliar as propriedades psicométricas da versão do Hospital Survey on Patient Safety Culture (HSOPSC) adaptada para o português, para uso no contexto brasileiro. Foi realizado um estudo observacional, transversal, em um hospital particular sem fins lucrativos, referência em segurança do paciente, localizado em uma metrópole brasileira. Os participantes foram selecionados a partir de uma amostra não-probabilística de todos os funcionários elegíveis de diversos departamentos hospitalares, convidados a participar no estudo. A confiabilidade do HSOPSC foi avaliada pela estimativa do alfa de Cronbach para cada dimensão. Foram usadas análise fatorial confirmatória (AFC), uma matriz de correlações entre as dimensões e modelagem de equações estruturais (MEE) na análise exploratória e confirmatória da validade estrutural do construto. Houve uma taxa global de resposta de 18,7% (n = 1.439). Quatro dimensões (“percepção geral de segurança do paciente”; “recursos humanos”; “trabalho de equipe entre unidades” e “resposta não-punitiva aos erros”) apresentaram problemas de consistência interna. A AFC mostrou um ajuste aceitável em relação ao modelo original de 12 dimensões. As correlações entre as dimensões do modelo original de 12 dimensões indicaram problemas de validade discriminante, enquanto a variância residual foi maior de 0,70 em 13 itens. A MEE do modelo original de 12 dimensões mostrou bom ajuste, com os seguintes índices: CFI = 0,985; TLI = 0,968 e RMSEA = 0,026 (IC90%: 0,024-0,029). Embora tenham superado a primeira avaliação, os resultados obtidos nesta reavaliação da validade e confiabilidade da versão do questionário traduzida e adaptada para o contexto brasileiro indicam a necessidade de mais estudos.

    Abstract in Spanish:

    Resumen: El estudio tuvo como objetivo revisar las propiedades psicométricas de la versión del Hospital Survey on Patient Safety Culture (HSOPSC) adaptado al portugués, para su uso en el contexto brasileño. Se realizó un estudio transversal observacional, en un hospital grande con cuidados intensivos, privado, sin ánimo de lucro, punto de referencia en seguridad del paciente, situado en una de las mayores metrópolis brasileñas. Los participantes se seleccionaron de un muestreo no probabilístico entre todo el personal elegible de los diversos departamentos hospitalarios invitados a participar en el estudio. La fiabilidad del HSOPSC se evaluó estimando el alfa de Cronbach para cada dimensión. Se utilizaron tanto el análisis factorial confirmatorio (AFC), como la matriz de correlaciones entre las dimensiones y los modelos de ecuaciones estructurales exploratorios (ESEM) en el análisis exploratorio y confirmatorio para la validez estructural del constructo. El porcentaje general de respuesta fue de un 18,7% (n = 1,439). Hubo cuatro dimensiones (“percepciones generales de seguridad del paciente”; “dotación de personal”; “trabajo en equipo en las unidades”; y “respuesta al error no-punitiva”), problemas recurrentes de consistencia interna. El AFC mostró un ajuste aceptable con el modelo original de 12-dimensiones. Las correlaciones entre las dimensiones del modelo original de 12-dimensiones indicaron problemas de validez discriminante, mientras que varianza residual era mayor a 0,70 en 13 ítems. Los ESEM del modelo original de 12-dimensiones tuvieron un buen ajuste con los siguientes índices: CFI = 0,985; TLI = 0,968 y RMSEA = 0,026 (90%CI: 0,024-0,029). A pesar de que eran mejores que los de la primera evaluación, los resultados obtenidos en esta revisión de la validez y fiabilidad de la versión del cuestionario, traducido y adaptado al contexto brasileño, es necesario que haya más investigaciones al respecto sobre este asunto.

    Abstract in English:

    Abstract: This study aimed to reassess the psychometric properties of the Hospital Survey on Patient Safety Culture (HSOPSC) adapted to Portuguese for use in the Brazilian context. An observational, cross-sectional study was performed in a large, private, non-profit, acute care hospital, reference in patient safety, in a major Brazilian metropolis. Participants were selected from a non-probability sample of all eligible personnel in the various hospital departments invited to participate in the study. Reliability of the HSOPSC was assessed by estimating Cronbach’s alpha for each dimension. confirmatory factor analysis (CFA), a matrix of correlations between the dimensions, and exploratory structural equation modelling (ESEM) were used in exploratory and confirmatory analyses of the structural validity of the construct. The overall response rate was 18.7% (n = 1,439). Four dimensions (“overall perceptions of patient safety”; “staffing”; “teamwork across units”; and “non-punitive response to error”) returned problems of internal consistency. CFA returned acceptable fit with the original 12-dimension model. Correlations between the dimensions of the original 12-dimension model indicated discriminant validity problems, while residual variance was greater than 0.70 in 13 items. The ESEM of the original 12-dimension model returned good fit, with the following indices: CFI = 0.985; TLI = 0.968, and RMSEA = 0.026 (90%CI: 0.024-0.029). Although better than those of the first evaluation, the results obtained in this validity and reliability reassessment of the Brazilian version of the HSOPSC require further research.
  • Psychometric properties of the hospital birth satisfaction scale: Birth in Brazil survey Methodological Issues

    Costa, Dayana Dourado de Oliveira; Ribeiro, Valdinar Sousa; Ribeiro, Marizélia Rodrigues Costa; Esteves-Pereira, Ana Paula; Sá, Lucas Guimarães Cardoso de; Cruz, Joana Athayde da Silva; Leal, Maria do Carmo; Silva, Antônio Augusto Moura da

    Abstract in Portuguese:

    O estudo teve como objetivo analisar as propriedades psicométricas da escala de satisfação com a assistência hospitalar no parto, a partir dos dados da primeira entrevista de seguimento do estudo Nascer no Brasil. As 11 perguntas da escala foram endereçadas via telefone dentro de seis meses depois da alta hospitalar em uma amostra aleatória estratificada de 16.109 mulheres residentes nas cinco macrorregiões brasileiras. A amostra foi dividida aleatoriamente em duas metades. Na primeira metade, foi realizada análise fatorial exploratória (AFE) para identificar a estrutura fatorial da escala. O gráfico de declividade sugeriu que a escala era unidimensional. A AFE demonstrou bom ajuste do modelo unidimensional. As cargas fatoriais foram maiores de 0,50 para todos os itens, exceto para o tempo médio de viagem da residência da parturiente até a maternidade, que foi excluído da análise subsequente. A análise fatorial confirmatória realizada com os dez itens remanescentes na segunda metade da amostra mostrou bom ajuste, com cargas fatoriais > 0,50 e valores de p < 0,001. As associações entre a satisfação com a assistência hospitalar no parto e as variáveis externas de escolaridade materna (coeficiente padronizado = 0,073; p = 0,035), plano de saúde privado (CP = 0,183; p < 0,001) e ter acompanhante em algum momento durante a internação para o parto (CP = 0,193; p = 0,001) foram na direção esperada. Houve evidências de invariância configural e métrica de acordo com o tipo de hospital (privado vs. público) e tipo de parto (cesáreo vs. vaginal). Os resultados mostram que a escala de satisfação com a assistência hospitalar no parto no Brasil é um instrumento unidimensional constituído de dez itens.

    Abstract in Spanish:

    El objetivo de este estudio fue analizar las propiedades psicométricas de la escala de satisfacción sobre cuidados hospitalarios durante el parto, con datos procedentes de la primera entrevista de seguimiento, pertenecientes a la encuesta Nacer en Brasil. Se hicieron 11 preguntas de esta escala por teléfono hasta seis meses después del parto, mediante un muestreo aleatorio estratificado a 16.109 mujeres, residentes en las cinco regiones del país. Se dividió el mismo aleatoriamente en dos mitades. En la primera, se realizó un análisis factorial exploratorio (AFE) para identificar la estructura factorial de la escala. El gráfico de sedimentación indicó que la escala era unidimensional. El AFE demostró un buen ajuste al modelo unidimensional. Las cargas factoriales fueron superiores al 0,5 en todos los ítems, excepto en el tiempo empleado en ir de casa al hospital materno-infantil, que se excluyó del siguiente análisis. En la segunda mitad de la muestra se realizó un análisis factorial confirmatorio con los diez ítems restantes que tuvo un buen ajuste y cuyas cargas factoriales fueron > 0,50 con p-valor < 0,001. Las asociaciones entre la satisfacción con los cuidados hospitalarios recibidos para el parto, las variables externas, escolaridad maternal (coeficiente estandarizado = 0,073; p = 0,035), seguro privado (CE = 0,183; p < 0,001) y contar con pareja en algún momento durante la hospitalización para el parto (CE = 0,193; p = 0,001), estuvieron en línea con lo esperado. Hubo evidencia de invarianza métrica y de configuración, según el tipo de hospital (privado o público), y tipo de parto (cesárea o vaginal). Estos resultados mostraron que la escala de satisfacción sobre cuidados hospitalarios durante el parto en Brasil es un instrumento unidimensional compuesto de diez ítems.

    Abstract in English:

    The objective of this study was to analyze the psychometric properties of the hospital birth satisfaction scale with data from the first follow-up interview of the Birth in Brazil survey. The 11 questions of the scale were asked by telephone up to six months after discharge in a stratified random sample of 16,109 women residing in all five regions of the country. The sample was randomly divided into two halves. Exploratory factor analysis (EFA) was applied to the first half in order to identify the scale’s factorial structure. The scree plot suggested the scale to be one-dimensional. The EFA demonstrated a good fit of the one-dimensional model. Factor loadings were greater than 0.5 for all items, except for the mean time transpired between leaving the home and arriving at the maternity hospital, which was excluded from the next analysis. The confirmatory factor analysis applied to the sample’s second half with the remaining ten items had a good fit and the factor loadings were > 0.50 with p-values < 0.001. The associations between birth satisfaction and the external variables, the mother’s education level (standardized coefficient = 0.073; p = 0.035), private insurance (SC = 0.183; p < 0.001) and having a companion at some point during the hospitalization for labor (SC = 0.193; p = 0.001) were all as expected. There was evidence of configural and metric invariance according to type of hospital (private or public) and type of delivery (cesarean or vaginal). These results showed that the hospital birth satisfaction scale in Brazil is a one-dimensional instrument composed of ten items.
Escola Nacional de Saúde Pública Sergio Arouca, Fundação Oswaldo Cruz Rio de Janeiro - RJ - Brazil
E-mail: cadernos@ensp.fiocruz.br