Efetividade do serviço móvel de urgência (Samu): uso de séries temporais interrompidas

Cátia C. Martins Oliveira Hillegonda Maria Dutih Novaes Airlane Pereira Alencar Itamar S. Santos Maria Cecilia T. Damasceno Heraldo Possolo de Souza Sobre os autores

RESUMO

OBJETIVO

Avaliar o desempenho do serviço de atendimento móvel de urgência (Samu) na região do Grande ABC, utilizando como condição traçadora o infarto agudo do miocárdio.

MÉTODOS

A análise de séries temporais interrompidas foi a abordagem de escolha para testar efeitos imediatos e graduais da intervenção na população de estudo. A pesquisa compreendeu séries temporais mensais ajustadas da taxa de mortalidade hospitalar por infarto agudo do miocárdio no período entre 2000 e 2011. Os dados foram extraídos do Sistema de Informações sobre Mortalidade, usando a análise de regressão segmentada para avaliar o nível e tendência da intervenção antes e após sua implementação. Para fortalecer a validade interna do estudo, foi incluída uma região controle.

RESULTADOS

A análise de séries temporais interrompidas mostrou redução de 0,04 mortes por 100.000 habitantes na taxa de mortalidade em relação à tendência subjacente desde a implantação do serviço de atendimento médico de urgência (p = 0,0040; IC95% -0,0816 – -0,0162) e uma redução no nível de 2,89 mortes por 100.000 habitantes (p = 0,0001; IC95% -4,3293 – -1,4623), ambos com significância estatística. Em relação à região controle, a Baixada Santista, a diferença da tendência do resultado entre desfecho de intervenção e controle pós-intervenção de -0,0639 mortes por 100.000 habitantes mostrou-se estatisticamente significativa (p = 0,0031; IC95% -0,1060 – -0,0219). Não podemos excluir confundimentos, mas limitamos sua presença no estudo incluindo séries de região controle.

CONCLUSÕES

Embora a análise de séries temporais interrompidas tenha limitações, essa modelagem pode ser útil para a análise de desempenho de políticas e programas. Apesar de a intervenção estudada não ser uma condição que por si só implica na efetividade, a efetividade não estaria presente sem essa intervenção, que, integrada a outras condições, gera um resultado positivo. O Samu é uma estratégia cuja expansão precisa ser levada em consideração ao formular e consolidar políticas com foco nas urgências e emergências.

Unidades Móveis de Saúde; Infarto do Miocárdio; Mortalidade Hospitalar; Avaliação de Eficácia-Efetividade de Intervenções; Análise de Séries Temporais Interrompida

INTRODUÇÃO

A atenção pré-hospitalar móvel vem ganhando cada vez mais relevância em nossa sociedade, em virtude da necessidade de estruturar o atendimento à urgência, assegurando menor tempo de resposta e melhor regulação dos fluxos de atenção. Países que organizaram seus sistemas de atendimento às urgências com foco na atenção pré-hospitalar, independentemente do modelo adotado, alcançaram bons resultados em termos de sobrevida, tempo e custo de assistência, especialmente no caso de traumas e doenças crônico-degenerativas11. O’Dwyer G, Konder MT, Reciputti, LP, Macedo C, Lopes MGM, O processo de implantação do Serviço de Atendimento Móvel de Urgência no Brasil: estratégias de ação e dimensões estruturais. Cad Saude Publica. 2017;33(7):e00043716. https://doi.org/10.1590/0102-311x00043716
https://doi.org/10.1590/0102-311x0004371...
, 22. Minayo MCS, Deslandes SF. Análise da implantação do sistema de atendimento pré-hospitalar móvel em cinco capitais brasileiras. Cad Saude Publica. 2008;24(8):1877-86. https://dx.doi.org/10.1590/S0102-311X200800080001
https://dx.doi.org/10.1590/S0102-311X200...
.

No Brasil a atenção pré-hospitalar móvel de urgência é ofertada desde 2003, por meio do serviço de atendimento móvel de urgência (Samu). Inspirado no modelo francês, mas com atributos do modelo americano, tem como principais objetivos a redução do número de óbitos, do tempo de internação e das sequelas decorrentes da falta de socorro oportuno. É operado por meio da regulação de urgência demandada pelo usuário, e a conduta pode ser telefônica ou por despacho de equipes de suporte básico ou avançado de vida, para os casos graves que necessitam de intervenção mais complexa22. Minayo MCS, Deslandes SF. Análise da implantação do sistema de atendimento pré-hospitalar móvel em cinco capitais brasileiras. Cad Saude Publica. 2008;24(8):1877-86. https://dx.doi.org/10.1590/S0102-311X200800080001
https://dx.doi.org/10.1590/S0102-311X200...
, 33. Machado CV, Salvador FGF, O’Dwyer G. Serviço de Atendimento Móvel de Urgência: análise da política brasileira, Rev Saude Publica. 2011;45(3):519-28. https://doi.org/10.1590/s0034-89102011005000022
https://doi.org/10.1590/s0034-8910201100...
.

Recentes revisões encontraram evidências do efeito benéfico da atenção pré-hospitalar de urgência sobre o prognóstico de importantes agravos como traumas e acidente vascular cerebral, para os quais o tempo resposta para o início do tratamento é de suma importância44. Geue C, Lewsey JD, MacKay DF, Antony G, Fischbacher CM, Muirie J, et al. Scottish Keep Well health check programme: an interrupted time series analysis, J Epidemiol Community Health. 2016;70(9):924-9. https://doi.org/10.1136/jech-2015-206926
https://doi.org/10.1136/jech-2015-206926...
. Alguns autores envolvidos com o tema no Brasil ressaltam que o Samu promove, além do início pré-hospitalar do tratamento no local de ocorrência do evento, a imediata remoção do paciente para o centro terciário, quando indicado por protocolo baseado nas melhores evidências77. Sawaya Neto M, Menezes Neto ASM. Avaliação do impacto do SAMU sobre indicadores de urgência: o caso das proporções de mortes hospitalares por infarto agudo do miocárdio em municípios de médio e grande porte. In: Resende GM, organizador. Avaliação de políticas públicas no Brasil: uma análise de seus impactos regionais. Brasília, DF: IPEA; 2014. v.2 , 88. Avezun A, Carvalho ACC, Mansur AP, Timerman A, Guimarães AC, Bozza AEZ, et al. III Diretriz sobre tratamento do infarto agudo do miocárdio. Arq Bras Cardiol. 2004;83 Supl 4:3-86. https://doi.org/10.1590/S0066-782X2004002200001
https://doi.org/10.1590/S0066-782X200400...
.

O infarto agudo do miocárdio tem sido apontado como um agravo especialmente indicado para estudos de avaliação do desempenho da assistência pré-hospitalar de urgência, dada a sua magnitude, sensibilidade a tecnologias médicas hospitalares e impacto na mortalidade e na letalidade hospitalar. Diagnosticar precocemente o infarto agudo do miocárdio e iniciar os cuidados emergenciais aumenta a chance de sobrevida do paciente99. Brasileiro ALS. SAMU/192 e a abordagem pré-hospitalar do infarto agudo do miocárdio no Brasil: esperança para o paciente ou mais uma oportunidade perdida? Arq Bras Cardiol. 2007;88(2):e44-6. https://doi.org/10.1590/S0066-782X2007000200023
https://doi.org/10.1590/S0066-782X200700...
.

Métodos rigorosos para avaliar resultados das intervenções no âmbito das políticas e programas são necessários para determinar sua efetividade. Entre os desenhos de estudo recomendados para avaliar o efeito de uma intervenção, há a análise de série temporal interrompida, método quase experimental, utilizado quando estudos randomizados não são viáveis1010. Penfold RB, Zhang F. Use of interrupted time series analysis in evaluating health care quality improvements. Acad Pediatr. 2013;13(6 Suppl):S38-44. https://doi.org/10.1016/j.acap.2013.08.002
https://doi.org/10.1016/j.acap.2013.08.0...
. Nesse desenho, uma série de observações do mesmo desfecho é realizada em múltiplos pontos no tempo, antes e depois de implantada a intervenção (a “interrupção”). Esse método controla o nível e a tendência da linha de base ao estimar as mudanças esperadas resultantes da implantação do programa1111. Panagiotoglou D, Law MR, McGrail K. Effect of hospital closures on acute care outcomes in British Columbia, Canada: an interrupted time series study. Med Care. 2017;55(1):50-6. https://doi.org/10.1097/MLR.0000000000000619
https://doi.org/10.1097/MLR.000000000000...
, 1212. Wagner AK, Soumerai SB, Zhang F, Ross-Degnan D. Segmented regression analysis of interrupted time series studies in medication use research. J Clin Pharm Ther. 2002;27(4):299-309. https://doi.org/10.1046/j.1365-2710.2002.00430.x
https://doi.org/10.1046/j.1365-2710.2002...
.

Este estudo utilizou séries temporais interrompidas para avaliar a efetividade do serviço de atendimento móvel de urgência sobre a taxa de mortalidade hospitalar por infarto agudo do miocárdio em uma região do Brasil.

MÉTODOS

Estudo ecológico com análise de séries temporais interrompidas, considerado um dos mais efetivos desenhos quase experimentais para avaliar o efeito longitudinal de intervenções1010. Penfold RB, Zhang F. Use of interrupted time series analysis in evaluating health care quality improvements. Acad Pediatr. 2013;13(6 Suppl):S38-44. https://doi.org/10.1016/j.acap.2013.08.002
https://doi.org/10.1016/j.acap.2013.08.0...
, 1111. Panagiotoglou D, Law MR, McGrail K. Effect of hospital closures on acute care outcomes in British Columbia, Canada: an interrupted time series study. Med Care. 2017;55(1):50-6. https://doi.org/10.1097/MLR.0000000000000619
https://doi.org/10.1097/MLR.000000000000...
. Nesse tipo de estudo, a série temporal de um resultado de interesse, ou seja, sequência contínua de observações de um dado desfecho tomadas repetidamente (normalmente em intervalos iguais) ao longo do tempo, é usada para estabelecer uma tendência subjacente que é “interrompida” por uma intervenção em um momento conhecido. O cenário hipotético ocorre considerando que a intervenção não foi implantada e a tendência continua inalterada, o que se denomina como “contrafactual” (tendência “esperada” na ausência da intervenção dada a tendência pré-existente). O cenário contrafactual permite avaliar a efetividade da intervenção examinando a – trajetória da tendência no período pós-intervenção1010. Penfold RB, Zhang F. Use of interrupted time series analysis in evaluating health care quality improvements. Acad Pediatr. 2013;13(6 Suppl):S38-44. https://doi.org/10.1016/j.acap.2013.08.002
https://doi.org/10.1016/j.acap.2013.08.0...
, 1313. Zhang F, Wagner AK, Ross-Degnan D. Simulation-based power calculation for design in interrupted time series analyses of health policy interventions. J Clin Epidemiol. 2011;64(11):1252-61. https://doi.org/10.1016/j.jclinepi.2011.02.007
https://doi.org/10.1016/j.jclinepi.2011....
, 1414. Antunes JLF, Cardoso MRA. Uso da análise de séries temporais em estudos epidemiológicos. Epidemiol Serv Saude. 2015;24(3):565-76. https://doi.org/10.5123/S1679-49742015000300024
https://doi.org/10.5123/S1679-4974201500...
.

A pesquisa foi desenvolvida na região do Grande ABC, localizada no estado de São Paulo, composta por sete municípios e com uma população de aproximadamente 2.719.580 habitantes. O Samu começou a ser implantado em 2004, no município de Santo André, e expandiu para os demais entre os anos de 2004 e 2005. Como alguns na época não tinham porte para constituir uma central de regulação do Samu, foram realizados pactos para a instalação regional. Por isso, a base de Mauá é referência para Rio Grande da Serra e Ribeirão Pires, a de Santo André é interligada com São Caetano, e Diadema e São Bernardo possuem bases próprias. O Samu cobre todas as localidades com ambulâncias de suporte básico e avançado de vida, além de motolância.

Foi avaliada a taxa de mortalidade hospitalar por infarto agudo do miocárdio (IAM), com base no diagnóstico de morte com os códigos I20 a I24 na 10ª revisão da Classificação Internacional de Doenças (CID-10). Os dados mensais foram extraídos do Sistema de Informações sobre Mortalidade (SIM) do Departamento de Informática do Sistema Único de Saúde (Datasus), que capta cerca de 90% de todas as mortes ocorridas no país, referentes a hospitais públicos e privados.

O numerador correspondeu ao número de óbitos por IAM na população com 40 anos ou mais residente nos municípios que compõem a região do Grande ABC. O denominador se referiu à população estimada, segundo censo do Instituto Brasileiro de Geografia e Estatística (IBGE), para a mesma faixa etária, região e período do estudo. Para permitir a comparação ao longo do tempo e entre regiões, os valores foram convertidos em taxas por 100.000 habitantes e padronizados pelo método direto.

Para fortalecer a validade interna do estudo, foi incluída uma região controle (grupo não exposto à intervenção), utilizando o mesmo desfecho e período de observação. Essa estratégia é particularmente valiosa quando existem outras mudanças ao longo do tempo, não relacionadas à intervenção estudada, mas que podem influenciar os resultados do desfecho1414. Antunes JLF, Cardoso MRA. Uso da análise de séries temporais em estudos epidemiológicos. Epidemiol Serv Saude. 2015;24(3):565-76. https://doi.org/10.5123/S1679-49742015000300024
https://doi.org/10.5123/S1679-4974201500...
.

Para a seleção da região controle primeiro foram analisadas as localidades no estado de São Paulo cujos municípios não haviam habilitado o Samu antes de 2011, de acordo com documento fornecido pelo Ministério da Saúde. Em sequência, para encontrar controles comparáveis, foram identificados os que tinham p-valor maior que 0.05 para as covariáveis que mensuram a diferença de nível e tendência durante o período pré-intervenção, incluídos no modelo final. A tendência pré-intervenção não precisa ter exatamente os mesmos valores como em um ensaio randomizado, porém é importante que haja uma tendência similar para que haja sustentabilidade do grupo controle. Maiores detalhes metodológicos podem ser encontrados em Linden e Adams1717. Linden A. Conducting interrupted time-series analysis for single- and multiple group comparisons. Stata J. 2015:480-500. https://doi.org/10.1177/1536867X1501500208
https://doi.org/10.1177/1536867X15015002...
.

Foram elegíveis para comparar as regiões também os indicadores socioeconômicos (taxa de analfabetismo da população com 15 anos ou mais de idade;renda média per capita, em reais; e gasto público total em saúde por habitante, em R$) e marcadores da atenção básica, da média e da alta complexidade (cobertura populacional estimada de equipes de atenção básica, médicos de saúde da família ou médicos comunitários por 100.000 habitantes; percentual de internações por condições sensíveis à atenção primária; total de leitos de internação do Sistema Único de Saúde por 1.000 habitantes; total de leitos de unidade de terapia intensiva adulto ou coronariana por 100.000 habitantes; taxa de angioplastia padronizada por sexo e idade por 100.000 habitantes com 20 anos ou mais; percentual da população coberta por planos e seguros de assistência suplementar à saúde). As fontes de dados para esses indicadores foram o portal do projeto Regiões e Redes e o site do Projeto Avaliação do Desempenho do Sistema de Saúde (Proadess) da Fundação Oswaldo Cruz. Para análise comparativa das regiões, foram considerados os anos de 2000 (início do estudo) e 2010 (próximo à finalização do estudo). Devido à indisponibilidade de informações regionais de âmbito socioeconômico e organizacional da atenção à saúde nos bancos de dados públicos para o ano de 2011, optou-se por utilizar para comparação o ano de 2010.

O estudo compreendeu séries temporais mensais entre os anos 2000 e 2011, divididos em três segmentos: um período anterior (janeiro de 2000 a dezembro de 2003), a fase de implementação da intervenção (janeiro de 2004 a dezembro de 2004) e o período posterior à intervenção (de janeiro de 2005 a dezembro de 2011). Cabe ressaltar que este estudo foi finalizado em 2011 por causa da inclusão da região controle na análise. Como a maior expansão da atenção móvel pré-hospitalar de urgência ocorreu a partir de 2012, quando foi reformulada a Política Nacional de Atenção às Urgências, dando origem à rede de urgência e emergência, não seria possível depois disso identificar uma região controle similar à região de intervenção para avaliar possíveis explicações rivais.

A taxa de mortalidade hospitalar por infarto agudo do miocárdio foi analisada por meio do ajuste do modelo de regressão segmentada, incluindo como covariáveis o tempo, a variável indicadora igual a um após a intervenção e zero antes da intervenção e a interação entre essas duas variáveis, para avaliar os efeitos de mudança no nível e tendência no período antes e após a intervenção. A sazonalidade foi corrigida, incluindo variáveis indicadoras de mês (tendo janeiro como referência)11. O’Dwyer G, Konder MT, Reciputti, LP, Macedo C, Lopes MGM, O processo de implantação do Serviço de Atendimento Móvel de Urgência no Brasil: estratégias de ação e dimensões estruturais. Cad Saude Publica. 2017;33(7):e00043716. https://doi.org/10.1590/0102-311x00043716
https://doi.org/10.1590/0102-311x0004371...
.

Os gráficos de resíduos e da função de autocorrelação amostral e parcial (FAC e FAC parcial) foram utilizados para verificar autocorrelação nos resíduos e propriedades de estacionariedade e normalidade, a fim de selecionar os modelos mais adequados e parcimoniosos estatisticamente. O teste de Ljung-Box indicou que o modelo é apropriado para descrever a dependência linear entre os sucessivos retornos1818. Morettin PA, Toloi CM. Análise de séries temporais. São Paulo: Blucher; 2006. .

RESULTADOS

Na região do Grande ABC, o infarto agudo do miocárdio foi a principal causa isolada de morte nos últimos anos. No período entre 2000 e 2011, ocorreram 12.559 óbitos em indivíduos com 40 anos ou mais. Os dados mensais da taxa de mortalidade hospitalar mensal padronizada para esse período estão apresentados na Tabela 1 .

Tabela 1
Taxa ajustada de mortalidade hospitalar mensal por infarto agudo do miocárdio. Região do Grande ABC, SP, 2000–2011.

Neste estudo, a análise estatística empiricamente testou a hipótese de redução significativa na tendência e no nível da taxa de mortalidade hospitalar por IAM em adultos com idade acima de 40 anos após a implementação da atenção pré-hospitalar móvel ocorrida em 2004. Como em uma análise de série temporal os termos de erro de observações consecutivas podem ser correlacionados, foram inspecionadas as parcelas dos resíduos do modelo em função do tempo para garantir que nenhum padrão sugerindo autocorrelação fosse evidente.

A Figura 1 apresenta o gráfico de efeito estimado e predito do desfecho, considerando o período antes e depois de implementada a intervenção na região do Grande ABC. A análise de séries temporais interrompidas mostrou redução de 0,04 mortes por 100.000 habitantes na taxa mensal de mortalidade hospitalar por IAM em relação à tendência subjacente (p = 0,0040; IC95%: -0,0816 – -0,0162) e uma redução no nível de 2,89 mortes por 100.000 habitantes na taxa mensal de mortalidade hospitalar por IAM (p = 0,0001; IC95%: -4,3293 – -1,4623), com significância estatística. Os achados indicam que, a partir de 2005, houve queda imediata na taxa de mortalidade hospitalar atribuída ao infarto agudo do miocárdio e redução da tendência, que se mantém de forma gradual ao longo do período de análise.

Figura 1
Efeito estimado e predito da taxa de mortalidade hospitalar por infarto agudo do miocárdio para o período antes e depois de implantado o serviço de atendimento móvel de urgência. Região do Grande ABC, SP, 2000–2011.

Para reduzir a possibilidade de confundimento, optou-se por trabalhar com um grupo controle comparável ao grupo de intervenção. A única região do estado de São Paulo que atendeu aos critérios estabelecidos, ou seja, não ter o Samu implementado durante o período de análise e apresentar valores de covariáveis semelhantes aos da região do Grande ABC, foi a região da Baixada Santista.

A Tabela 2 apresenta indicadores demográficos e econômicos, além de marcadores para atenção básica, média e alta complexidade, no intuito de comparar ambas as regiões de análise quanto aos anos de 2000 e 2010. Considerando que a taxa de angioplastia, padronizada por sexo e idade por 100.000 habitantes com 20 anos ou mais, apresentou entre os anos de 2000 e 2010 valores crescentes em ambas as regiões, optou-se por incluir a tendência anual desse indicador, conforme demonstrado na Tabela 3 .

Tabela 2
Indicadores socioeconômicos e organizacionais das regiões da Baixada Santista e Grande ABC, SP, 2000 e 2010.

Tabela 3
Taxa de angioplastia padronizada por sexo e idade por 100 mil habitantes com 20 anos ou mais. Regiões do Grande ABC e Baixada Santista, estado de São Paulo e Região Sudeste, 2000–2011.

A visualização de mudança no nível e tendência da taxa de mortalidade hospitalar por infarto agudo do miocárdio entre indivíduos com 40 anos ou mais para as regiões do Grande ABC e Baixada Santista está apresentada na Figura 2 , destacando a região controle como contrafactual. Todos os resultados referem-se a mudanças após o ajuste para a variação sazonal e autocorrelação. Na região do Grande ABC, quando comparada com a região controle, a tendência no período anterior à implantação do Samu era ascendente, correspondendo a 2,3 óbitos por 100.000 habitantes. A diferença de -0,0639 na tendência do resultado pós-intervenção entre grupo de intervenção e controle mostrou-se estatisticamente significativa (p = 0,0031; IC95% -0,1060 – -0,0219). Não foi identificada mudança de nível (degrau) estatisticamente significativa na transição do primeiro para o segundo segmento (p = 0,257) quando comparada as duas regiões. Esses resultados sugerem mudança de tendência entre os dois grupos, o que pode fortalecer a hipótese do estudo em termos de efeito da intervenção implementada na região a partir de 2004.

Figura 2
Efeito estimado e predito da taxa de mortalidade hospitalar por infarto agudo do miocárdio para o período antes e depois de implantado o serviço de atendimento móvel de urgência. Grande ABC e Baixada Santista, SP, 2000–2011.

DISCUSSÃO

O desenho de séries temporárias interrompidas envolve estimar o efeito de uma intervenção avaliando se há impacto imediato (mudança de nível) ou impacto progressivo (mudança de tendência) nos valores da série1212. Wagner AK, Soumerai SB, Zhang F, Ross-Degnan D. Segmented regression analysis of interrupted time series studies in medication use research. J Clin Pharm Ther. 2002;27(4):299-309. https://doi.org/10.1046/j.1365-2710.2002.00430.x
https://doi.org/10.1046/j.1365-2710.2002...
, 1313. Zhang F, Wagner AK, Ross-Degnan D. Simulation-based power calculation for design in interrupted time series analyses of health policy interventions. J Clin Epidemiol. 2011;64(11):1252-61. https://doi.org/10.1016/j.jclinepi.2011.02.007
https://doi.org/10.1016/j.jclinepi.2011....
. Na região do Grande ABC, a mudança de tendência estatisticamente significativa observada na taxa de mortalidade hospitalar por infarto agudo do miocárdio, principalmente a partir de 2004, sugere algumas hipóteses, entre elas um possível efeito da atenção pré-hospitalar móvel de urgência.

A V Diretriz da Sociedade Brasileira de Cardiologia sobre Tratamento do Infarto Agudo do Miocárdio (2015)1919. Piegas LS, Timerman A, Feitosa GS, Nicolau JC, Mattos LAP, Andrade MD, et al. V Diretriz da Sociedade Brasileira de Cardiologia sobre Tratamento do Infarto Agudo do Miocárdio com Supradesnível do Segmento ST. Arq Bras Cardiol. 2015;105(2):1-105. considera como um dos principais mecanismos para a redução dos óbitos advindos dessa enfermidade os serviços pré-hospitalares, pois favorecem o diagnóstico precoce e garantem a referência de pacientes. No entanto, existem poucos estudos que demonstrem efetividade dessa intervenção no país2020. Luz CC, Junger WL, Cavalini LT. Análise da atenção pré-hospitalar ao acidente vascular cerebral e ao infarto agudo do miocárdio na população idosa de Minas Gerais. Rev Assoc Med Bras. 2010;56(4):452-7. https://doi.org/10.1590/S0104-42302010000400019
https://doi.org/10.1590/S0104-4230201000...
, 2121. Cabral APS, Souza WV. Serviço de Atendimento Móvel de Urgência (SAMU): análise da demanda e sua distribuição espacial em uma cidade do Nordeste brasileiro, Rev Bras Epidemiol. 2008;11(4):530-40. https://doi.org/10.1590/S1415-790X2008000400002
https://doi.org/10.1590/S1415-790X200800...
.

A redução na taxa de mortalidade hospitalar por IAM após a introdução da atenção pré-hospitalar móvel de urgência é consistente com resultados de estudos anteriores, que relataram efeitos benéficos dela sobre o tempo de resposta66. Taljaard MT, McKenzie JE, Ramsay CR, Grimshaw JM. The use of segmented regression in analysing interrupted time series studies: an example in pre-hospital ambulance care. Implement Sci. 2014;9:77. https://doi.org/10.1186/1748-5908-9-77
https://doi.org/10.1186/1748-5908-9-77...
, 2020. Luz CC, Junger WL, Cavalini LT. Análise da atenção pré-hospitalar ao acidente vascular cerebral e ao infarto agudo do miocárdio na população idosa de Minas Gerais. Rev Assoc Med Bras. 2010;56(4):452-7. https://doi.org/10.1590/S0104-42302010000400019
https://doi.org/10.1590/S0104-4230201000...
, 2222. Perkins-Porras L, Whitehead PC, Steptoe A. Pre-hospital delay in patients with acute coronary syndrome: factors associated with patient decision time and home-to-hospital delay. Eur J Cardiovasc Nurs. 2009;8(1):26-33. https://doi.org/10.1016/j.ejcnurse.2008.05.001
https://doi.org/10.1016/j.ejcnurse.2008....
. Nos Estados Unidos, mesmo com os avanços ocorridos no tratamento do IAM dentro dos hospitais, vários estudos destacam a importância da habilidade de ressuscitação e da desfibrilação no avanço do tratamento pré-hospitalar, por reduzirem o tempo decorrido entre o início dos sintomas e a instituição do tratamento2323. Kurz MC, Schmicker RH, Leroux B, Nichol G, Aufderheide TP, Cheskes S, et al. Advanced vs. basic life support in the treatment of out-of-hospital cardiopulmonary arrest in the resuscitation outcomes consortium. Resuscitation. 2018;128:132-137 .

Em estudo conduzido em Ruanda, foi observado que uma atenção pré-hospitalar móvel bem estruturada pode levar a um decréscimo gradual e sustentado na taxa de mortalidade pelo agravo assistido2424. Scott JW, Nyinawankusi JD, Enumah S, Maine R, Uwitonze E, Hu Y, et al. Improving prehospital trauma care in Rwanda through continuous quality improvement: an interrupted time series analysis. Injury. 2017;48(7):1376-81. https://doi.org/10.1016/j.injury.2017.03.050
https://doi.org/10.1016/j.injury.2017.03...
. Pesquisa realizada no Canadá sobre unidades móveis de urgência, com séries temporais interrompidas, sugeriu que a atenção pré-hospitalar móvel pode melhorar a qualidade do cuidado nos casos de AVC e IAM; entretanto, efeitos clinicamente potenciais precisam ser melhor estudados66. Taljaard MT, McKenzie JE, Ramsay CR, Grimshaw JM. The use of segmented regression in analysing interrupted time series studies: an example in pre-hospital ambulance care. Implement Sci. 2014;9:77. https://doi.org/10.1186/1748-5908-9-77
https://doi.org/10.1186/1748-5908-9-77...
. Outros trabalhos, no entanto, apontaram pouco ou nenhum efeito dessa modalidade de atenção sobre a mortalidade hospitalar, inclusive por IAM, o que sugere que ela pode ter efeitos diferentes em diferentes situações e que seu impacto não pode ser considerado como indiscutível2525. Aboueljinane L, Sahin E, Jemai Z, Marty J. A simulation study to improve the performance of an emergency medical service: application to the French Val-de-Marne department. Simul Model Pract Theory. 2014;47(1):46-59. https://doi.org/10.1016/j.simpat.2014.05.007
https://doi.org/10.1016/j.simpat.2014.05...
.

Embora no Brasil não haja pesquisas com o método de séries temporais interrompidas para o Samu, o efeito da atenção pré-hospitalar móvel foi identificado em algumas publicações. Um estudo de desenho ecológico, com delineamento longitudinal, observou um efeito benéfico da presença do Samu para a mortalidade por AVC no sexo masculino e mortalidade por IAM no sexo feminino em população idosa do estado de Minas Gerais2020. Luz CC, Junger WL, Cavalini LT. Análise da atenção pré-hospitalar ao acidente vascular cerebral e ao infarto agudo do miocárdio na população idosa de Minas Gerais. Rev Assoc Med Bras. 2010;56(4):452-7. https://doi.org/10.1590/S0104-42302010000400019
https://doi.org/10.1590/S0104-4230201000...
.

Resultados de uma pesquisa realizada no estado do Rio de Janeiro, também com séries temporais, mostraram que o Samu pode reduzir o tempo médio de permanência hospitalar, principalmente para acidente vascular cerebral, em ambos os sexos, e trauma, para os homens2626. Cardoso SS. Metodologia de avaliação da política nacional de atendimento às urgências para o estado do Rio de Janeiro [dissertação]. Niterói: Universidade Federal Fluminense; 2011. . Um estudo produzido pelo Instituto de Pesquisa Econômica e Aplicada (Ipea) destacou que a taxa de óbitos hospitalares por IAM é maior nos municípios que não possuem unidades do Samu, comparados com aqueles que possuem, embora a diferença não seja expressiva77. Sawaya Neto M, Menezes Neto ASM. Avaliação do impacto do SAMU sobre indicadores de urgência: o caso das proporções de mortes hospitalares por infarto agudo do miocárdio em municípios de médio e grande porte. In: Resende GM, organizador. Avaliação de políticas públicas no Brasil: uma análise de seus impactos regionais. Brasília, DF: IPEA; 2014. v.2 .

Mesmo considerando que o Samu representa um equipamento móvel pré-hospitalar de urgência, que pode contribuir para o estado de saúde em que os pacientes chegam aos hospitais, diversos outros fatores que melhoram a sobrevida do paciente devem ser considerados na interpretação dos resultados. Assim, a implantação de medidas preventivas, com foco nos fatores de risco relacionados ao IAM, bem como avanços no cuidado médico, como o uso de betabloqueadores e a angioplastia com stent , podem interferir substancialmente na taxa de admissão e mortalidade hospitalar77. Sawaya Neto M, Menezes Neto ASM. Avaliação do impacto do SAMU sobre indicadores de urgência: o caso das proporções de mortes hospitalares por infarto agudo do miocárdio em municípios de médio e grande porte. In: Resende GM, organizador. Avaliação de políticas públicas no Brasil: uma análise de seus impactos regionais. Brasília, DF: IPEA; 2014. v.2 , 2424. Scott JW, Nyinawankusi JD, Enumah S, Maine R, Uwitonze E, Hu Y, et al. Improving prehospital trauma care in Rwanda through continuous quality improvement: an interrupted time series analysis. Injury. 2017;48(7):1376-81. https://doi.org/10.1016/j.injury.2017.03.050
https://doi.org/10.1016/j.injury.2017.03...
.

A incorporação de um grupo controle, utilizando o mesmo desfecho em um grupo não exposto à intervenção, adiciona legitimidade ao procurar controlar possíveis vieses, como os citados acima1616. Lopez Bernal J, Cummins S, Gasparrini A. Interrupted time series regression for the evaluation of public health interventions: a tutorial. Int J Epidemiol. 2017;46(1):348-55. https://doi.org/10.1093/ije/dyw098
https://doi.org/10.1093/ije/dyw098...
, 1717. Linden A. Conducting interrupted time-series analysis for single- and multiple group comparisons. Stata J. 2015:480-500. https://doi.org/10.1177/1536867X1501500208
https://doi.org/10.1177/1536867X15015002...
. A análise estatística de séries temporais, junto com a análise de ameaça à validade, pode prover informações úteis sobre a efetividade da intervenção2525. Aboueljinane L, Sahin E, Jemai Z, Marty J. A simulation study to improve the performance of an emergency medical service: application to the French Val-de-Marne department. Simul Model Pract Theory. 2014;47(1):46-59. https://doi.org/10.1016/j.simpat.2014.05.007
https://doi.org/10.1016/j.simpat.2014.05...
. Neste estudo, no período pré-intervenção, a diferença de tendência entre as regiões do Grande ABC e Baixada Santista foi bastante próxima, de 0,001. Isso sugere que, sem intervenção, a tendência pós-2004 no Grande ABC provavelmente teria sido semelhante à da Baixada Santista.

Considerando que as diferentes regiões do estado são heterogêneas em relação às características socioeconômicas e organizacionais, buscou-se trazer variáveis regionais que descrevessem importantes aspectos possivelmente relacionados ao comportamento da taxa de mortalidade hospitalar por IAM. Nesse contexto, foram selecionados também marcadores de oferta de serviços da atenção básica, média e alta complexidade em ambas as regiões de estudo2727. Shadish WR, Cook TD, Campbell DT. Experimental and quasi experimental designs for generalized causal inference, Boston, MA: Houghton Mifflin; 2002. .

Entre os anos de 2000 e 2010, a renda média per capita melhorou em ambas as regiões, e a taxa de analfabetismo apresentou queda tanto no Grande ABC quanto na Baixada Santista. A cobertura de planos e seguros de assistência suplementar à saúde aumentou de forma expressiva na Baixada Santista, de 29,5% para 39,7%, e no Grande ABC observou-se um ligeiro aumento de 51,7% para 53,6%.

Houve crescimento da cobertura populacional estimada de equipes da atenção básica e médicos da família entre os anos de 2000 e 2010 em ambas as regiões. No entanto, o percentual de internação por condições sensíveis à atenção primária aumentou na região de intervenção e teve uma ligeira redução na região controle. Esse indicador é utilizado como medida de efetividade da atenção primária, partindo do pressuposto de que um desempenho mais satisfatório desse nível de atenção poderia resultar em diminuição do risco de internação para um conjunto de agravos que inclui hipertensão e diabetes, importantes fatores de risco para o IAM.

A disponibilidade de leitos no Grande ABC foi maior em 2000 e 2010do que na Baixada Santista, mas ainda assim insuficiente para atender às demandas da população. A falta de leitos nos hospitais tende a agravar a articulação entre o atendimento hospitalar e o pré-hospitalar, revelando importantes desigualdades no acesso à assistência.

Ainda durante esse período, embora a taxa de leitos de internação do Sistema Único de Saúde por 1.000 habitantes tenha apresentado redução em ambas as regiões, o total de leitos de unidade de terapia intensiva adulto ou coronariana por 100.000 habitantes aumentou, assim como os valores do indicador taxa de angioplastia padronizada por sexo e idade por 100.000 habitantes com 20 anos ou mais, que reflete a disponibilidade de serviços de atendimento cardiológico nas regiões.

Para acompanhar melhor esse cenário, foi analisado o comportamento anual da taxa de angioplastia padronizada por sexo e idade por 100.000 habitantes com 20 anos ou mais, considerando o mesmo período de estudo. Tanto no Grande ABC quanto na Baixada Santista houve um importante aumento na taxa de cirurgias cardíacas entre os anos de 2001 e 2003, período anterior à implantação do Samu na região de intervenção. A partir de 2004, ocorre redução no volume de angioplastia, padrão que se mantém até 2007, quando passa a ocorrer incremento no valor ao longo dos anos subsequentes. No entanto, na Baixada Santista, volta a ocorrer tendência decrescente a partir de 2009.

Considerando na análise outras intervenções que possam ter sido introduzidas no mesmo período de estudo, vale a pena destacar aqui a implantação de unidades de pronto atendimento (UPA), que têm sido consideradas importantes no diagnóstico de urgências na atenção às doenças cardiovasculares, em especial ao infarto agudo do miocárdio, ao se constituírem em unidades intermediárias entre a atenção primária e as emergências hospitalares. No entanto, apesar de formulada em 2008, a sua implantação em larga escala no país ocorreu entre 2011 e 2016, período não contemplado neste estudo2828. Konder MT, O’Dwyer G. A integração das Unidades de Pronto Atendimento (UPA) com a rede assistencial no município do Rio de Janeiro, Brasil. Interface (Botucatu). 2016;20(59):879-92. https://doi.org/10.1590/1807-57622015.0519
https://doi.org/10.1590/1807-57622015.05...
.

Em relação à adoção da lei antifumo formulada em 2007, sua implementação de fato ocorreu no estado de São Paulo em 2009 com a Lei nº 13.541. Essa medida enfatizou a proibição do uso de cigarros e derivados em ambientes públicos e privados, exceto residências e locais de culto religioso e destinados ao consumo de produtos fumígenos, visando redução na mortalidade por doenças crônicas, com ênfase no câncer e na doença cardiovascular2929. SÃO PAULO. Lei 13.541, de 07 de maio de 2009. .

A maior força do estudo foi, além de usar o desenho quase experimental de séries temporais com grupo controle, controlar diferenças em ambos o nível e a tendência pré-existentes. No entanto, uma das limitações deste estudo é o baixo poder de generalização; portanto, suas conclusões só devem ser aplicadas a populações com um perfil semelhante. Resultados contraditórios podem ser parte das diferenças do contexto local. Além disso, é preciso considerar a conformação do Samu junto aos outros componentes da rede de urgência e emergência nos distintos territórios que compõem a região do Grande ABC. Nesse sentido, em estudos baseados em comunidade, o uso de desenho quase experimental irá frequentemente requisitar ambas as abordagens quantitativa e qualitativa para chegar a uma conclusão mais ampliada acerca dos efeitos da intervenção sob estudo2727. Shadish WR, Cook TD, Campbell DT. Experimental and quasi experimental designs for generalized causal inference, Boston, MA: Houghton Mifflin; 2002. , 2929. SÃO PAULO. Lei 13.541, de 07 de maio de 2009. , 3030. Abe TMO. Internação e mortalidade por doença cardiovascular e cerebrovascular no período anterior e posterior à lei antitabaco na cidade de São Paulo [tese]. São Paulo: Faculdade de Saúde Pública da Universidade de São Paulo; 2016. .

Por fim, o resultado pouco expressivo (embora estatisticamente significativo) na tendência pós-intervenção da taxa de mortalidade hospitalar por IAM na região do Grande ABC pode levar a uma interpretação de que o efeito foi de baixo impacto. Entretanto, no caso de estudos ecológicos, os efeitos ocorrem igualmente na população como um todo. Assim, são esperados achados de efeitos menores, sem que isso signifique baixo efeito real sobre o fenômeno estudado. Além disso, a intervenção estudada pode ser uma condição que por si só não implica efetividade, mas sem a qual essa mesma efetividade não estaria presente, integrando um conjunto de condições que, agregadas, geram um resultado positivo.

CONCLUSÃO

A complexidade da busca em estabelecer o efeito de uma dada intervenção reside no fato de que quase todos os fenômenos observados têm uma multiplicidade de causas. Nessa perspectiva, a proposta dos “experimentos quase naturais” por meio de condições traçadoras ou eventos marcadores tem sido uma prática recorrente, uma vez que é difícil, em muitas situações, isolar as causas e os efeitos dos fenômenos de interesse.

O presente estudo reforça a utilidade da abordagem quase experimental de séries interrompidas, tornando-se uma opção viável para análise de intervenção em políticas de saúde quando estudos randomizados não são factíveis. Os resultados sugerem que, embora a efetividade do Samu não possa ser considerada como adquirida, trata-se de uma estratégia cuja expansão precisa ser levada em conta na formulação e consolidação de políticas com foco nas urgências.

Referências bibliográficas

  • 1
    O’Dwyer G, Konder MT, Reciputti, LP, Macedo C, Lopes MGM, O processo de implantação do Serviço de Atendimento Móvel de Urgência no Brasil: estratégias de ação e dimensões estruturais. Cad Saude Publica. 2017;33(7):e00043716. https://doi.org/10.1590/0102-311x00043716
    » https://doi.org/10.1590/0102-311x00043716
  • 2
    Minayo MCS, Deslandes SF. Análise da implantação do sistema de atendimento pré-hospitalar móvel em cinco capitais brasileiras. Cad Saude Publica. 2008;24(8):1877-86. https://dx.doi.org/10.1590/S0102-311X200800080001
    » https://dx.doi.org/10.1590/S0102-311X200800080001
  • 3
    Machado CV, Salvador FGF, O’Dwyer G. Serviço de Atendimento Móvel de Urgência: análise da política brasileira, Rev Saude Publica. 2011;45(3):519-28. https://doi.org/10.1590/s0034-89102011005000022
    » https://doi.org/10.1590/s0034-89102011005000022
  • 4
    Geue C, Lewsey JD, MacKay DF, Antony G, Fischbacher CM, Muirie J, et al. Scottish Keep Well health check programme: an interrupted time series analysis, J Epidemiol Community Health. 2016;70(9):924-9. https://doi.org/10.1136/jech-2015-206926
    » https://doi.org/10.1136/jech-2015-206926
  • 5
    Artac M, Dalton ARH, Majeed A, Car J, Millett C. Effectiveness of a national cardiovascular disease risk assessment program (NHS Health Check): results after one year. Prev Med. 2013;57(2):129-34. https://doi.org/10.1016/j.ypmed.2013.05.002
    » https://doi.org/10.1016/j.ypmed.2013.05.002
  • 6
    Taljaard MT, McKenzie JE, Ramsay CR, Grimshaw JM. The use of segmented regression in analysing interrupted time series studies: an example in pre-hospital ambulance care. Implement Sci. 2014;9:77. https://doi.org/10.1186/1748-5908-9-77
    » https://doi.org/10.1186/1748-5908-9-77
  • 7
    Sawaya Neto M, Menezes Neto ASM. Avaliação do impacto do SAMU sobre indicadores de urgência: o caso das proporções de mortes hospitalares por infarto agudo do miocárdio em municípios de médio e grande porte. In: Resende GM, organizador. Avaliação de políticas públicas no Brasil: uma análise de seus impactos regionais. Brasília, DF: IPEA; 2014. v.2
  • 8
    Avezun A, Carvalho ACC, Mansur AP, Timerman A, Guimarães AC, Bozza AEZ, et al. III Diretriz sobre tratamento do infarto agudo do miocárdio. Arq Bras Cardiol. 2004;83 Supl 4:3-86. https://doi.org/10.1590/S0066-782X2004002200001
    » https://doi.org/10.1590/S0066-782X2004002200001
  • 9
    Brasileiro ALS. SAMU/192 e a abordagem pré-hospitalar do infarto agudo do miocárdio no Brasil: esperança para o paciente ou mais uma oportunidade perdida? Arq Bras Cardiol. 2007;88(2):e44-6. https://doi.org/10.1590/S0066-782X2007000200023
    » https://doi.org/10.1590/S0066-782X2007000200023
  • 10
    Penfold RB, Zhang F. Use of interrupted time series analysis in evaluating health care quality improvements. Acad Pediatr. 2013;13(6 Suppl):S38-44. https://doi.org/10.1016/j.acap.2013.08.002
    » https://doi.org/10.1016/j.acap.2013.08.002
  • 11
    Panagiotoglou D, Law MR, McGrail K. Effect of hospital closures on acute care outcomes in British Columbia, Canada: an interrupted time series study. Med Care. 2017;55(1):50-6. https://doi.org/10.1097/MLR.0000000000000619
    » https://doi.org/10.1097/MLR.0000000000000619
  • 12
    Wagner AK, Soumerai SB, Zhang F, Ross-Degnan D. Segmented regression analysis of interrupted time series studies in medication use research. J Clin Pharm Ther. 2002;27(4):299-309. https://doi.org/10.1046/j.1365-2710.2002.00430.x
    » https://doi.org/10.1046/j.1365-2710.2002.00430.x
  • 13
    Zhang F, Wagner AK, Ross-Degnan D. Simulation-based power calculation for design in interrupted time series analyses of health policy interventions. J Clin Epidemiol. 2011;64(11):1252-61. https://doi.org/10.1016/j.jclinepi.2011.02.007
    » https://doi.org/10.1016/j.jclinepi.2011.02.007
  • 14
    Antunes JLF, Cardoso MRA. Uso da análise de séries temporais em estudos epidemiológicos. Epidemiol Serv Saude. 2015;24(3):565-76. https://doi.org/10.5123/S1679-49742015000300024
    » https://doi.org/10.5123/S1679-49742015000300024
  • 15
    England E. How interrupted time series analysis can evaluate guideline implementation. Pharm J. 2005;275:344-7.
  • 16
    Lopez Bernal J, Cummins S, Gasparrini A. Interrupted time series regression for the evaluation of public health interventions: a tutorial. Int J Epidemiol. 2017;46(1):348-55. https://doi.org/10.1093/ije/dyw098
    » https://doi.org/10.1093/ije/dyw098
  • 17
    Linden A. Conducting interrupted time-series analysis for single- and multiple group comparisons. Stata J. 2015:480-500. https://doi.org/10.1177/1536867X1501500208
    » https://doi.org/10.1177/1536867X1501500208
  • 18
    Morettin PA, Toloi CM. Análise de séries temporais. São Paulo: Blucher; 2006.
  • 19
    Piegas LS, Timerman A, Feitosa GS, Nicolau JC, Mattos LAP, Andrade MD, et al. V Diretriz da Sociedade Brasileira de Cardiologia sobre Tratamento do Infarto Agudo do Miocárdio com Supradesnível do Segmento ST. Arq Bras Cardiol. 2015;105(2):1-105.
  • 20
    Luz CC, Junger WL, Cavalini LT. Análise da atenção pré-hospitalar ao acidente vascular cerebral e ao infarto agudo do miocárdio na população idosa de Minas Gerais. Rev Assoc Med Bras. 2010;56(4):452-7. https://doi.org/10.1590/S0104-42302010000400019
    » https://doi.org/10.1590/S0104-42302010000400019
  • 21
    Cabral APS, Souza WV. Serviço de Atendimento Móvel de Urgência (SAMU): análise da demanda e sua distribuição espacial em uma cidade do Nordeste brasileiro, Rev Bras Epidemiol. 2008;11(4):530-40. https://doi.org/10.1590/S1415-790X2008000400002
    » https://doi.org/10.1590/S1415-790X2008000400002
  • 22
    Perkins-Porras L, Whitehead PC, Steptoe A. Pre-hospital delay in patients with acute coronary syndrome: factors associated with patient decision time and home-to-hospital delay. Eur J Cardiovasc Nurs. 2009;8(1):26-33. https://doi.org/10.1016/j.ejcnurse.2008.05.001
    » https://doi.org/10.1016/j.ejcnurse.2008.05.001
  • 23
    Kurz MC, Schmicker RH, Leroux B, Nichol G, Aufderheide TP, Cheskes S, et al. Advanced vs. basic life support in the treatment of out-of-hospital cardiopulmonary arrest in the resuscitation outcomes consortium. Resuscitation. 2018;128:132-137
  • 24
    Scott JW, Nyinawankusi JD, Enumah S, Maine R, Uwitonze E, Hu Y, et al. Improving prehospital trauma care in Rwanda through continuous quality improvement: an interrupted time series analysis. Injury. 2017;48(7):1376-81. https://doi.org/10.1016/j.injury.2017.03.050
    » https://doi.org/10.1016/j.injury.2017.03.050
  • 25
    Aboueljinane L, Sahin E, Jemai Z, Marty J. A simulation study to improve the performance of an emergency medical service: application to the French Val-de-Marne department. Simul Model Pract Theory. 2014;47(1):46-59. https://doi.org/10.1016/j.simpat.2014.05.007
    » https://doi.org/10.1016/j.simpat.2014.05.007
  • 26
    Cardoso SS. Metodologia de avaliação da política nacional de atendimento às urgências para o estado do Rio de Janeiro [dissertação]. Niterói: Universidade Federal Fluminense; 2011.
  • 27
    Shadish WR, Cook TD, Campbell DT. Experimental and quasi experimental designs for generalized causal inference, Boston, MA: Houghton Mifflin; 2002.
  • 28
    Konder MT, O’Dwyer G. A integração das Unidades de Pronto Atendimento (UPA) com a rede assistencial no município do Rio de Janeiro, Brasil. Interface (Botucatu). 2016;20(59):879-92. https://doi.org/10.1590/1807-57622015.0519
    » https://doi.org/10.1590/1807-57622015.0519
  • 29
    SÃO PAULO. Lei 13.541, de 07 de maio de 2009.
  • 30
    Abe TMO. Internação e mortalidade por doença cardiovascular e cerebrovascular no período anterior e posterior à lei antitabaco na cidade de São Paulo [tese]. São Paulo: Faculdade de Saúde Pública da Universidade de São Paulo; 2016.
  • 31
    Togher FJ, Zowie D, Siriwardena, AN. Patients’ and ambulance service clinician’s experiences of prehospital care for acute myocardial infarction and stroke: a qualitative study. Emerg Med J. 2013;30(11):942-8. https://doi.org/10.1136/emermed-2012-201507
    » https://doi.org/10.1136/emermed-2012-201507

  • Financiamento: HMDN é destinatário de bolsa CNPq (Bolsa de Pesquisa nº 306536 / 2015–3) e CCMO é destinatário de bolsa CNPQ (Bolsa de Pesquisa nº 2015 / 02713–0). Ambas são pesquisadoras do IATS (Instituto Nacional de Ciência e Tecnologia para Avaliação de Tecnologias em Saúde).

Datas de Publicação

  • Publicação nesta coleção
    02 Dez 2019
  • Data do Fascículo
    2019

Histórico

  • Recebido
    17 Dez 2018
  • Aceito
    9 Fev 2019
Faculdade de Saúde Pública da Universidade de São Paulo São Paulo - SP - Brazil
E-mail: revsp@org.usp.br