Meta-avaliação no contexto da saúde: uma revisão de escopo

Erika Bomer Cagliari, Tania C.M.S.B. Rehem, Isabel Craveiro, Naira Pereira de Sousa Rocha

Resumo


A meta-avaliação, entendida como o processo de avaliar avaliações, descreve, julga e sintetiza funções e práticas avaliativas a partir de padrões e critérios previamente definidos. Este estudo mapeou, por meio de Scoping Review, as evidências científicas sobre o uso da meta-avaliação na área da saúde. Foram identificados 271 estudos em 16 bases de dados, dos quais 35 atenderam aos critérios de elegibilidade. Observou-se predominância de pesquisas realizadas no Brasil, com ênfase na avaliação de programas e projetos na Atenção Primária à Saúde. Os achados ressaltam a necessidade de ampliar o uso de padrões reconhecidos, adotar maior rigor metodológico e fomentar o engajamento efetivo das partes interessadas, visando fortalecer a utilidade e a aplicação da meta-avaliação em diferentes contextos.

Texto completo:

PDF

Referências


BAY JÚNIOR, O. G.; SILVA, C. R. S. V.; LOPES, R. H.; MARTINIANO, C. dos S.; FUENTEALBA-TORRES, M.; ARCÊNCIO, R. A.; UCHÔA, S. A. da C. Meta-evaluation in primary health care evaluative studies: a scoping review. Research Square, Carolina do Norte, 28 jan. 2022. Preprint. DOI: https://doi.org/10.21203/rs.3.rs-1282037/v1. Disponível em: https://www.researchsquare.com/article/rs-1282037/v1. Acesso em: 1 ago. 2023.

BRANDAU, R.; MONTEIRO, R.; BRAILE, D. M. Importância do uso correto dos descritores nos artigos científicos. Braz. J Cardiovasc Surg., São Paulo, v. 20, n. 1, jan. 2005. DOI: https://doi.org/10.1590/S0102-76382005000100004. Disponível em: https://www.scielo.br/j/rbccv/a/YjJ9Hw34dfDTJNcTKMFnKVC/?lang=pt. Acesso em: 1 ago. 2023.

CAGLIARI, E. B.; CRAVEIRO, I.; SANTOS, F. R. A.; REHEM, T. C. M. S. B. Meta-avaliação como descritor controlado: um passo fundamental para qualificar buscas e expandir os estudos na área da saúde. Physis: Revista de Saúde Coletiva, Rio de Janeiro, v. 34, 2024. DOI: https://doi.org/10.1590/S0103-7331202434085pt. Disponível em: https://www.scielo.br/j/physis/a/WFCPgzj486GLw9gMMmQNXVs/?format=html〈=pt. Acesso em: 1 ago. 2023.

DESCRITORES em Ciências da Saúde. Decs.bvsalud, [São Paulo], [2023]. Disponível em: http://decs.bvsalud.org. Acesso em: 1 ago. 2023.

FURTADO, J. P.; SILVA, L. M. V. Entre os campos científicos e burocráticos: a trajetória da avaliação no Brasil. In: AKERMAN, M.; FURTADO, J. P. (org.). Práticas de avaliação em Saúde no Brasil: diálogos. Porto Alegre: Rede Unida, 2015. p. 17-57. Disponível em: https://editora.redeunida.org.br/project/praticas-de-avaliacao-em-saude-no-brasil-dialogos-2/. Acesso em: 1 ago. 2023.

FURTADO, J. P. Por uma meta-avaliação sem metafísica. Revista Brasileira de Avaliação, [S. l.], v. 11, n. 2, 2022. DOI: https://doi.org/10.4322/rbaval202211020. Disponível em: https://rbaval.org.br/article/doi/10.4322/rbaval202211020. Acesso em: 1 ago. 2023.

HARTZ, Z. M. de A. Meta-avaliação da gestão em saúde: desafios para uma "nova saúde pública". Ciência & Saúde Coletiva, Rio de Janeiro, v. 17, n. 4, p. 832-834, abr. 2012. DOI: https://doi.org/10.1590/S1413-81232012000400004. Disponível em: https://www.scielo.br/j/csc/a/LvZZcQKRV8vbMmcsVnpRdYn/?lang=pt. Acesso em: 1 ago. 2023.

HARTZ, Z. M. de A.; REHEM, T. C. S. B.; CRAVEIRO, I. Meta-avaliação em tempos de pandemia: para que servem as intervenções da covid-19? In: SANTOS, A. de O.; LOPES, L. T. (org.). Principais elementos. Brasília: Conselho Nacional de Secretários de Saúde, 2021. p. 168-180. (Coleção Covid-19, v. 1). Disponível em: https://www.conass.org.br/biblioteca/volume-1-principais-elementos/. Acesso em: 1 ago. 2023.

HEDLER, H.; GIBRAM, N. G. The contribution of metaevaluation to program evaluation: proposition of a model. Journal of MultiDisciplinary Evaluation, Michigan, v. 6, n. 12, p. 210-23, 2009. DOI: https://doi.org/10.56645/jmde.v6i12.206. Disponível em: https://journals.sfu.ca/jmde/index.php/jmde_1/article/view/206. Acesso em: 1 ago. 2023.

MALTA, D. C.; SILVA, A. G. da; GUERREIRO, C. S.; HARTZ, Z. M. de A. O uso da meta-avaliação a partir de estudos publicados na literatura: o caso de programas de promoção de atividade física no Brasi. In: FELISBERTO, E. et al. (org.). Zulmira Hartz: inovação, humanidade e dinamismo na pesquisa, no ensino, na gestão e na avaliação em saúde. Brasilia, DF: Conselho nacional de Secretários de Saúde, 2021. p. 278-293. (LEIASS, v. 7).

OLIVEIRA, I. dos S. Meta-avaliação: aspectos conceituais e metodológicos. Teresina: IFPI, 2023. Disponível em: https://www.ifpi.edu.br/noticias/Metaavaliaoaspectosconceituaisemetodolgicos_versofinalizada.pdf. Acesso em: 1 ago. 2024.

RAMIREZ, R.; BRODHEAD, D. Utilization focused evaluation: a primer for evaluators. Penang: Southbound, 2013.

REHEM, T.; GUERREIRO, C.; CRAVEIRO, I. Meta-avaliação de experiências inovadoras em saúde: o exemplo do modelo de atenção às condições crônicas. FELISBERTO, E. et al. (org.). Zulmira Hartz: inovação, humanidade e dinamismo na pesquisa, no ensino, na gestão e na avaliação em saúde. Brasilia, DF: Conselho nacional de Secretários de Saúde, 2021. p. 316-339. (LEIASS, v. 7).

SANTOS, E. M. dos; OLIVEIRA, A. F. de; TOLEDO, P. P. da S.; OLIVEIRA, E. A. de; CARDOSO, G. C. P.; JANNUZZI, P. de M. Metaavaliação: quais padrões de qualidade, por quê, de quem e para quê? Revista Brasileira de Avaliação, [S. l.], v. 10, n. 2, 2021. DOI: https://doi.org/10.4322/rbaval202110017. Disponível em: https://rbaval.org.br/article/doi/10.4322/rbaval202110017. Acesso em: 1 ago. 2023.

SCRIVEN, M. An introduction to meta-evaluation. Educational Product Report, [S. l.], v. 2, n. 5, p. 36-38, 1969.

SCRIVEN, M. Evaluation thesaurus. 4. ed. California: Sage Publishing, 1991.

SCRIVEN, M. Meta-evaluation revisited. Journal of MultiDisciplinary Evaluation, Michigan, v. 6, n. 11, p. iii-viii, 2008. DOI: https://doi.org/10.56645/jmde.v6i11.220. Disponível em:

https://journals.sfu.ca/jmde/index.php/jmde_1/article/view/220. Acesso em: 1 ago. 2023.

SILVA, L. M. V. da; FURTADO, J. P. A avaliação de programas de saúde: continuidades e mudanças. Cadernos de Saúde Pública, Rio de Janeiro, v. 36, n. 9, 2020. DOI: https://doi.org/10.1590/0102-311X00237219. Disponível em: https://www.scielo.br/j/csp/a/c4H4TjsZS7YzjTjyYD5f5Ct/?format=html〈=pt. Acesso em: 1 ago. 2023.

SILVA, R. R.; JOPPERT, M. P.; GASPARINI, M. F. V. (org.). Diretrizes para a prática de avaliação no Brasil. Rio de Janeiro: Rede Brasileira de Monitoramento e Avaliação, 2020. Disponível em: https://rbma.site/wp-content/uploads/2021/02/Diretrizes-para-a-pratica-de-avaliacao-no-Brasil_20ago20.pdf. Acesso em: 1 ago. 2023.

STUFFLEBEAM, D. Evaluation models. New directions for evaluation, São Francisco, v. 2001, n. 89, p. 7-98, 2002. DOI: https://doi.org/10.1002/ev.3. Disponível em: https://onlinelibrary.wiley.com/doi/10.1002/ev.3. Acesso em: 1 ago. 2023.

STURGES, K. M.; HOWLEY, C. Responsive metaevaluation: a participatory approach to enhancing evaluation quality. American Journal of Evaluation, [S. l.], v. 38, n. 1, p. 126-137, 2017. DOI: https://doi.org/10.1177/1098214016630405. Disponível em: https://journals.sagepub.com/doi/10.1177/1098214016630405. Acesso em: 1 ago. 2023.

TRICCO, A. C. et al. PRISMA extension for scoping reviews (PRISMA-ScR): checklist and explanation. Annals of Internal Medicine, [S. l.], v. 169, n. 7, p. 467- 473, 2018. DOI: https://doi.org/10.7326/M18-0850. Disponível em: https://www.acpjournals.org/doi/10.7326/M18-0850. Acesso em: 1 ago. 2023.

YARBROUGH, D. B.; SHULHA, L. M.; HOPSON, R. K.; CARUTHERS, F. A. (JCSEE). The program evaluation standards: a guide for evaluators and evaluation users. 3. ed. Thousand Oaks, CA: Corwin Press, 2010.

PETERS, M. D. J.; GODFREY, C.; MCINERNEY, P.; MUNN, Z.; TRICCO, A. C.; KHALIL, H. Scoping reviews. In: AROMATARIS, E.; LOCKWOOD, C.; PORRITT, K.; PILLA, B.; JORDAN, Z. (ed.). JBI manual for evidence synthesis. Adelaide: JBI, 2024. Disponível em: https://synthesismanual.jbi.global. Acesso em: 1 ago. 2024.




DOI: http://dx.doi.org/10.22347/2175-2753v17i56.5006

Bookmark and Share


Direitos autorais 2025 Fundação Cesgranrio

Licença Creative Commons
Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.

Principios Norteadores para o Avaliador

Guiding Principles for Evaluators American Evaluation Association (AEA)

Com o proposito de guiar o trabalho dos profissionais de avaliação e assegurar a etica de sua atuacao, a American Evaluation Association (AEA) - Associacao Profissional de Avaliadores - estabeleceu cinco principios norteadores aqui resumidos:

1.  Indagacao Sistematica, no que se refere à capacidade de coletar dados utilizando tecnicas apropriadas e comunicando metodos e abordagens com a devida transparencia para permitir acesso e critica.

2.  Competencia, no que se refere a demonstrar atuacao competente perante os envolvidos no processo avaliativo e desenvolver continuamente sua capacidade para alcancar o mais alto nivel de desempenho possivel.

3.  Integridade/Honestidade, no que se refere a assegurar honestidade e integridade ao longo de todo o processo avaliativo, negociando com os envolvidos e interessados na avaliação e buscando esclarecer e orientar procedimentos que venham provocar distorcoes ou indevidas utilizacoes.

4.  Respeito pelas pessoas, no que se refere ao respeito pela seguranca, dignidade e auto-valorizacao dos envolvidos no processo avaliativo, atuando sempre com etica profissional, evitando riscos e prejuizos que possam afetar os participantes para assegurar, o melhor possivel, o respeito às diferencas e o direito social de retorno dos resultados, aos envolvidos.

5.  Responsabilidade pelo bem estar geral e público, no que se refere a levar em consideracao a diversidade de interesses e valores que possam estar relacionados ao público em geral,buscando responder nao somente às expectativas mais imediatas, mas tambem às implicacoes e repercussoes mais amplas e, nesse sentido, disseminar a informacao sempre que necessario.

Indexado em:

  1. Miguilim - Diretório das revistas científicas eletrônicas brasileiras

  2. DOAJ - Directory of Open Access Journals

  3. EBSCO - Information Services

  4. Edubase

  5. Google Scholar

  6. Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal

  7. LivRe! - Portal do CNEN - Comissão Nacional de Energia Nuclear do Ministério de Ciência, Tecnologia e Inovação

  8. OEI - Organizacion de Estados Iberoamericanos (Madri, Espanha, CREDI)

  9. RCAAP - Repositorio Cientifico de Acesso Aberto de Portugal

  10. REDIB - Red Iberoamericana de Innovación y Conocimiento Científico

  11. Scopus - A maior base de dados de abstracts e citacao de literatura revisada por pares:periodicos cientificos, livros e anais

 

Scimago

SJR : Scientific Journal Rankings

SCImago Journal & Country Rank
  
  

Meta: Aval., Rio de Janeiro, ISSN 2175-2753.