Contextualizando a influência das avaliações: um ensaio meta-avaliativo com ênfase na utilidade e responsabilidade

Translated title of the contribution: Context to the influence of evaluations:: an essay on meta-evaluation with usefulness and accountability enfasis

Deborah Carvalho Malta, Alanna Gomes da Silva, Catia Sá Guerreiro, Z Hartz

Research output: Contribution to journalArticle

Abstract

Objetivo: sistematizar a metodologia da meta-avaliação em seus aspetos conceituais e operacionais para facilitar o seu uso nas práticas de gestão em saúde.
Métodos: trata-se de um ensaio sobre a meta-avaliação. As bases teóricas foram pesquisadas em livros e artigos, publicados entre 1991 e 2018, que abordassem os aspetos conceituais, metodológicos e operacionais da meta-avaliação.
Resultados: a meta-avaliação consiste em um processo de delineamento, obtenção e aplicação da informação descritiva e de julgamento sobre a utilidade, a viabilidade, adequação e precisão de uma avaliação em sua natureza sistemática, fundamentada em padrões e critérios propostos e validados. Existem diversas formas ou abordagens para realização da meta-avaliação. No entanto, as normas comumente seguem as diretrizes da Joint Committee on Standards for Educational Evaluation, que propõe 30 padrões agrupadas em cinco princípios: utilidade, viabilidade, propriedade, acurácia/precisão e responsabilidade, sendo esses essenciais determinantes para qualidade de um estudo avaliativo.
Conclusão: a meta-avaliação contribui para o julgamento da qualidade dos processos avaliativos, na adequação e utilidade, podendo ser útil, em especial, quando se trata de temas e contextos que já foram avaliados previamente, e, por isso, também é descrita como “uma avaliação de uma avaliação”.


Objective: to systematize the meta-evaluation methodology in its conceptual and operational aspects to facilitate its use in health management practices.
Methods: this is an essay on meta-evaluation. The theoretical bases were searched in books and articles, published between 1991 and 2018, that approached the conceptual, methodological and operational aspects of the meta-evaluation.
Results: the meta-evaluation consists of a process of delineating, obtaining and applying descriptive information and judgment about the usefulness, feasibility, adequacy and precision of an evaluation in its systematic nature, based on standards and criteria proposed and validated. There are several ways or approaches to the meta-evaluation. However, the standards commonly follow the guidelines of the Joint Committee on Standards for Educational Evaluation, which proposes 30 standards grouped into five principles: utility, viability, ownership, accuracy/precision and accountability, being these essential and determinants for the quality of an evaluative study.
Conclusion: the meta-evaluation contributes to the judgment of the quality of the evaluation processes, in the adequacy and usefulness, and can be useful, especially when it comes to themes and contexts that have already been evaluated and therefore is also described as "an evaluation of an evaluation".
Original languagePortuguese
Pages (from-to)57-69
Number of pages13
JournalAnais do Instituto de Higiene e Medicina Tropical
Issue numbersupl. 1
DOIs
Publication statusPublished - 23 Sep 2019

Keywords

  • Meta-avaliação
  • Avaliação em saúde
  • Avaliação de programas e projetos de saúde
  • Gestão em saúde
  • Melhoria de qualidade
  • Meta-evaluation
  • Health evaluation
  • Program evaluation
  • Health management
  • Quality improvement

Fingerprint Dive into the research topics of 'Context to the influence of evaluations: an essay on meta-evaluation with usefulness and accountability enfasis'. Together they form a unique fingerprint.

  • Cite this