Avaliar é preciso: precisão, validade e julgamento nos resultados avaliativos

Glauco Silva Aguiar

Resumo


A precisão é amplamente reconhecida como elemento central para a credibilidade e a utilidade das avaliações; contudo, sua articulação com a validade nem sempre é explorada de forma explícita. Este artigo analisa os fundamentos da precisão, seus limites metodológicos e epistemológicos e suas implicações para a validade dos resultados avaliativos. Com base no diálogo com autores clássicos, apresenta-se um exemplo aplicado: o Índice de Conformidade, concebido para compatibilizar julgamentos normativos provenientes da análise documental com evidências empíricas de um estudo com amostra reduzida. A análise evidencia que o Índice de Conformidade promove precisão, evita erros conceituais comuns, como o uso inadequado de médias em escalas ordinais, e reforça a validade argumentativa dos achados.


Palavras-chave


Avaliação; Precisão; Validade; Índice de Conformidade; Rigor Metodológico

Texto completo:

PDF

Referências


AGUIAR, G. S, Estudo Comparativo entre Brasil e Portugal, sobre diferenças nas ênfases curriculares de Matemática, a partir da análise do Funcionamento Diferencial do Item (DIF) do PISA 2003. Orientador: Francisco Creso Junqueira Franco Jr. 2008. 246 f. Tese (Doutorado em Educação) – Pontifícia Universidade Católica do Rio de Janeiro, 2008. Disponível em: https://www.ctc.puc-rio.br/teses-e-dissertacoes.

FITZPATRICK, J.; SANDERS, J.; WORTHEN, B. Program Evaluation: Alternative Approaches and Practical Guidelines. 3. ed. Boston: Pearson, 2004.

JOINT COMMITTEE ON STANDARDS FOR EDUCATIONAL EVALUATION. The program evaluation standards: a guide for evaluators and evaluations users. Los Angeles, CA: Sage, 2011.

LYNN, M. R. Determination and quantification of content validity. Nursing Research, v. 35, n. 6, p. 382–386, 1986.

PATTON, M. Q. Utilization-Focused Evaluation. 4. ed. Thousand Oaks: Sage, 2008.

POLIT, D.; BECK, C. The Content Validity Index: Are You Sure You Know What’s Being Reported?. Research in Nursing & Health, 2006.

SANTOS, D. C. A. P. G. A implementação da autoavaliação de cursos de graduação no Centro de Ciências Exatas e Tecnologia da Universidade Federal do Estado do Rio de Janeiro: um estudo avaliativo. Orientador: Glauco da Silva Aguiar. 2024. Dissertação (Mestrado Profissional em Avaliação) - Faculdade Cesgranrio, Fundação Cesgranrio, Rio de Janeiro, 2024. Disponível em: https://mestrado.cesgranrio.org.br/mestrado/principal.aspx.

SCRIVEN, M. Evaluation Thesaurus. 4. ed. Newbury Park: Sage, 1991.

SCRIVEN, M. Avaliação: um Guia de Conceitos. 1ª Ed. Rio de Janeiro/São Paulo: Paz e Terra, 2018.

WORTHEN, B. R.; SANDERS, J. R.; FITZPATRICK, J. L. Avaliação de programas: concepções e práticas. São Paulo: Ed. Gente, 2004.




DOI: http://dx.doi.org/10.22347/2175-2753v18i58.5500

Bookmark and Share


Direitos autorais 2026 Fundação Cesgranrio

Licença Creative Commons
Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.

Principios Norteadores para o Avaliador

Guiding Principles for Evaluators American Evaluation Association (AEA)

Com o proposito de guiar o trabalho dos profissionais de avaliação e assegurar a etica de sua atuacao, a American Evaluation Association (AEA) - Associacao Profissional de Avaliadores - estabeleceu cinco principios norteadores aqui resumidos:

1.  Indagacao Sistematica, no que se refere à capacidade de coletar dados utilizando tecnicas apropriadas e comunicando metodos e abordagens com a devida transparencia para permitir acesso e critica.

2.  Competencia, no que se refere a demonstrar atuacao competente perante os envolvidos no processo avaliativo e desenvolver continuamente sua capacidade para alcancar o mais alto nivel de desempenho possivel.

3.  Integridade/Honestidade, no que se refere a assegurar honestidade e integridade ao longo de todo o processo avaliativo, negociando com os envolvidos e interessados na avaliação e buscando esclarecer e orientar procedimentos que venham provocar distorcoes ou indevidas utilizacoes.

4.  Respeito pelas pessoas, no que se refere ao respeito pela seguranca, dignidade e auto-valorizacao dos envolvidos no processo avaliativo, atuando sempre com etica profissional, evitando riscos e prejuizos que possam afetar os participantes para assegurar, o melhor possivel, o respeito às diferencas e o direito social de retorno dos resultados, aos envolvidos.

5.  Responsabilidade pelo bem estar geral e público, no que se refere a levar em consideracao a diversidade de interesses e valores que possam estar relacionados ao público em geral,buscando responder nao somente às expectativas mais imediatas, mas tambem às implicacoes e repercussoes mais amplas e, nesse sentido, disseminar a informacao sempre que necessario.

Indexado em:

  1. Miguilim - Diretório das revistas científicas eletrônicas brasileiras

  2. DOAJ - Directory of Open Access Journals

  3. EBSCO - Information Services

  4. Edubase

  5. Google Scholar

  6. Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal

  7. LivRe! - Portal do CNEN - Comissão Nacional de Energia Nuclear do Ministério de Ciência, Tecnologia e Inovação

  8. OEI - Organizacion de Estados Iberoamericanos (Madri, Espanha, CREDI)

  9. RCAAP - Repositorio Cientifico de Acesso Aberto de Portugal

  10. REDIB - Red Iberoamericana de Innovación y Conocimiento Científico

  11. Scopus - A maior base de dados de abstracts e citacao de literatura revisada por pares:periodicos cientificos, livros e anais

 

Scimago

SJR : Scientific Journal Rankings

SCImago Journal & Country Rank
  
  

Meta: Aval., Rio de Janeiro, ISSN 2175-2753.