Desenho e construção de um instrumento de avaliação da competicao matematica: aplicabilidade pratica de um julgamento de especialistas

Ramon Garcia Perales

Resumo


Uma aproximação e feita para uma das etapas fundamentais no desenho e construção de qualquer instrumento de avaliação educacional, a avaliação feita por um grupo de especialistas no assunto para avaliar. A tabela de especificacoes e uma ferramenta ideal para desenvolver um julgamento especializado, o que facilita, entre outros objetivos, o calculo do indice de validade de conteúdo de cada um de seus elementos. Como exemplo, e explicado o processo desenvolvido para facilitar a construção de um instrumento que avalia a competencia matematica. Depois de ter um desenho inicial de 64 itens, 11 itens foram eliminados e varias estimativas qualitativas foram obtidas, o que permitiu uma melhoria significativa do instrumento, gracas à participação de 51 especialistas no campo da matematica. Para este instrumento, foi obtida uma alta validade de conteúdo, com a maioria dos indices calculados superiores a .80.


Palavras-chave


Instrumento de avaliação; Julgamento de especialistas; Tabela de especificacoes; Validade de conteúdo; Competencia matematica

Referências


BARDN, L. Anlisis de contenido. Madrid: Akal, 1986.

CABERO-ALMENARA, J.; LLORENTE-CEJUDO, M. C. La aplicacin del juicio de experto como tcnica de evaluacin de las tecnologas de la informacin (TIC). Eduweb: Revista de Tecnologa de Informacin y Comunicacin en Educacin, v. 7, n. 2, p. 1122, 2013. Disponvel em: . Acesso em: 9 dez. 2016.

CASTRO MORERA, M. Qu sabemos de la medida de las competencias? Caractersticas y problemas psicomtricos en la evaluacin de competencias. Bordn: Revista de Pedagoga, v. 63, n. 1, p. 109123, 2011.

ESCOBAR-PREZ, J.; CUERVO-MARTNEZ, A. Validez de contenido y juicio de expertos: una aproximacin a su utilizacin. Avances en Medicin, v. 6, n. 1, pginas 2736, 2008. Disponvel em: . Acesso em: 9 jan. 2017.

GABLE, R. K.; WOLF, M. B. Instrument development in the affective domain: Measuring attitudes and values in corporate and school settings. Boston: Kluwer Academic Publishers, 1993.

GARCA PERALES, R. Diseo y validacin de un instrumento de evaluacin de la competencia matemtica: rendimiento matemtico de los alumnos ms capaces. Tesis (Doctorado en Educacin). Facultad de Educacin UNED, Madrid, 2014. Disponvel em: . Acesso em 11 dez. 2017.

GRANT, J. S.; DAVIS, L. L. Selection and use of content experts for instrument development. Research in Nursing & Health, v. 20, n. 3, p. 269274, 1997. doi: https://doi.org/10.1002/(SICI)1098-240X(199706)20:3<269::AID-NUR9>3.0.CO;2-G

HYRKS, K.; APPELQVIST-SCHMIDLECHNER, K.; OKSA, L. Validating an instrument for clinical supervision using an expert panel. International Journal of Nursing Studies, v. 40, n. 6, p. 619625, 2003. doi: http://dx.doi.org/10.1016/S0020-7489(03)00036-1

INSTITUTO NACIONAL DE EVALUACIN EDUCATIVA (INEE). PISA 2003 Matemticas: Informe espaol. Madrid: Ministerio de Educacin, Cultura y Deporte, 2008.

INSTITUTO NACIONAL DE EVALUACIN EDUCATIVA (INEE). PISA 2012 Informe Espaol. Madrid: Ministerio de Educacin, Cultura y Deporte, 2013. v. I: Resultados y contexto.

JORNET MELI, J. M.; GONZLEZ SUCH, J. Evaluacin criterial: determinacin de estndares de interpretacin (EE) para pruebas de rendimiento educativo. Estudios sobre Educacin, n. 16, p. 103123, 2009. Disponvel em: . Acesso em: 14 jan. 2017.

JORNET MELI, J. M. et al. Diseo de procesos de evaluacin de competencias: consideraciones acerca de los estndares en el dominio de las competencias. Bordn: Revista de Pedagoga, v. 63, n. 1, p. 125145, 2011.

KERLINGER, F. N.; LEE, H. B. Investigacin del comportamiento: mtodos de investigacin en ciencias sociales. Ciudad de Mxico: McGraw-Hill, 2002.

LAWSHE, C. H. A quantitative approach to content validity. Personnel Psychology, v. 28, n. 4 p. 563575, 1975. doi: 10.1111/j.1744-6570.1975.tb01393.x

LYNN, M. R. Determination and quantification of content validity. Nursing Research, v. 35, n. 6, p. 382385, 1986.

MARTN ARRIBAS, M. C. Diseo y validacin de cuestionarios. Matronas Profesin, v. 5, n. 17, p. 2329, 2004. Disponvel em: . Acesso em: 4 jan. 2017.

MESA, V. M.; GMEZ, P.; CHEAH, U. H. Influence of international studies of student achievement on mathematics teaching and learning. In: CLEMENTS, M. A. K. et al. (Ed.). Third international handbook of mathematics education. Dordrecht: Kluwer, 2013. p. 861900.

ORGANIZATION FOR ECONOMIC COOPERATION AND DEVELOPMENT. The definition and selection of key competencies: Executive summary, 2005. Disponvel em: . Acesso em: 14 jan. 2017.

ORGANIZATION FOR ECONOMIC COOPERATION AND DEVELOPMENT. PISA 2015 Assessment and analytical framework: Science, reading, mathematic and financial literacy. Paris: OECD Publishing, 2016.

PLAZA MENENDEZ, P. Las competencias matematicas en el aprendizaje a lo largo de la vida. Suma, n. 72, paginas 915, 2013.

POLIT D. F.; HUNGLER B. P. Investigacion cientifica en Ciencias de la Salud: principios y metodos. Ciudad de Mexico: McGraw-Hill Interamericana, 2000.

SKJONG, R.; WENTWORTH, B. H. Expert Judgement and risk perception. In: INTERNATIONAL OFFSHORE AND POLAR ENGINEERING CONFERENCE STAVANGER, 2001. Anais, Norway: [s.n.], 2001.

VOUTILAINEN, P.; LIUKKONEN, A. Senior Monitor: laadun arviointi- mittarin sislln validiteetin mrittminen. Hoitotiede, v. 7, n. 1, p. 5156, 1995.




DOI: http://dx.doi.org/10.1590/s0104-40362018002601263

Apontamentos

  • Não há apontamentos.




Direitos autorais 2017 Revista Ensaio: Avaliação e Politicas Públicas em Educação

Licença Creative Commons
Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.

Apoio:


Programa de Apoio às Publicacoes Cientificas (AED) do Ministério da Ciência, Tecnologia e Inovação (MCTI), Conselho Nacional de Desenvolvimento Cientifico e tecnologico (CNPq), Ministerio da Educação (MEC), Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes)  

Revista chancelada pela Unesco. Revista parceira da Associação Brasileira de Avaliação Educacional (ABAVE)

SCImago Journal & Country Rank