Revista Meta: Avaliação

O estudo realiza uma comparação entre a qualidade dos ensinos presencial e à distância para cursos de Administração avaliados no Enade 2018. A meta-avaliação se dá pela análise do indicador Conceito Enade, em três níveis: Notas Padronizadas – FG e CE e Conceito Enade – contínuo. Através do software Minitab 19 são realizadas as análises estatísticas. Os resultados mostram uma relação muito forte entre as variáveis Nota Padronizada – CE e Conceito Enade – contínuo. Há predominância dos melhores resultados de desempenho dos alunos, na modalidade presencial, nas Regiões Sul e Sudeste, e dos piores resultados, nas Regiões Norte e Centro-Oeste. O teste de Tukey por ANOVA permitiu concluir que o desempenho dos estudantes de instituições públicas, na modalidade presencial, é maior que o dos estudantes na modalidade à distância. O estudo trouxe contribuições que agregam valor à tomada de decisão dos stakeholders, a partir da definição de um panorama da qualidade dos cursos de administração, evidenciando pontos fortes, fragilidades, mérito e valor.

ANDERSON, D. R.; SWEENEY, D. J.; WILLIAMS, T. A.; CAMM, J. D.; COCHRAN, J. J. Estatística aplicada a administração e economia. 5. ed. São Paulo: Cengage Learning, 2021.

BARROZO FILHO, J. L. Avaliação de políticas públicas voltadas à educação superior: o caso do programa universidade para todos (PROUNI). Orientador: Wagner Bandeira Andriola. 2019. 55 f. Dissertação (Mestrado em Políticas Públicas e Gestão da Educação Superior) - Programa de Pós-Graduação em Políticas Públicas e Gestão da Educação Superior, Universidade Federal do Ceará, Fortaleza, 2019. Disponível em: http://www.repositorio.ufc.br/handle/riufc/42633. Acesso em: 23 mar. 2021.

BRASIL. [Constituição (1988)]. Constituição da República Federativa do Brasil. Brasília, DF: Senado Federal, 2007.

BRASIL. Ministério da Educação. Inep divulga indicadores que avaliam cursos e instituições. Ministério da Educação, Brasília, DF, 12 dez. 2019. Disponível em: http://portal.mec.gov.br/ultimas-noticias/212-educacao-superior-1690610854/83581-inep-divulga-indicadores-que-avaliam-cursos-e-instituicoes. Acesso em: 12 dez. 2020.

BRASIL. Ministério da Educação. Secretaria de Educação Superior. Portaria nº 433, de 22 de outubro de 2020. Institui o Comitê de Orientação Estratégica – COE para a Elaboração de Iniciativas de Promoção à Expansão da Educação Superior por meio digital em Universidades Federais, no âmbito da Secretaria de Educação Superior, e dá outras providências. Diário Oficial da União, Brasília, DF, out. 2020a. Disponível em: https://www.in.gov.br/web/dou/-/portaria-n-433-de-22-de-outubro-de-2020-284699498. Acesso em: 12 dez. 2020.

BRASIL. Ministério da Educação. Secretaria de Educação Superior. Portaria n. 434, de 22 de outubro de 2020. Institui Grupo de Trabalho com a finalidade de subsidiar a discussão, a elaboração e a apresentação de estratégias para a ampliação da oferta dos cursos de nível superior, na modalidade de educação a distância – EaD, nas universidades federais. Diário Oficial da União, Brasília, DF, out. 2020b. Disponível em: https://www.in.gov.br/en/web/dou/-/portaria-n-434-de-22-de-outubro-de-2020-284699573. Acesso em: 12 dez. 2020.

DAVOK, D. F. Modelo de meta-avaliação de processos de avaliação da qualidade de cursos de graduação. Orientador: Jair dos Santos Lapa. 2006. 274 f. Tese (Doutorado em Engenharia de Produção) - Programa de Pós-Graduação em Engenharia de Produção, Universidade Federal de Santa Catarina, Florianópolis, 2006. Disponível em: https://repositorio.ufsc.br/bitstream/handle/123456789/88899/231045.pdf?sequence=1&isAllowed=y. Acesso em: 8 out. 2021.

ELLIOT, L. G. Meta-avaliação: das abordagens às possibilidades de aplicação. Ensaio: Avaliação e Políticas Públicas em Educação, Rio de Janeiro, v. 10, n. 73, p. 941-963, out./dez. 2011. DOI: 10.1590/S0104-40362011000500011. Disponível em: https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/419. Acesso em: 5 out. 2021.

GIL, A. C. Como elaborar projetos de pesquisa. 6. ed. São Paulo: Atlas, 2017.

GRAU, N. C.; OSPINA BOZZI, S. Fortalecimento dos sistemas de Monitoramento e Avaliação (M&A) na América Latina: informe comparativo de 12 países. Natal: SEARH/RN, 2008.

HAIR JUNIOR, J. F.; BLACK, W. C.; BABIN, B. J.; ANDERSON, R. E.; TATHAM, R. L. Análise multivariada de dados. 6. ed. Porto Alegre: Bookman, 2009.

HANUSHEK, E. A. The failure of input-based schooling policies. The Economic Journal, Oxford, v. 113, n. 485, p. 94-98, 2003. DOI: https://doi.org/10.1111/1468-0297.00099. Disponível em: http://www.jstor.org/stable/3590139. Acesso em: 19 ago. 2020.

INEP. Conceito Enade 2018: (atualizado em 19/12/2019). In: INEP. Indicadores de qualidade da educação superior. Brasília, DF: Inep, 2019. Disponível em: https://view.officeapps.live.com/op/view.aspx?src=https%3A%2F%2Fdownload.inep.gov.br%2Feducacao_superior%2Findicadores%2Flegislacao%2F2019%2Fresultados_conceito_enade_2018.xlsx&wdOrigin=BROWSELINK. Acesso em: 20 jul. 2020.

INEP. Nota técnica nº 18/2018/CGCQES/DAES. Diário Oficial da União, Brasília, DF, ago. 2018. Disponível em: http://download.inep.gov.br/educacao_superior/enade/notas_tecnicas/2017/nota_tecnica_n18_2018_cpc2017.pdf. Acesso em: 10 ago. 2020.

KUSEK, J. Z.; RIST, R. C. Ten steps to a results-based monitoring and evaluation system. Washington, DC: The World Bank, 2004. Disponível em: https://www.oecd.org/dac/peer-reviews/World%20bank%202004%2010_Steps_to_a_Results_Based_ME_System.pdf. Acesso em: 19 ago. 2020.

MARQUES, C. A.; VEIGA, A. de C.; BORGES, L. M. C. A avaliação da pós-graduação no Brasil: resultados e determinantes da avaliação da Capes (2013-2016). Meta: Avaliação, Rio de Janeiro, v. 12, n. 37, p. 979-1003, out./dez. 2020. DOI: http://dx.doi.org/10.22347/2175-2753v12i37.2825. Disponível em: https://revistas.cesgranrio.org.br/index.php/metaavaliacao/article/view/2825. Acesso em: 23 mar. 2021.

MOLCK, A. M. Exame nacional de desempenho dos estudantes: impactos nas IES e estratégias de aprimoramento institucional: um estudo a partir da produção científica brasileira (2004-2010). Orientador: Adolfo Ignacio Calderón. 2013. 156 f. Dissertação (Mestrado em Educação) - Programa de Pós-Graduação em Educação do Centro de Ciências Humanas, Pontifícia Universidade Católica de Campinas, Campinas, SP, 2013. Disponível em: http://repositorio.sis.puc-campinas.edu.br/handle/123456789/15472. Acesso em: 28 dez. 2020.

PATTON, M. Q. Reports on topic areas: the evaluator’s responsibility for utilization. American Journal of Evaluation, [S. l.], v. 9, n. 2, p. 5-24, 1988.

PINTO, R. S.; MELLO, S. P. T. de; MELO, P. A. Meta-avaliação: uma década do processo de avaliação institucional do SINAES. Avaliação, Campinas, SP; Sorocaba, SP, v. 21, n. 1, p. 89-107, 2016. DOI: http://dx.doi.org/10.1590/S1414-40772016000100005. Disponível em: https://www.scielo.br/j/aval/a/LLFgZ6jcNyRKmrxDLjnfHcG/?format=pdf〈=pt. Acesso em: 8 out. 2021.

RICHARDSON, R. J. Pesquisa social: métodos e técnicas. 3. ed. São Paulo: Atlas, 2009.

SCRIVEN, M. Key evaluation checklist. Kalamazoo, MI: The Evaluation Center, 2007.

SEIFFERT, O. M. L. B. Avaliação da qualidade da educação superior: entrelaçando evidências. InerMeio: Revista do Programa de Pós-Graduação em Educação, Campo Grande, MS, v. 24, n. 47, p. 99-121, jan./jun. 2018. Disponível em: https://periodicos.ufms.br/index.php/intm/article/view/5906/4363. Acesso em: 16 jun. 2021.

SOUSA, J. V.; SEIFFERT, O. M. L. B.; FERNANDES, I. R. Acesso e expansão de cursos de graduação de alta qualidade no Brasil: outros indicadores de qualidade para a educação superior. Educação em Revista, Belo Horizonte, v. 32, n. 4, p. 19-47, out./dez. 2016. DOI: http://dx.doi.org/10.1590/0102-4698161997. Disponível em: https://repositorio.unb.br/handle/10482/30149. Acesso em: 21 dez. 2020.

SOUZA, F. de J.; SOUZA, J. S.; ELLIOT, L. G.; HILDENBRAND, L. Avaliação da educação superior no Brasil: do provão ao ENADE: um estudo meta-avaliativo. Meta: Avaliação, Rio de Janeiro, edição especial, n. 2, p. 22-42, 2018. DOI: http://dx.doi.org/10.22347/2175-2753v10i0.1956. Disponível em: https://revistas.cesgranrio.org.br/index.php/metaavaliacao/article/view/1956. Acesso em: 28 dez. 2020.

SOUZA, G. B. P. de; LORETO, M. das D. S. de. Avaliação e monitoramento de políticas públicas: produção acadêmica em periódicos científicos brasileiros (2010 a 2020). Meta: Avaliação, Rio de Janeiro, v. 13, n. 40, p. 649-673, jul./set. 2021. DOI: http://dx.doi.org/10.22347/2175-2753v13i40.3478. Disponível em: https://revistas.cesgranrio.org.br/index.php/metaavaliacao/article/view/3478. Acesso em: 8 out. 2021.

STUFFLEBEAM, D. L. The metaevaluation imperative. American Journal of Evaluation, Thousand Oaks, v. 22, n. 2, p. 183-209, 2001. DOI: https://doi.org/10.1016/S1098-2140(01)00127-8. Disponível em: https://www.sciencedirect.com/science/article/abs/pii/S1098214001001278. Acesso em: 5 out. 2021.

TRIOLA, M. F. Introdução à estatística. 12. ed. Rio de Janeiro: LTC, 2022.

VERGARA, S. C. Projetos e relatórios de pesquisa em administração. 15. ed. São Paulo: Atlas, 2014.

VIEIRA, S. Análise de variância: ANOVA. São Paulo: Atlas, 2006.

WORDELL, E. H. Conceito cinco no ENADE em cursos de pedagogia: que referenciais estão em jogo?. Orientador: José Vieira de Sousa. 2012. 255 f. Dissertação (Mestrado em Educação) - Programa de Pós-Graduação em Educação, Universidade de Brasília, Brasília, DF, 2012. Disponível em: https://repositorio.unb.br/handle/10482/11412. Acesso em: 21 dez. 2020.

WORTHEN, B. R.; SANDERS, J. R.; FITZPATRICK, J. L. Avaliação de programas: concepções e práticas. São Paulo: Ed. Gente, 2004.

YARBROUGH, D. B.; SHULHA, L. M.; HOPSON, R. K.; CARUTHERS, F. A. The program evaluation standards: a guide for evaluators and evaluations users. Los Angeles, CA: Sage, 2011.