Prova São Paulo: pontos de tensão na avaliação externa em larga escala municipal
Resumo
O artigo insere-se nas discussões sobre os sistemas de avaliação externa em nível municipal, objetivou-se comparar os resultados das escolas municipais paulistas, na Prova São Paulo, avaliação externa em larga escala da própria rede, com os obtidos na Prova Brasil, nos anos 2007 a 2012. Através do estudo quantitativo comparativo das médias de proficiências dos estudantes dos 5º e 9º anos, em Português e Matemática, de 435 escolas verificou-se a disparidade entre os resultados na Prova São Paulo comparados com a Prova Brasil. Conclui-se que as avaliações externas em larga escala em nível local são instrumentos importantes para o estabelecimento de políticas públicas que, por um lado, necessitam de mecanismos de meta-avaliação, para não colocar em xeque o próprio instrumento. Por outro, faz-se necessário não atribuir a responsabilidade por tais resultados apenas às escolas e seus atores, deixando de lado o papel do Estado, enquanto responsável por uma educação pública de qualidade.
Texto completo:
PDFReferências
ALAVARSE, Ocimar Munhoz. Avaliar as avaliações em larga escala: desafios políticos. Revista Educação, São Paulo, 12 dez. 2013. Disponível em: http://www.revistaeducacao.com.br/avaliar-as-avaliacoes-em-larga-escala-desafios-politicos/. Acesso em: 25 de maio de 2017.
ALMEIDA, Júlio Gomes; NHOQUE, Janete Ribeiro. Avaliação externa: impactos em uma escola da rede municipal de São Paulo. In. Revista @mbienteeducação. 5(1), p. 83-91, jan/jun, 2012.
ALVES, Maria Teresa Gonzaga; SOARES, José Francisco. As pesquisas sobre o efeito das escolas: contribuições metodológicas para a sociologia da educação. Sociedade e Estado. v. 22, n.2, p. 435-473, 2007.
ALVES, Maria Teresa Gonzaga; SOARES, José Francisco. Contexto escolar e indicadores educacionais: condições desiguais para efetivação de uma política educacional. Educação e Pesquisa, v. 39, n. 1, p. 177-194, 2013.
BAUER, Adriana et. al. Avaliação em larga escala em municípios brasileiros: o que dizem os números?. Estudos em Avaliação Educacional, v. 26, n. 62, p. 326-352, 2015.
BAUER, Adriana. Do direito à educação à noção de quase-mercado: tensões na política de educação básica brasileira. RBPAE, v. 24, n.3, p. 557-575, set.-dez. 2008.
BEKMAN, Roberto M. Aplicação dos blocos incompletos balanceados na Teoria de Resposta ao Item. Estudos em avaliação educacional, n. 24, p. 119-136, 2001.
BORN, Bárbara Barbosa; CHAPPAZ, Raíssa de Oliveira. Currículo e avaliação externa na rede municipal de ensino de São Paulo: Reducionismo ou imbricações?. Roteiro, v. 39, n. 2, p. 371-390, 2014.
BONAMINO, Alicia C; SOUSA, Sandra Zákia. Três gerações de avaliação da educação básica no Brasil: interfaces com o currículo da/na escola. Educação e Pesquisa, v. 38, n. 2, p. 373-388, 2012.
CASASSUS, J. Uma nota crítica sobre a avaliação estandardizada: a perda de qualidade e a segmentação social. Sísifo/ Revista de Ciências da Educação, n. 9, maio/ago. 2009.
CHAPPAZ, Raíssa de Oliveira; BORN, Bárbara Barbosa. Influências na constituição do currículo oficial na rede municipal de ensino de São Paulo. Cadernos Cenpec, São Paulo, v. 3, n. 2, p. 187-208, 2013.
CHAPPAZ, Raíssa de Oliveira; ALAVARSE, Ocimar Munhoz. Avaliação externa na Rede Municipal de Ensino de São Paulo: os desafios da participação docente. Cadernos Cenpec| Nova série, v. 7, n. 2, 2018.
DARLING-HAMMOND, Linda; ASCHER, Carol. Construindo sistemas de controle em escolas urbanas. Estudos em Avaliação Educacional, São Paulo, n. 35, p. 7-48, set./dez. 2006.
FREITAS, Luiz Carlos et. al. Avaliação Educacional: caminhando na contramão. 2ª. Ed. Petrópolis: Editora Vozes, 2009.
FREITAS, Luiz Carlos. Responsabilização, meritocracia e privatização: conseguiremos escapar ao neotecnicismo? Texto apresentado no III Seminário de Educação Brasileira promovido pelo CEDES no Simpósio PNE: Diretrizes para avaliação e regulação da educação nacional, fev. 2011.
GATTI, Bernadete Angelina. Políticas de avaliação em larga escala e a questão da inovação educacional. Revista Série-Estudos, n. 33, p. 29-37, 2012.
GIMENES, Nelson et al. Além da Prova Brasil: investimento em sistemas próprios de avaliação externa. Estudos em Avaliação Educacional, v. 24, n. 55, 2013, p. 12-32.
HOLCOMBE, Rebecca; JENNINGS, Jennifer L.; KORETZ, Daniel. The roots of score inflation: An examination of opportunities in two states' tests. 2013. Disponível em: https://dash.harvard.edu/bitstream/handle/1/10880587/roots%20of%20score%20inflation.pdf?sequence=1. Acesso em: 15 de maio de 2017.
INEP. Relatório SAEB (ANEB e ANRESC) 2005-2015: panorama da década. Brasília: Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira, 2018, 154 p.
KLEIN, Ruben. Alguns aspectos da teoria de resposta ao item relativos à estimação das proficiências. Ensaio: Avaliação e Políticas Públicas em Educação, v. 21, n. 78, p. 35-56, 2013.
KORETZ, Daniel. Implications of current policy for educational measurement. In: Center for K–12 Assessment & Performance Management, Exploratory Seminar: Measurement Challenges within the Race to the Top Agenda, Princeton, NJ. 2010. Disponível em: http://www.ets.org/Media/Research/pdf/KoretzPresenterSession3.pdf. Acesso em: 12 de maio de 2017.
MACEDO, Letícia. Prefeitura de São Paulo cria novo critério para a avaliação da qualidade as escolas. In: O Globo São Paulo on-line, 27 de julho de 2011. Disponível em: http://g1.globo.com/sao-paulo/noticia/2011/07/prefeitura-de-sp-cria-novo-criterio-para-avaliacao-de-qualidade-das-escolas.html. Acesso: 20 mai. 2016.
MACHADO, Cristiane; FREITAS, Pâmela Félix. Gestão escolar e avaliação externa: Experiências de escolas da Rede Municipal de São Paulo. Revista Eletrônica de Educação, v. 8, n. 3, 2014, p. 113-126.
MACHADO, Cristiane; ALAVARSE, Ocimar Munhoz; OLIVEIRA, Adolfo Samuel. Avaliação da educação básica e qualidade do ensino: estudo sobre os anos finais do ensino fundamental da rede municipal de ensino de São Paulo. Revista Brasileira de Política e Administração da Educação, v. 31, n. 2, p. 335-353, mai/ago 2015.
MADAUS, G.; RUSSEL, M.; HIGGINS, J. The paradoxes of high stakes testing: how they affect students, their parents, teachers, principals, schools, and society. Charlotte, NC: Information Age Publishing, 2009.
O ESTADO DE SÃO PAULO (on line). A extinção da Prova São Paulo. 30 de abril de 2013. Disponível em: http://opiniao.estadao.com.br/noticias/geral,a-extincao-da-prova-sao-paulo-imp-,1026992 Acesso: 15 abr. 2015.
PASQUALI, Luiz. Psicometria: teoria dos testes na psicologia na educação. Petrópolis, Rio de Janeiro: Vozes, 2013.
PASQUALI, Luiz. Psychometrics. Revista da Escola de Enfermagem da USP, v. 43, n. SPE, p. 992-999, 2009.
PASQUALI, Luiz; PRIMI, Ricardo. Fundamentos da teoria da resposta ao item: TRI. Avaliação Psicológica, Porto Alegre, v. 2, n. 2, p. 99-110, , dez. 2003.
RAVITCH, Diane. Vida e morte do grande sistema escolar americano: como os testes padronizados e o modelo de mercado ameaçam a educação. Porto Alegre: Editora Sulina, 2011.
RODRIGUES, Margarida M. M. Proposta de análise de itens das provas do SAEB sob a perspectiva pedagógica e a psicométrica. Estudos em Avaliação Educacional, v. 17, n. 34, p. 43-78, maio/ago. 2006.
SÃO PAULO (Município). Educação no Munícipio de São Paulo: uma proposta para discussão. Diário Oficial da cidade de São Paulo de 24 de fevereiro de 2005a. Disponível em https://www.imprensaoficial.com.br/DO/BuscaDO2001Documento_11_4.aspx?link=/2005/suplemento/diario%2520oficial%2520cidade%2520de%2520sao%2520paulo/fevereiro/24/pag_0001_6E7A5PLQGVHBMeENCUQDIAQPJTK.pdf&pagina=1&data=24/02/2005&caderno=Suplemento%20-%20Di%C3%A1rio%20Oficial%20Cidade%20de%20S%C3%A3o%20Paulo&paginaordenacao=10001. Acesso em 23 de fevereiro de 2016.
SÃO PAULO (Município). Lei nº 14063, de 14 de outubro de 2005b. Institui o sistema de avaliação de aproveitamento escolar dos alunos da rede municipal de ensino de são Paulo, sob a responsabilidade da secretaria municipal de educação. Disponível em: . Acesso: 20 mai. 2015.
SÃO PAULO (Município). Decreto nº 47.683, de 14 de setembro de 2006. Regulamenta a Lei nº 14.063, de 14 de outubro de 2005, que institui o Sistema de Avaliação de Aproveitamento Escolar dos Alunos da Rede Municipal de Ensino de São Paulo, sob a responsabilidade da Secretaria Municipal de Educação. Disponível em: . Acesso: 11 mai. 2015.
SÃO PAULO (Município). Secretaria Municipal de Educação. Matrizes de referência para a avaliação do rendimento escolar. São Paulo: SME, 2007. 228p.
SÃO PAULO (Município). Secretaria Municipal de Educação. Matriz de referência para a avaliação do rendimento escolar no ensino fundamental – Ciências Naturais (versão preliminar). São Paulo: SME, 2011. 54p.
SAVIOLI, Márcia Regina. Das potencialidades de uma proposta curricular às fragilidades de um recurso didático: Caderno de apoio e aprendizagem (Língua Portuguesa). 219p. Tese (doutorado em Educação), Programa de Pós-Graduação, Pontifícia Universidade Católica de São Paulo. São Paulo, 2013.
SIQUEIRA, Valéria Aparecida de Souza. Avaliações externas e trabalho docente: o que dizem os registros de professores?. Cadernos Cenpec| Nova série, v. 7, n. 2, 2018.
SOARES, José Francisco; PEREIRA XAVIER, FLÁVIA. Pressupostos educacionais e estatísticos do Ideb. Educação & Sociedade, v. 34, n. 124, p. 903-923, jul/set. 2013.
SORDI, Mara Regina Lemes. Implicações ético-epistemológicas da negociação nos processos de avaliação institucional participativa. Educação & Sociedade, v. 33, n. 119, p. 485-510, 2012.
SOUSA, Sandra Zákia. Avaliação externa e em larga escala no âmbito do estado brasileiro: interface de experiências estaduais e municipais de avaliação da educação básica com iniciativas do governo federal. In. BAUER, A. e GATTI. B. Vinte e cinco anos de avaliação de sistemas educacionais no Brasil. Implicações nas redes de ensino, no currículo e na formação de processos. V. 2. Florianópolis: Insular, 2013, p. 61-86.
SUPOVITZ, Jonathan A. From multiple choice to multiple choices. Education Week Commentary, 1997. Disponível em: http://repository.upenn.edu/gse_pubs/280/. Acesso em: 10 de maio de 2017.
SUPOVITZ, Jonathan. Can high stakes testing leverage educational improvement? Prospects from the last decade of testing and accountability reform. Journal of Educational Change, v. 10, n. 2-3, p. 211-227, 2009. Disponível em: http://www.cpre.org/sites/default/files/journal/1151_2009canhighstakes.pdf. Acesso em: 11 de maio de 2017.
TAKAHASHI, Fábio. Haddad acaba com a prova de Kassab que avaliava escolas de São Paulo. In. Folha on-line. 14 de abril de 2013. Disponível em: http://www1.folha.uol.com.br/educacao/1261366-haddad-acaba-com-prova-de-kassab-que-avaliava-escolas-de-sao-paulo.shtml Acesso: 20 mai. 2016.
UNB; CESPE. Pesquisa & Avaliação: Revista da Escola: Prova São Paulo 2010. UNB/CESP Coordenadoria e Pesquisa em Avaliação, n. 3. Brasília, 2011, 116p.
VIANNA, Heraldo Marelim. Avaliações nacionais em larga escala: análises e propostas. Estudos em avaliação educacional, n. 27, p. 41-76, jan./jun. 2003.
DOI: http://dx.doi.org/10.22347/2175-2753v11i33.1892
Direitos autorais 2019 Fundação Cesgranrio

Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.
Principios Norteadores para o Avaliador
Guiding Principles for Evaluators American Evaluation Association (AEA)
Com o proposito de guiar o trabalho dos profissionais de avaliação e assegurar a etica de sua atuacao, a American Evaluation Association (AEA) - Associacao Profissional de Avaliadores - estabeleceu cinco principios norteadores aqui resumidos:
1. Indagacao Sistematica, no que se refere à capacidade de coletar dados utilizando tecnicas apropriadas e comunicando metodos e abordagens com a devida transparencia para permitir acesso e critica.
2. Competencia, no que se refere a demonstrar atuacao competente perante os envolvidos no processo avaliativo e desenvolver continuamente sua capacidade para alcancar o mais alto nivel de desempenho possivel.
3. Integridade/Honestidade, no que se refere a assegurar honestidade e integridade ao longo de todo o processo avaliativo, negociando com os envolvidos e interessados na avaliação e buscando esclarecer e orientar procedimentos que venham provocar distorcoes ou indevidas utilizacoes.
4. Respeito pelas pessoas, no que se refere ao respeito pela seguranca, dignidade e auto-valorizacao dos envolvidos no processo avaliativo, atuando sempre com etica profissional, evitando riscos e prejuizos que possam afetar os participantes para assegurar, o melhor possivel, o respeito às diferencas e o direito social de retorno dos resultados, aos envolvidos.
5. Responsabilidade pelo bem estar geral e público, no que se refere a levar em consideracao a diversidade de interesses e valores que possam estar relacionados ao público em geral,buscando responder nao somente às expectativas mais imediatas, mas tambem às implicacoes e repercussoes mais amplas e, nesse sentido, disseminar a informacao sempre que necessario.
Indexado em:
Miguilim - Diretório das revistas científicas eletrônicas brasileiras
DOAJ - Directory of Open Access Journals
EBSCO - Information Services
Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal
LivRe! - Portal do CNEN - Comissão Nacional de Energia Nuclear do Ministério de Ciência, Tecnologia e Inovação
OEI - Organizacion de Estados Iberoamericanos (Madri, Espanha, CREDI)
RCAAP - Repositorio Cientifico de Acesso Aberto de Portugal
REDIB - Red Iberoamericana de Innovación y Conocimiento Científico
Scopus - A maior base de dados de abstracts e citacao de literatura revisada por pares:periodicos cientificos, livros e anais
Scimago
SJR : Scientific Journal Rankings

Meta: Aval., Rio de Janeiro, ISSN 2175-2753.