Revista Meta: Avaliação

A Revista Meta: Avaliação apresenta, em seu número 32, volume 11, 10 artigos selecionados por força de sua qualidade, o que pode ser traduzido pelo uso de diferentes abordagens avaliativas, garantindo o atendimento à perspectiva multidisciplinar do periódico.

Os dois primeiros artigos se ocupam de questões avaliativas relacionadas ao Ensino Básico. Os três artigos que se seguem voltam-se para problemas de avaliação no Ensino Superior. O sexto e sétimo artigos relatam estudos sobre avalições conduzidas na área da saúde. O oitavo e nono tratam, respectivamente, de uma comparação entre a avaliação cognitiva de policiais militares e universitários, e uma meta-avaliação de uma avaliação de desempenho conduzida em uma instituição pública. O décimo artigo aborda a questão da avaliação do acesso à informação em tribunais de contas dos estados brasileiros.

Tristan, la Jara e Perez analisam, no artigo El Doble Peso del Contexto: efectos directos e indirectos del nivel socioeconómico y capital cultural en la adquisición de aprendizajes básicos en México, se os efeitos diretos e indiretos do contexto, particularmente o nível socioeconômico e o capital cultural, interferem nos ganhos de aprendizagem, de alunos do ensino básico da cidade de Puebla, México.

No artigo dois, Concepções Avaliativas na Construção de Portfólios, Mena e Bierhalz, discutem a concepção avaliativa que orientou a construção de portfólios e suas contribuições para os processos de ensino e aprendizagem. Buscaram, também, reunir informações mais recorrentes sobre o processo de construção desse instrumento, a fim de divulgar suas possibilidades e limitações no âmbito educacional.

No terceiro texto, de autoria de Kreutz, Vieira e Costa, Avaliação Institucional: análise da participação e percepção dos discentes de uma IES, os autores buscaram traçar o panorama da participação dos discentes do curso de Engenharia de Produção em um processo de avaliação institucional. Eles obtiveram evidências de que esses discentes obtiveram os menores índices de participação, comparativamente às demais engenharias.

Dallabona, Kreutzfeld, Fernandes e Oliveira, autores do quarto artigo, Conhecimentos, Habilidade e Atitudes: percepção de discentes e docentes no processo de ensino-aprendizagem, se propuseram a analisar, em uma amostra de 182 discentes e 23 docentes, a percepção de discentes e docentes do curso de Ciências Contábeis de uma instituição de ensino superior pública sobre conhecimentos, habilidades e atitudes no processo de ensino-aprendizagem. Os dados foram trabalhados por meio da técnica de consenso.

Os autores do quinto texto, Bolzan, Fernandes e Antunes, Concepções Avaliativas no Ensino Superior de Administração, realizaram um estudo que teve por objetivo discutir as percepções de estudantes e de professores do ensino superior de Administração sobre o processo de avaliação das aprendizagens. Foi utilizada a técnica de grupo focal com estudantes brasileiros e portugueses, tendo os achados sido tratados por meio da técnica de Análise do Discurso.

No sexto artigo, Programa Mais Médicos: análise lógica à luz da modelagem de políticas públicas, os autores Macedo, Ferreira, Campos e Rodrigues realizaram uma análise desse Programa, procurando verificar a adequabilidade dos objetivos propostos com os meios implementados para atingi-los a partir dos pressupostos da literatura de análise de políticas públicas. As atividades do PMM foram agrupadas em três eixos de ação: provimento emergencial, educação e infraestrutura. Para cada um desses eixos mapeou-se os resultados alcançados, as possibilidades de aperfeiçoamento, bem como as áreas de possíveis ajustes na implementação.

Ainda na área da saúde, no sétimo trabalho, Dispositivos de Saúde Mental e Políticas Públicas: proposta de um instrumento para avaliar a implementação dos Centros de Atenção Psicossocial, Soares e Queiroga realizaram um mapeamento das leis e diretrizes que orientam a implementação dos Centros de Atenção Psicossocial e conduziram uma análise documental dos prontuários destes serviços.  Com esses dados foram realizados dois grupos focais. Os resultados advindos da aplicação dos instrumentos desenvolvidos para avaliação dos Centros de Atenção Psicossocial possibilitaram a produção de evidências de validade bem como uma análise geral sobre esses dispositivos.

Rabelo e Mazariolli no artigo número oito, Avaliação Cognitiva de Policiais Militares e Universitários em Medidas Padronizadas de Memória, Atenção e Inteligência, investigaram métodos de mensuração de atenção, memória e inteligência com 105 policiais militares e 113 universitários, com o objetivo de verificar diferenças no desempenho desses dois grupos amostrais e diferenças entre pelotões distintos de policiais. Os autores se valeram de testes estatísticos Test T, ANOVA e de correlações e estudos de precisão. Entre os resultados encontrados, os autores verificaram que, na inteligência geral, memória de curto prazo, atenção concentrada e dividida, o grupo de policiais apresentou resultados mais elevados que os universitários.

No nono trabalho, Avaliação de Desempenho Individual da Comissão Nacional de Energia Nuclear: um estudo meta-avaliativo, Bezerra, Orlando Filho, Gomes, Zouain realizaram uma meta-avaliação somativa com o objetivo de avaliar a avaliação do desempenho individual de servidores realizada na Comissão Nacional de Energia Nuclear. Para tanto, elaboraram um quadro de critérios avaliativos baseado nas categorias Joint Committee on Standards for Educational Evaluation, usaram a abordagem voltada para a administração e aplicaram um questionário a 215 servidores.

Finalmente, no último artigo, redigido em inglês por Raupp, Online Platforms of the Audit Courts of Brazilian States: an assessment of access to information, foi realizada uma avaliação do acesso às informações contidas em plataformas online dos tribunais de contas dos estados brasileiros. O autor usou uma abordagem predominantemente qualitativa no estudo documental desenvolvido. Na coleta de dados se valeu de um protocolo de observação. Os resultados foram submetidos a uma análise descritiva. O modelo de avaliação da plataforma foi baseado em informações retiradas da literatura.

Buscando atender a sua perspectiva multidisciplinar, a Revista Meta: Avaliação, em seu número 31, volume 11, traz 10 artigos que contemplam a questão da avaliação sob diferentes aspectos. Os seis primeiros possuem como questão central a avaliação educacional contextualizadas em diferentes temas. Em seguida, já na área da saúde, é apresentado um trabalho sobre a validação de um instrumento para avaliar a aceitabilidade de um Programa de Homeopatia. Os três últimos artigos abordam: uma avaliação de impacto relacionada à Política Nacional de Museus; um estudo sobre os dados abertos, disponibilizados à sociedade pela Previdência Social; e, por fim, um artigo que se propõe em avaliar o impacto da concessão de rodovias do Distrito Federal em relação a ocorrência de acidentes de trânsito.

O primeiro artigo, de Navarro, Reyes e Vera – Validade e Justiça: por uma avaliação significativa em provas estandardizadas de escritura – discute a proposta de um novo teste de avaliação da escrita desenvolvido para obter informações sobre o desempenho escrito, no início do Ensino Superior no Chile. Incluindo atividades de escrita cidadã com fins acadêmicos, avaliam os textos por meio de uma rubrica holística centrada alcance de objetivos. Os resultados mostraram que houve um alto nível de interesse dos estudantes e uma distribuição normal dos desempenhos.

Borges e Rothen, autores do segundo texto - Avaliação Educacional Brasileira na Década de 1980: o campo entre duas abordagens – trazem como contribuição uma pesquisa documental que analisa a configuração do campo científico da avaliação educacional no Brasil na década de 1980, identificando os agentes que o constituíram e suas contribuições teóricas. Esses autores identificaram 19 pesquisadores brasileiros que se destacaram no campo da avaliação, discutindo duas abordagens: uma que se fundamenta na mensuração dos resultados e outra que defende prioritariamente a participação nos processos avaliativos.

O terceiro texto, de autoria de Moraes, Menezes e Dias - Uma Análise Contextualizada dos Resultados das Escolas Públicas Brasileiras – teve por objetivo analisar o ‘efeito escola’ das escolas públicas brasileiras. Nesta direção, realizaram uma análise contextualizada dos resultados das escolas, com vistas a determinar em que condições alcançaram tais resultados. Ficou evidente que a eficiência média das escolas não se atrela unicamente ao nível sócio educacional dos alunos. 

Eficiência na Provisão Educacional no Rio Grande do Sul: uma análise municipal em três estágios, é o quarto artigo, sendo de autoria de Franca Frio e Caruso. Esses autores tiveram como propósito mensurar a eficiência na gestão municipal de educação em municípios gaúchos, utilizando dados da FINBRA (Finanças do Brasil), do Censo Escolar, do Atlas do Desenvolvimento Humano e da Prova Brasil. Entre os resultados obtidos destaca-se que os resultados mostram a presença de uma pequena quantidade de munícipios considerados eficientes ou ineficientes, porém, a maioria foi considerada tendo níveis medianos de eficiência.

O quinto artigo, de Dutra, Coelho e Dutra - Indicadores Educacionais e Proficiência no ENEM: um estudo nos institutos federais do Brasil, buscou investigar o impacto diferenciador de contextos, insumos e processos presentes nas estruturas educacionais individualizadas de Institutos Federais de Educação, Ciência e Tecnologia do Brasil sobre o desempenho educacional de seus discentes. Os autores obtiveram indícios de que insumos e processos afetam o desempenho, porém, com baixo poder explanatório. Assim, rejeitaram a hipótese de que o desempenho educacional desses alunos é afetado pela especificidade de insumos, processos e contextos existentes nessas instituições.

Paixão, Rabelo e Bruni, autores do sexto artigo - Avaliação do Docente pelo Discente no Âmbito do Ensino Técnico Integrado: Evidências de Validade da Escala SIR-II - tiveram como objetivo fazer a tradução, retrotradução, revisão por especialista e pré-testagem da segunda versão da escala Student Instructional Report (SIR-II) da organização Educational Testing Service (ETS), na parte em que trata da avaliação do docente. Para tanto usaram uma amostra composta por 5.622 casos criados por estudantes de cursos técnicos de nível médio. O modelo usado demonstrou ajustamento quanto à unidimensionalidade, confiabilidade e convergência, apresentando evidências de validade da escala em sua versão brasileira

Coelho, Oliveira e Reis abordaram, no sétimo artigo, a Avaliação da Aceitabilidade de um Programa de Homeopatia sob a Ótica dos Usuários: construção e validação de instrumento. Para tanto, construíram e validaram um instrumento para avaliar a aceitabilidade de um Programa de Homeopatia, sob a ótica do usuário. Passando por todas as etapas necessárias à construção e validação de instrumentos de medida, as autoras admitem que este poderá contribuir para a obtenção de informações sobre as expectativas, percepções de desempenho e preferências dos usuários nos serviços de saúde oferecidos, favorecendo a qualidade do cuidado prestado.

Avaliação de Impacto do Edital Mais Museus na Criação de Novos Museus em Pequenos Municípios Brasileiros: uma análise a partir do método de diferenças em diferenças é o oitavo artigo, redigido por Maravalhas e Silva Júnior, que buscou analisar o impacto deste edital na criação de museus no território brasileiro. Com base no método comparativo entre diferenças e semelhanças, os autores encontraram evidências que apontam para a insuficiências desta política. Eles afirmam que as iniciativas de criação de museus em municípios parecem estar mais relacionadas a fatores exógenos às políticas de indução, tais como população municipal, nível de desenvolvimento do município, atividades turísticas e contextos regionais.

Oliveira e Orlando Filho, autores do nono artigo - Avaliação dos Dados Abertos da Previdência Social, trazem como contribuição uma avaliação dos dados abertos disponibilizados pela Previdência Social, no Portal dados.gov.br. O objetivo deste Portal é garantir ao cidadão atendimento de qualidade, pois ao dispor de meios de acessá-las se garante uma das principais características de um Estado Democrático. Os autores criaram um questionário com 70 perguntas com a finalidade de prover respostas às questões avaliativas. O instrumento foi validado por três especialistas em Avaliação e, logo após, reformulado e submetido a 23 especialistas de diversas áreas. Entre os resultados obtidos, salienta-se o julgamento em relação ao grau de Transparência dos Dados Abertos, que apurou um resultado parcialmente satisfatório, indicando a necessidade de sanar deficiências, tanto nos conjuntos de dados, quanto no Portal.

Encerram este número Oliveira et al. abordando a Avaliação de Impacto das Concessões na Redução de Acidentes, Feridos e Mortos em Rodovias Federais do Distrito Federal e Entorno, que teve por objetivo avaliar o impacto que a concessão de rodovias federais trouxe na redução de acidentes de trânsito de rodovias federais e entorno do Distrito Federal. Entre os resultados do estudo está o fato de que houve redução de acidentes, mas não foi possível afirmar que tenha havido redução do número de feridos e mortos em decorrência de acidentes de trânsito nas rodovias federais concedidas.

Procurando contribuir para o aprofundamento de conhecimentos relacionados aos estudos da avalição multidisciplinar, avaliadores e pesquisadores encontram nos trabalhos apresentados neste número da Revista Meta: avaliação, assuntos relevantes nos campos de conhecimento da educação, saúde, museologia, tecnologia da informação e gestão pública de rodovias. Os artigos foram construídos utilizando diferentes abordagens ou metodologias e, certamente, se constituem em excelentes fontes de consulta para seus leitores. Aproveitem!

A Revista Meta: Avaliação, em seu volume 10, número 30, é integrada por vários artigos que abordam a questão da avaliação sob diferentes aspectos, tendo todos como referência o Ensino Superior. Nela, discute-se a importância da avaliação para dar maior visibilidade à produção científica. Dois artigos tratam da avaliação na formação de professores. Outros três falam da aplicação de instrumentos em processos de avaliação. Um outro discute a aplicação do currículo por competência no ensino naval e sua relação com provas padronizadas. No oitavo artigo foi abordada a necessidade da autoavaliação no subsistema de ensino superior de Angola e, finalmente, foi feito um relato de experiência sobre a criação e aplicação de uma dinâmica avaliativa envolvendo alunos de uma instituição de ensnino superior, localizada na região sul do país.

O primeiro artigo, de autoria de Pinho e Diogo, tem como referência estudos recentes sobre monitorização e avaliação de impacto, realizados em dois centros de investigação vinculados a universidades de Portugal, para discutir ferramentas e estratégias usadas neste domínio. Os autores admitem a necessidade de melhorar a visibilidade da investigação, para aumentar o seu impacto, seja em nível acadêmico como a nível societal.

Saiz-Linares e Susinos-Rada analisam, no segundo artigo, o papel da avaliação formativa e da retroalimentação como elementos favorecedores de processos reflexivos desenvolvidos no contexto de uma proposta de practicum para futuros professores de magistério infantil e primário. Tal proposta se faz em acordo com o novo paradigma formativo adotado pelo Espaço Europeu de Educação Superior, que privilegia o desenvolvimento da competência reflexiva nos estudantes desses cursos.

Zanrosso, Costa e Kinast assinam o artigo de número três, que abordou a qualificação didático-pedagógica de professores engenheiros a partir de um aporte teórico. Foi realizado um diagnóstico da qualificação de docentes dos cursos de engenharia química das Instituições de Ensino Superior do Rio Grande do Sul, considerando informações contidas em seus currículos Lattes. Variáveis como gênero, titulação e natureza da instituição foram cruzadas estatisticamente com a qualificação docente. Esses dados foram correlacionados com outros, a saber: o desempenho dos alunos obtido no Exame Nacional de Desempenho de Estudantes, o ENADE, e o crescimento médio do número de formandos.

O quarto artigo, de Kruchelski, Moraes e Lang, traz como contribuição uma revisão da literatura integrativa que buscou compreender como os mapas conceituais são usados na avaliação dos professores, potencializando a aprendizagem significativa. Nesta direção, apresentam os mapas conceituais como uma eficiente ferramenta para melhorar os processos de aprendizagem e de avaliação.

No quinto artigo, que teve por objetivo adaptar e revalidar a Escala Engajamento Discente de Burch et al. (2015) para o contexto brasileiro, Carneiro, Orsini e Costa, desenvolveram procedimentos de tradução e adaptação dos itens da escala que, complementados por questões sociais e demográficas, deram origem ao questionário utilizado na pesquisa.A adaptação e revalidação resultaram em uma métrica final consistente, válida para sua utilização em estudos quantitativos que envolvam o construto no Brasil.

Rodriguez-Sabiote, Alvarez-Rodríguez e Gámez-Durán, autores do sexto artigo, expõem um conjunto de limitações metodológicas relacionadas às rubricas e à proposta de soluções viáveis para superá-las. Admitem que os vieses derivados dos usos de coeficientes de correlação e confiabilidade no uso da confiabilidade intra e inter–observador e na validade de conteúdo podem ser substituídos por coeficientes de concordância.

No sétimo artigo, Aguiar,  Mendonça e Dopcke, tendo a concepção de currículo por competência como suporte teórico, abordam a experiência do Curso de Formação de Marinheiros na Marinha do Brasil. Discutem, também, os perfis profissionais necessários ao exercício dessa profissão. Relatam como foi desenvolvido, nas quatro Escolas de Aprendizes de Marinheiros, um calendário unificado de atividades e como foi realizada uma sistemática que possibilitou avaliar, por meio de provas padronizadas, as competências dellineadas no currículo

Padron, Spinola e Hernandez, autores do oitavo artigo, discutem a necessidade, expressa em documentos normativos do subsistema de educação angolano, de adotar a autoavaliação contextualizada, dinâmica e participativa, considerando as condições históricas concretas do país. Apresentaram um modelo teórico-funcional de autoavaliação institucional, para ser implementado na melhoria da qualidade das instituições politécnicas de educação superior em Angola. Os autores buscaram evidenciar a validade teórica e prática deste modelo.

Por último, Cardenas apresenta um relato de experiência conduzido na disciplina Gestão da Inovação em um curso de graduação de uma instituição de ensino superior pública, localizada na região sul do país. Neste relato é desenvolvida uma avaliação alternativa, na forma de atividade peagógica, em que os alunos, agrupados em duplas, construíram perguntas de uma prova teórica e respondem às perguntas feitas por outros alunos. Eles avaliam as respostas às suas perguntas, sendo também avaliados pelas perguntas construídas pelos outros alunos. Foram vivenciados todos os passos da criação e aplicação de uma dinâmica avaliativa.

Desse modo, avaliadores e pesquisadores encontram, nos artigos apresentados, diversas contribuições ao Ensino Superior que podem servir de referência tanto na ampliação de conhecimento específico, quanto na utilização de abordagens ou metodologias, e ainda de instrumentos replicáveis naquele nível de ensino. Não deixem de ler!

A Edição Especial nº 2 da revista eletrônica Meta: Avaliação apresenta como temática Meta-avaliações: exercícios de aplicação. São artigos gerados no Programa de Mestrado Profissional em Avaliação, da Faculdade Cesgranrio, e escritos por mestrandos orientados por docentes, como trabalho final da disciplina obrigatória Meta-Avaliação.

Vale lembrar que a disciplina trata de metodologias específicas para conduzir não só avaliações, mas avaliar projetos de avaliação concluídos, ou seja, realizar meta-avaliações. São avaliações que transcendem a própria avaliação, ao julgar-lhe a qualidade.

No caso da revista, o título se refere à finalidade (meta) que é a área da avaliação. A revista intenciona não apenas veicular trabalhos e estudos dessa área, mas também os trabalhos dos mestrandos do Programa de Mestrado que se responsabiliza pelo periódico. Assim, estamos publicando a segunda Edição Especial que congrega 11 artigos, sendo 10 produzidos no âmbito da disciplina Meta-Avaliação e o último, um Trabalho de Conclusão de Curso de graduanda do Curso Tecnológico Gestão em Avaliação, da primeira turma formada pela Faculdade Cesgranrio, que, por sua qualidade, mereceu ser publicado.

Há uma variedade de áreas, projetos e programas meta-avaliados de acordo com os padrões do Joint Committee on Standards for Educational Evaluation (YARBROUGH et al., 2011), ou com os indicadores da Lista de Verificação de Scriven (2007), ou os critérios organizados por Davidson (2005), e as dimensões e respectivas diretrizes para avaliação para a América Latina e Caribe (RODRIGUEZ BILELLA et al., 2016).

Fica o convite para os leitores interessados e estudiosos da avaliação conhecerem relatórios variados de avaliações empreendidas no campo da educação, da saúde, econômico, empresarial, institucional, social, tendo sido meta-avaliadas por diversos referenciais metodológicos. Essa é mais uma etapa de construção do infindável mosaico da avaliação.

Boa leitura!

O volume 10 da Revista Meta: Avaliacao, em seu número 29, e composto pelo relato de estudos, pesquisas e reflexoes sobre avaliacao ou na area da avaliacao. Foram varias as preocupacoes de seus autores, traduzidas por questoes iniciais, que nortearao a leitura dos interessados.

Os tres primeiros artigos circulam na area de avaliacao escolar. Os tres seguintes se situam na esfera do ensino superior, enquanto os dois posteriores o fazem em relacao à pos-graduacao e à avaliacao da Capes. Os dois últimos tratam da gestao pública e empresarial, respectivamente.

Quais as especificidades do trabalho realizado pela melhor escola pública municipal do Estado do Ceara e que respondem por um dos melhores Indices de Desenvolvimento da Educacao Basica obtidos em 2015, via avaliacao nacional externa? Situada entre as cinco melhores escolas do pais, o estudo revela que tanto o curriculo praticado na escola como o ensino possuem aderencia aos resultados das avaliacoes externas. No entanto, a aprendizagem dos alunos aglutina outros fatores que se encontram associados aos resultados obtidos. Para saber mais, o leitor deve consultar o estudo de Silva e Brasil.

Quais as associacoes entre alunos considerados em risco por seu nivel de compreensao na leitura e fatores relacionados às suas familias e contextos de vida? Do estudo de Vaz e Martins, participaram 82 alunos portugueses e os resultados revelam quais os fatores de risco mais destacados e que podem servir de indicadores para acoes de aperfeicoamento das praticas voltadas para a melhoria da aprendizagem dos alunos.

Qual o contexto atual e complexo no qual a avaliacao da aprendizagem escolar se situa? O estudo de Pinho, Vidal e Silva, parte de uma questao norteadora que busca respostas na perspectiva epistemologica da complexidade, ao considerar as dimensoes multifacetadas existentes em cada ser singular e em seu relacionamento com os outros.

O que se “ensina” no Ensino Superior? Este e o titulo do artigo de Dias et al., ao se voltar para a avaliacao de conhecimentos, competencias, valores e atitudes em instituicoes de ensino superior nas areas de Engenharia Civil, Engenharia Eletrotecnica e Engenharia Mecânica, conforme consta dos perfis de competencias tracados para esses cursos, no pais. A relacao entre o desenvolvimento cognitivo dos discentes e o desenvolvimento emocional e atitudinal faz parte dos resultados do estudo.

Como atender à necessidade de se ter e aplicar um instrumento de avaliacao de qualidade para aulas praticas laboratoriais da area da saúde? O processo de construcao e validacao deste instrumento e apresentado por Bastos, Boller e Prado e tem como foco ser “um instrumento de construcao do aprendizado, envolvendo as competencias profissionais” dos estudantes, ao mesmo tempo em que, para os docentes, torna-se o “instrumento de registro [...] do conhecimento, habilidades e atitudes dos estudantes, realizacao de feedbacks e acompanhamento dos fatores de aulas praticas laboratoriais.”

Qual a relacao entre o desempenho academico com as caracteristicas que podem ser observadas e as experiencias estudantis dos discentes de uma Graduacao em Contabilidade? O estudo de Meurer et al. verifica essa relacao em uma instituicao de ensino superior pública no Sul do Brasil, aplicando a tecnica de regressao múltipla aos dados coletados. Os resultados indicam possibilidades de aperfeicoamento das praticas de ensino voltadas para o desempenho academico.

Quem avalia o sistema de controle academico de uma universidade para os Programas de Pos-Graduacao? Na Universidade de Santa Catarina, o estudo de Machado, Jacobsen e Risssi procedeu a essa finalidade, em busca de aspectos positivos e dos que carecem de aperfeicoamento, apos caracterizar as funcionalidades do sistema de controle academico existente.

Quais os dados que permitem conhecer a última Avaliacao Quadrienal da Capes dos Programas da area Interdisciplinar em Engenharia, Tecnologia e Gestao? Quais os criterios aplicados na avaliacao desses Programas? Este foi o foco do estudo de Gualhano, Salles e Hora, utilizando as tecnicas de mineracao de dados que permitiram conhecer os criterios de maior relevância, e de maior impacto na avaliacao.

Quais os melhores e piores portais de gestao pública municipal no Brasil? Ao avaliar a transparencia da gestao pública em portais de 304 municipios brasileiros, o estudo de Cardoso et al. encontra e divulga os tres portais de melhor e os tres de pior desempenho. Alem disso, o estudo indica os fatores relacionados à funcionalidade dos portais que podem colaborar na melhoria da transparencia, beneficiando a sociedade.

Quais seriam as condicoes impulsionadoras ou nao associadas à gestao de custos relativos à organizacao de empresas de servicos e seu relacionamento com clientes? Inserida no tema gestao de custos interorganizacionais, o estudo de Horn, Bonfatti e Raupp avaliou as circunstâncias favoraveis ou inibidoras dessa pratica gestora, dentro de uma empresa de servicos na area de arquitetura. A identificacao de fatores condicionantes revela aspectos levantados pela literatura consultada.

Os artigos divulgados pelo número 28 da Revista Meta: Avaliacao percorrem varias areas do conhecimento como prerrogativa da propria avaliacao. A educacao e contemplada no nivel medio e superior, no campo da aprendizagem, em diferentes materias curriculares, no estudo da eficiencia de politicas públicas. A estatistica se faz presente pelo emprego de tecnicas e analises que servem de referencia a outros estudos. A area da saúde e abordada em experiencias especificas, em varios municipios. O relato de experiencia de professores e mestrandos em avaliacao mostram possibilidades de exploracao de artigos na area da avaliacao.

Mendes, Nascimento e Costa-Lobo buscaram os efeitos de um Programa de Apoio Curricular entre Pares que contemplou a auto eficacia, a atividade e o rendimento escolar de alunos de Portugues e Matematica, do 3º ano do Ensino Basico em Portugal. Os resultados trazem interessantes desdobramentos do estudo. 

Com a preocupacao de conhecer como a avaliacao e conceptualmente compreendida por professores de Biologia, Oliveira, Valle e Avelar afirmam que e necessario explorar as concepcoes de avaliacao dos professores de modo que as praticas considerem os alunos em sua individualidade. 

O artigo de Caporal, Prado, Bini e Boller, de uma instituicao de ensino superior do oeste do Parana, traz importantes elementos da avaliacao de questoes dissertativas aplicadas a academicos de medicina. Com a utilizacao de rubricas, o processo de correcao das questoes revelou-se mais preciso e com maior transparencia, atributos indispensaveis na avaliacao. 

Na esfera da gestao universitaria, as Comissoes Proprias de Avaliacao desempenham importante papel na avaliacao das instituicoes de ensino superior no pais. As conclusoes dos autores, Costa, El Hajj e Araújo, sinalizam que as Comissoes das instituicoes incluidas no estudo sao consistentes com as normas do Ministerio da Educacao e cumprem o que a legislacao recomenda sobre a auto avaliacao das universidades.

Um estudo comparativo sobre a eficiencia de politicas públicas para financiar a educacao superior no Brasil, Canada e China foi desenvolvido por Costa e Barbosa, focalizando um periodo de 10 anos. Os autores analisaram 15 politicas públicas utilizando um indice composto de crescimento anual que considera tanto o investimento feito como o número de estudantes atendidos. Os resultados trazem exemplos de politicas possiveis de serem replicadas. 

Cordeiro, Melo e Fernandes, ao analisarem a utilizacao da tecnica estatistica ANOVA em artigos publicados de 2002 e 2016, encontraram, em 40% dos artigos, descricoes da tecnica sem o detalhamento apresentado pelos demais. A falta de detalhamento impossibilita a replicacao das analises, advertem os autores.

Metello Filho e Chaves avaliaram a acessibilidade aos servicos de saúde bucal das equipes de Saúde da Familia na zona urbana do municipio de Jauru, em Mato Grosso, a partir das concepcoes de acessibilidade organizacional e geografica. Os resultados indicaram que a organizacao dos processos de trabalho das equipes precisava ser melhorada, assim como a politica visando ao adequado atendimento dos usuarios.

Tambem na area da saúde, Medeiros e Marcolino analisaram a eficiencia dos municipios do Rio de Janeiro de forma a indicar os recursos que precisam ser incrementados. Para medir a eficiencia, os autores fizeram uso da Analise Envoltoria de Dados e para tratar dos recursos, utilizaram regressao logistica. 

Um curso de formacao profissional, a distância, de Prevencao dos Problemas Relacionados ao Uso de Drogas – Capacitacao para Conselheiros e Liderancas Comunitarias, ja em sua 6a edicao, passou por um processo de auto avaliacao, descrito por Durli, Archer, Gomes e Cruz. Os autores, ao revelarem o que chamaram de percurso teorico-metodologico do processo de auto avaliacao, esperam que outros cursos possam por ele ser orientados. 

A experiencia desenvolvida no Mestrado Profissional em Avaliacao, da Faculdade Cesgranrio, por discentes e docentes na disciplina Pratica de Avaliacao, teve origem no projeto de pesquisa O estado da Arte da Avaliacao. Reuniu, assim, atividades de investigacao e de avaliacao que deram origem a um trabalho colaborativo e de autoria compartilhada.

O número de dezembro de 2017 da Revista Meta: Avaliação contem interessantes artigos sobre a area da educação no nivel de pós-graduação e de ensino medio, e ainda as areas social, da saúde e da Psicologia. Mantem, assim, uma característica diversificada de temas que se valem da avaliacao e reveste a publicação com a interdisciplinaridade que marca a avaliacao.

Tomando por base a recomendacao da CAPES em relação à composição do corpo docente de programas de pós-graduação de natureza interdisciplinar, Viggiani, Calabro e Souza analisam programas da Universidade Federal do Rio Grande do Sul, na area de Ensino, e revelam as diferenças encontradas, por meio da produção de orientadores que atuam em mais de um programa.

Ao considerar a avaliacao da producao academica em cursos de pos-graduacao como um dos criterios importantes para o desenvolvimento de politicas de fomento pelo Ministerio da Educacao, Reis, Constant e Soares de Mello, da Universidade Federal Fluminense, aplicam modelo DEA e indice h, especificos para efetivar o estudo, propondo uma nova metodologia para esta avaliacao.

Passando ao nivel de pos-graduacao lato sensu em instituicao de ensino superior em Santa Catarina, Gambirage, Bohn, Hein, Silva e Domingues buscaram identificar quais os elementos que se associam à satisfacao de estudantes dos cursos oferecidos, e que podem sinalizar, aos gestores, aprovacao ou mudancas.

No nivel medio de ensino, Feldhues abordou a literacia historica como criterio para orientar o ensino da materia Historia e, por conseguinte, ser possivelmente integrado às questoes formuladas para o ENEM, que avaliariam o possivel desenvolvimento da consciencia historica dos participantes.

Da Zambezia, Africa, o proximo artigo, de Deixa, Diniz, Chicote e Finiasse procura avaliar as concepcoes de professores secundarios sobre as Avaliacoes Provinciais de Matematica, circulando em diferentes contextos de ensino e regioes daquele pais.

Na area de projetos sociais, Monteiro, Silva e Elliot aplicaram diretrizes voltadas a America Latina e Caribe para meta-avaliar um projeto desenvolvido em Portugal. Alem de indicarem o merito e impacto do projeto, ficou evidente a aplicabilidade, em contexto europeu, das diretrizes dirigidas a paises latino americanos e caribenhos.

Na area da saúde, Silva utiliza dados da Pesquisa Nacional de Saúde, de 2013, voltando-se para avaliar fatores que afetaram a demanda e o acesso à saúde, por parte da populacao, tema relevante e sempre em pauta por tratar de politica pública na referida area.

Hartmann Junior e Medeiros, na area da Psicologia Positiva, trazem como colaboracao escalas utilizadas para a avaliacao da resiliencia, uma necessidade para obter-se resultados confiaveis que e atendida por bons instrumentos avaliativos.

O que abrange o número 26 da Revista Meta: Avaliação, ao compor mais um setor do mosaico da avaliacao? Uma serie de interessantes artigos e relatos de estudos incorporam essa parte do mosaico.

Nas areas da educacao e avaliacao, os tres primeiros artigos abordam desde a avaliacao do rendimento academico de discentes do ensino superior em Contabilidade de Custos e Controladoria, passando pela avaliacao dos docentes em relacao à Gestao por Competencias, e chegando à avaliacao institucional na Educacao a distância.

Rocha Neto e Leal, apoiados na Teoria da Assimilacao, de Ausubel, aplicaram testes estatisticos a uma amostra de alunos cursando Ciencias Contabeis, buscando diferencas significativas no rendimento academico em quatro disciplinas do curso. Os resultados permitem afirmar que “os conceitos generalistas sao resultados de assimilacoes de experiencias de cada individuo, o que pode interferir no processo de ancoragem de novos aprendizados.”

Gallon, Taufer, Just, Batistella e Ruas realizaram estudo que mostra a preocupacao com a melhoria do desempenho de docentes, de modo a atender a requisitos da avaliacao, por parte de orgaos oficiais. Trata-se da implantacao da gestao por competencias em uma instituicao de ensino superior particular que, na opiniao dos participantes, embora com algumas ressalvas, colaborou tanto para qualificar praticas de gestao de pessoas, quanto para melhorar os resultados obtidos pela instituicao.

Ao focalizar a avaliacao institucional na Educacao a distância em uma Universidade Federal, Carvalho pretendeu contribuir com um processo automatizado que agilizasse o processo de tabulacao e avaliacao dos dados para a tomada de decisoes. Os resultados obtidos foram positivos em relacao à solucao de problemas que emergiram no processo de avaliacao institucional.

Ainda em educacao, mas numa visao macro da avaliacao, ha dois artigos. Um aborda a relacao entre investimento financeiro e indicadores educacionais no Brasil, integrando a area econômica à da educacao. Simielli e Zoghbi se utilizaram de cinco variaveis de resultado, entre elas proficiencia em matematica e leitura, taxa de reprovacao e abandono, e Ideb, alem de duas de interesse - gasto por aluno e receita per capita. Os resultados mostram onde os indicadores apresentaram impacto estatisticamente significativo.

O outro estudo, de Rubio, sobre a avaliacao externa para certificacao no sistema educacional espanhol, suscita uma discussao sobre as (des)vantagens da avaliacao, que nao chega a melhorar a qualidade do sistema educacional. Por se referir a um sistema europeu, merece leitura cuidadosa e, possivelmente, comparativa com o brasileiro.

Ao analisar artigos provenientes da base de dados e-Aval, disponivel no site do Mestrado Profissional em Avaliacao da Cesgranrio, Vilarinho, Leite, Ribeiro e Pimentel focalizam o uso do portfolio como componente das praticas avaliativas docentes, passivel de trazer reflexao, aprendizagem mais autônoma e acoes inovadoras no processo de ensino e aprendizagem.

Nos dois últimos artigos, a avaliacao se integra a areas diferentes: a de desportos e a legislativa. No artigo de Reis, Torres e Soares de Mello, a avaliacao visita os Jogos Olimpicos de 2016 e desta feita, a area dos desportos se reúne à estatistica no calculo de conceito especifico identificador das chamadas Potencias Olimpicas. Por sua simplicidade, o conceito utilizado pode ser rapidamente entendido e facilmente calculado.

A avaliacao alcanca tambem as Assembleias Legislativas Brasileiras para trazer ao leitor uma avaliacao dos portais eletrônicos que devem, alem de possibilitar o acesso à uma informacao clara e precisa, colocar a capacidade de transparencia fiscal à disposicao do cidadao. Este e um assunto atual, de amplo interesse da populacao.

Em abril de 2017, a Revista Meta: Avaliação contempla, por meio de sete artigos, diferentes estudos avaliativos que se voltam para objetos situados no campo da educacao, dos programas sociais, da saúde e tecnologia. Sao artigos de autores brasileiros, portugueses, espanhois, evidenciando o alcance do periodico no meio academico nacional e internacional.

Na area da educacao, Figueiredo, Leite e Fernandes focalizam a avaliacao externa de escolas em dois paises europeus – Portugal e Inglaterra – concluindo que, embora os processos de avaliacao sejam claros, abrangentes e formativos em suas concepcoes, a concretizacao desses processos ainda esta distante do que seria desejavel.

No Brasil, com a utilizacao da Analise Envoltoria de Dados, Ferreira, Salgado Junior, Novi, Chiaretti e Miura identificam praticas pedagogicas e de gestao que possam ter uma parcela de contribuicao na composicao do Indice de Desenvolvimento da Educacao Basica, o IDEB, de escolas municipais paulistas. Este e um estudo que pode servir de referencia a acoes de melhoria do desempenho de outras escolas.

Em Portugal, Calha apresenta interessante estudo sobre o uso de portfolios como instrumento de avaliacao da aprendizagem, nos processos de reconhecimento, validacao e certificacao de competencias escolares, com enfase na narrativa autobiografica de adultos.

Tambem focalizando a avaliacao de competencias de estudantes de Pedagogia, Casillas Martin, Cabezas Gonzalez e Serrate Gonzalez trazem a analise de casos provenientes de praticas externas realizadas pelos estudantes da Universidade de Salamanca na Espanha.

Na area social, Dugand e Brandao fazem uso da Teoria da Mudanca para proceder à meta-avaliacao do Programa de Acoes Estruturantes nas Comunidades Remanescentes de Quilombos, um tema tao interessante quanto a metodologia adotada.

Na area da saúde, o Indice de Desempenho do Sistema Unico de Saúde e abordado por Macedo e Theophilo, para analisar os indices de eficacia e eficiencia em saúde pública em municipios mineiros.

A tecnologia a servico da gestao em instituicao de saúde e avaliada pelos usuarios em estudo de Almeida e Elliot, especificamente focalizando uma ferramenta de Business Inteligence que mostrou trazer ganhos de operacionalidade, retorno financeiro, qualidade dos servicos prestados e vantagens competitivas.

O número 24 da Revista Meta: Avaliação ressalta, novamente, a caracteristica multidisciplinar da avaliacao. Os sete artigos que compoem esta edicao tratam de temas que vao da area da educacao, variando do ensino fundamental ao ensino superior, passando pela area da gestao e planejamento, indo para o campo de instrumentos de avaliacao, na educacao e na saúde.

O primeiro artigo, de autoria de Ferreira, analisa o plano decenal de educacao para o periodo 2014-2024, no qual se identifica a valorizacao das avaliacoes oficiais “como instrumentos de afericao da qualidade da educacao”. Assim, as estrategias do Plano Nacional de Educacao que contemplam a avaliacao sao analisadas, com enfase em programas e documentos legais que as amparam.

O artigo seguinte, de Lima, Fonseca Júnior e Oliveira, apresenta um estudo voltado para a determinacao da eficiencia do ensino fundamental e de seus condicionantes, nos municipios de Goias. Para isso, se vale da tecnica de analise envoltoria de dados e da analise de regressao beta inflacionada, obtendo interessantes resultados.

Focalizando o ensino superior, o artigo de Raasch e Silveira-Martins, e o de Sales Junior, Brasil, Carneiro e Corassa mostram, respectivamente, a preocupacao com a procrastinacao e o desempenho academico, e com os fatores associados ao fenômeno da evasao que se observa em ascendencia. Enquanto o primeiro pode gerar a reflexao sobre acoes academicas para os discentes que atendam às necessidades da sociedade, o segundo artigo revela que ha fatores antecedentes associados à evasao que precisam ser considerados. O modelo de integracao de estudantes, de Tinto, embasou a discussao desses resultados.

O quinto artigo, de Andriola e Araújo, aborda, com pertinencia, importantes indicadores de gestao propostos pelo Tribunal de Contas da Uniao. Sao indicadores que tem a funcao de ajudar os gestores na atividade de planejamento estrategico, que por sua vez resultam da atividade de avaliacao institucional.

O sexto artigo e uma colaboracao de Elisa Lisi, Docente da Universidade Nacional de Educacao à Distância, da Espanha. Ao tratar do portfolio como instrumento de avaliacao de competencias de estudantes Europeus, a autora amplia as possibilidades de utilizacao dessa ferramenta, introduzida no processo de tomada de decisao e fortalecendo dessa forma a autonomia dos estudantes.

Ainda na tematica de instrumentos de avaliacao, o setimo artigo, de Santos e Oliveira, na area da saúde, se dedica a relatar o processo de obtencao de equivalencia semântica de uma ferramenta de Analise de Riscos e Vulnerabilidade, usada em uma instituicao hospitalar. As etapas da metodologia utilizada sao descritas em detalhe, de modo que o leitor possa entende-la e adota-la em ocasiao similar. 

O número 23 da Revista Meta: Avaliação e composto por seis artigos de autores filiados a instituicoes nacionais e dois de autores atuando em instituicoes de ensino superior estrangeiras. Sao artigos relacionados ao desenvolvimento da cultura avaliativa, em diferentes contextos.

O primeiro artigo, de Cruz, Taveira e Souza, focalizou a Avaliacao Nacional da Alfabetizacao, especificamente as contribuicoes voltadas para a avaliacao da aprendizagem no Ciclo de Alfabetizacao, privilegiando a educacao basica em seus primeiros anos escolares.

Os dois artigos seguintes se detiveram no contexto de instituicoes do ensino superior. Um, de Lima e Melo relata a “avaliacao das acoes do Programa Nacional de Assistencia Estudantil, na percepcao de estudantes de baixa condicao socioeconômica, matriculados uma universidade pública federal localizada em Belo Horizonte”, enquanto o de Bernardes e Rothen teve por “objetivo identificar quais sao os conceitos que fundamentam as pesquisas referentes à Comissao Propria de Avaliacao”, em que se destaca “a preocupacao com a politica pública de avaliacao a respeito da forma como o Estado faz apropriacao da avaliacao regulatoria para determinar indicadores de qualidade do ensino a ser ofertado nas instituicoes de ensino superior”.

 O quarto artigo, de Carvalho, se volta para o processo avaliativo que se desenrola em torno do Projeto Escola, desenvolvido por uma OSCIP denominada Comunidade Educativa Centro de Educacao e Documentacao para Acao Comunitaria. Traz como resultante a construcao de uma matriz avaliativa de projeto, passivel de utilizacao por outros interessados.

Com um toque de contemporaneidade, o quinto artigo, de autoria de Marinho, Almeida e Cardoso, trata da “Avaliacao da Eficiencia Tecnica dos Paises nos Jogos Olimpicos de Londres/2012”. O estudo precede os recentes Jogos sediados no Rio de Janeiro e oferece uma forma antecipada de ranking dos resultados.

O sexto artigo traz a colaboracao de Martinez-Mediano e Diaz, de Espanha, que relatam o julgamento de um Sistema de Gestao da Qualidade ISO 9001, em Centros Educativos da Fundacion Escuelas Profesionales de la Sagrada Familia. A metodologia variada traz contribuicoes interessantes para a area da avaliacao.

O setimo artigo, de Ferreira, tomou a avaliacao externa de escolas em Portugal como tema, desvelando determinadas fragilidades e constrangimentos no processo, tendo como principal intencao a superacao desses aspectos, com vistas à melhoria dos resultados das escolas.

Finalmente, o oitavo artigo, de Sales e Elliot, apresenta o processo metodologico de elaboracao e validacao de um instrumento para avaliar empreendimentos de doces gourmet, na perspectiva dos consumidores. Alem da validacao do instrumento, em diferentes etapas, os resultados trouxeram possibilidades adicionais de melhoria na comercializacao dos doces, mantendo o padrao de qualidade.

Este Número Especial da Revista Meta: Avaliação aborda o tema meta-avaliacao. De inicio, pode parecer um jogo de palavras, mas e preciso esclarecer o sentido das duas ‘metas’ aqui mencionadas. A Revista tem por finalidade apresentar artigos, estudos e trabalhos no campo da avaliacao. Aqui, o termo meta tem origem do Latim e significa alvo, escopo, proposito. Ja a meta-avaliacao, que designa a avaliacao de uma avaliacao, buscando-lhe a qualidade, se vale do Grego meta, um prefixo que significa alem, transcendencia, reflexao critica sobre. Pode ser ilustrada na composicao dos termos metacognicao e metalinguagem, ampliando seus significados.

O Mestrado Profissional em Avaliacao da Fundacao Cesgranrio e responsavel pela edicao da Revista Meta: Avaliação. Em sua estrutura curricular, possui, dentre as disciplinas eletivas, a Meta-Avaliacao. Por intermedio do estudo de metodologias apropriadas a julgar o merito de avaliacoes, essa disciplina tem o proposito principal de capacitar os mestrandos na elaboracao de estudos meta-avaliativos.

Durante a realizacao do Mestrado, a elaboracao de artigos dos discentes, escritos em coautoria com docentes do Curso, precisa ser publicada. E uma forma de tornar conhecida sua producao academica, divulgando-a a outros cursos de pos-graduacao e interessados no campo da avaliacao, de forma, tambem, a poder aperfeicoar essa atividade por intermedio de criticas e sugestoes recebidas. Afinal, esse e um dos papeis da avaliacao.

O Número Especial da Revista Meta: Avaliação, agora disponibilizado, apresenta os trabalhos de conclusao da disciplina Meta-Avaliacao, escritos no último periodo letivo de 2015. Sao nove artigos elaborados pelos mestrandos e docentes responsaveis pela disciplina, que relatam meta-avaliacoes. Trata-se de uma producao variada pois e fruto da analise de relatorios de avaliacao, realizada sobre diferentes programas e projetos. Fazem parte desse conjunto a meta-avaliacao dos relatorios de avaliacao: do desempenho de alunos dos anos iniciais do ensino fundamental, de auto avaliacao de uma instituicao de ensino superior e do desempenho de uma universidade, na area da educacao; da plataforma do CNPq para deficientes visuais; do Programa Bolsa Familia em favelas cariocas, do Programa de Avaliacao Econômica de Projetos Sociais, do Programa Segundo Tempo, na area de programas socio educacionais; do Programa de Desenvolvimento Rural no continente europeu e dos impactos de tecnologias geradas por projeto da Embrapa, no norte do pais, estes dois com foco na area da agricultura.

Considerando tanto os objetos diferenciados, como a utilizacao de metodologias apropriadas à meta-avaliacao, os artigos sao verdadeiros exercicios de aplicacao de procedimentos – podem ensinar o caminho metodologico de um estudo avaliativo. Por intermedio de seus resultados, podem tambem servir de referencia a futuros estudos de objeto semelhante ou mesma metodologia, ou podem ainda indicar o que nao se deve fazer em uma avaliacao, se as lacunas encontradas nos estudos meta-avaliados forem evitadas ou contornadas.

Alem dessas intencoes e possibilidades que este Número Especial contem, a Revista Meta: Avaliação abre espaco para a publicacao de conjunto de artigos provenientes deste Mestrado ou de outros cursos de pos-graduacao que desejem compor um número para sua producao academica de discentes e docentes. As propostas serao bem-vindas!

Ligia Gomes Elliot

Editora

O número 22 da Revista Meta: Avaliação nos traz um pouco do mosaico produzido pela avaliacao na area da educacao que, por vezes utilizando metodologias de pesquisa, mostra a utilidade de resultados obtidos em estudos sobre temas bastante interessantes.

Preocupados com a tematica da eficiencia escolar de escolas públicas municipais do ensino fundamental do estado de Sao Paulo e seus impactos no desempenho dos alunos no Indice de Desenvolvimento da Educacao Basica (IDEB), Regalo, Salgado Junior, Novi e Falsarella Junior aplicam metodologia especifica destinada a identificar as melhores praticas que contribuiram para se obter um bom desempenho dos alunos.

Rangel, Mocarzel e Pimenta focalizam, em seu artigo, propostas de competencias e habilidades que permeiam a avaliacao desde o primeiro Exame Nacional do Ensino Medio e como se relacionam nas avaliacoes e no delineamento do perfil dos candidatos a cursos de ensino superior. O estudo se coloca como um ensaio teorico e representa contribuicao para os interessados nas associacoes entre competencias e habilidades e nas reflexoes decorrentes.

No âmbito institucional, Paixao e Almeida analisam a percepcao sobre o trabalho de docentes do Instituto Federal de Educacao, Ciencia e Tecnologia da Bahia, em um estudo realizado pela Comissao Propria de Avaliacao. O foco do estudo foi o confronto entre dados sobre a utilizacao ideal e a utilizacao real de praticas pedagogicas docentes, do ponto de vista avaliativo dos alunos.

Ainda no nivel da educacao superior, a atencao de Mondini, Borges, Floriani, Domingues e Lavarda se voltou para a intencao de os alunos de cursos de graduacao a distância utilizarem o ambiente virtual de aprendizagem instalado em uma instituicao da regiao sul. Tanto a qualidade da informacao quanto a da qualidade do sistema tiveram papel decisivo na percepcao dos beneficios e da satisfacao dos usuarios.

Dois outros artigos, de cunho analitico, oferecem, aos leitores, revisao de temas sobre a avaliacao educacional e sobre politicas públicas assistenciais em universidades federais. O primeiro deles, de Borges, focaliza a producao sobre avaliacao educacional publicada nos dois números da Revista Educacao e Avaliacao, em 1980 e 1981. Consiste em fonte para estudos sobre o estado da arte da avaliacao em educacao ao identificar, nos 12 artigos analisados, o entendimento sobre avaliacao, as funcoes da avaliacao e as experiencias dos autores em avaliacao.

O segundo artigo, de Lima e Ferreira, se volta para as politicas públicas de assistencia estudantil praticadas em 60 Universidades Federais Brasileiras e faz um mapeamento dessas politicas promovidas pelo Programa Nacional de Assistencia Estudantil. O atingimento do objetivo do Programa concretiza sua avaliacao.

Alem dos artigos que normalmente compoem a revista, foi acrescentado um artigo ja publicado no periodico The Qualitative Report, com autorizacao do Editor Chefe. Este artigo e uma traducao de Vasconcelos, de um estudo teorico elaborado por Yazan, professor assistente no Departamento de Curriculo e Instrucao da Universidade de Alabama. Por sua importância ao abordar autores renomados como Yin, Merriam e Stake, na metodologia qualitativa de estudo de caso aplicada à educacao e tambem utilizada em avaliacao, o artigo pretende contribuir, de diversas formas, com pesquisadores e avaliadores interessados no tema.

A nova secao Vale a pena conhecer marca sua primeira presenca neste número da Meta:Avaliacao. Em separata, divulga os textos que foram base para as apresentacoes de diferentes professores por ocasiao do Seminario Os 50 Anos da Pos-Graduacao no Brasil. O seminario, comemorativo da aprovacao do Parecer no 977/1965 de autoria do insigne educador Newton Buarque Sucupira, deu origem a atual estrutura dos programas de Pos-Graduacao no Brasil. As falas sao testemunho das grandes contribuicoes do Professor Sucupira à educacao.

O número 20 do volume 7 da Revista Meta: Avaliação reúne artigos sobre o Ensino Superior e ainda a area de projetos sociais, trazendo diversas contribuicoes interessantes.

No artigo de Silva, Dias, Castro e Silva, os conceitos de habitus, capital conforme adotado por Bourdieu e teoria institucional sao abordados em estudo junto a discentes de seis instituicoes de ensino superior do estado da Bahia.

No texto de Miranda, Lemos, Oliveira e Ferreira, o ensino superior na area de negocios e abordado, no intuito de verificar, em estudos selecionados, as variaveis que podem explicar o desempenho academico do corpo discente. Alem de explorar diversas medidas estatisticas, o artigo localiza as variaveis pesquisadas em relacao aos estudos analisados.

Fora da area da Educacao, o estudo de Fontes, Crivelaro, Amaral, Ferreira e Peres focaliza os impactos econômicos e sociais de um programa social patrocinado pelo Servico Social da Indústria – SESI. Este programa revela as contribuicoes, em âmbito nacional, para a geracao de riquezas econômicas e sociais.

A definicao de criterios de correcao de provas escritas deu origem a um estudo que contou com a participacao de 10 professores, discentes de curso de pos-graduacao em Educacao, que assumiram o papel de corretores. Este e o tema do estudo de Terribili Filho e Chirinea, que consta como um relato de experiencia.

Os artigos que compoem esse número da Revista Meta: Avaliação focalizam o ensino a distância, a avaliacao externa de alunos do Ensino Basico e possiveis efeitos no desenvolvimento profissional de professores de Matematica, e ainda contribuicoes de praticas escolares para o desempenho dos alunos, em avaliacao externa nacional.

O primeiro artigo, de Crispim, Archer, Gomes, Gomig, e Cruz, trata dos aspectos teoricos e metodologicos que envolvem a avaliacao de um curso de formacao profissional, de abrangencia nacional, na modalidade da educacao a distância. Para seu desenvolvimento, foi construido um sistema de avaliacao com a finalidade aferir o processo de ensino-aprendizagem.

O segundo artigo, de Silva, Bastos, Rodrigues, Silva, e Brito, tambem no âmbito da educacao a distância (?), faz parte de um projeto de avaliacao desenvolvido pela extensao da Fundacao CECIERJ. Traz os resultados de uma avaliacao centrada no usuario sobre o grau de satisfacao de professores de Lingua Portuguesa e Matematica, regentes do segmento de Jovens e Adultos, com o Curso de Formacao Continuada.

O terceiro artigo, tambem sobre professores, por meio de metodologia quantitativa apresenta os resultados de um estudo empirico sobre os efeitos da realizacao de provas externas nacionais de matematica do 2º e 3º ciclos do ensino basico, no desenvolvimento profissional docente, em Portugal. E de autoria de Marques, Sousa, Costa, e Pacheco.

O quarto artigo, de Salgado Junior, Novi, Ferreira, Oliveira, e Miranda, faz o uso integrado das abordagens quantitativa e qualitativa para se estudar um dado objeto: a eficiencia escolar. Tem por objetivo relatar resultados de pesquisa empirica realizada em escolas públicas municipais brasileiras do ensino fundamental para evidenciar praticas escolares que podem ter contribuido para o desempenho dos alunos na Prova Brasil.

Finalmente, o quinto artigo, de Silva e Leite, teve por finalidade avaliar a interface grafica do curso a distância denominado Voluntariado, Conceitos e Motivacao do AFS Intercultura Brasil, em relacao a sua ergonomia e usabilidade. O estudo adotou a abordagem de avaliacao por especialistas, em uma avaliacao heuristica.

No número 18 da Revista Meta: Avaliação sao apresentados quatro artigos que lidam com a avaliacao com diferentes focos e diversidade de metodologias.

O primeiro, de autoria de Machado e Almeida, pretendeu caracterizar os efeitos de uma proposta de consultoria colaborativa na perspectiva dos professores do ensino público do interior do Estado de Sao Paulo, que atuavam com turmas. Os resultados indicam se os alunos-alvo pioraram, mantiveram, melhoraram ou melhoraram muito, a partir da implementacao da proposta.

No segundo artigo, Scremin e Dallacort tratam da trajetoria da Comissao Propria de Avaliacao Institucional em um Centro Universitario, do interior do Estado do Rio Grande do Sul, nos 10 anos do Sistema Nacional de Avaliacao da Educacao Superior. Os efeitos positivos do trabalho destacam a participacao da comunidade academica e a validade das informacoes.

No terceiro artigo, e a vez de Santos apresentar as contribuicoes do Ciclo de Politicas, como metodo de analise de politicas educacionais, no contexto da politica de avaliacao em larga escala. O estudo se volta para dois municipios com diferente Indice de Desenvolvimento da Educacao Basica no Estado de Santa Catarina e identifica dificuldades e implicacoes ocasionadas pelas avaliacoes na educacao municipal.

O quarto artigo, de Pereira e Elliot, relata a avaliacao dos editais de selecao de professores do Colegio Pedro II dos anos de 2007, 2008 e 2009. Como abordagem avaliativa, utilizou a avaliacao do produto, proposta por Stufflebeam e componente do modelo conhecido por CIPP.

Editorial ..................................................................................................................................................................................................................................................

Começamos o ano com uma novidade que muito nos orgulha: nossa publicação foi indexada pelo Qualis/CAPES e recebeu o conceito B3.  Continuamos a caminhada em busca da publicação de trabalhos relevantes nas áreas de sua atuação - Educação, Saúde e Projetos Sociais, tendo sempre como fio condutor a avaliação. O sucesso da revista, cremos, dá-se pela projeção alcançada em 2012, quando atingimos 59.334 acessos vindos de 85 países e por sua indexação nas bases:

• Ibict - Instituto Brasileiro de Informação em Ciência e Tecnologia;
• DOAJ - Directory of Open Access Journals;
• Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal;
• OEI - Organización de Estados Iberoamericanos (Madri, Espanha, CREDI);
• RCAAP - Repositório Científico de Acesso Aberto de Portugal;
• Sumários.org - Base indexadora de periódicos científicos brasileiros da Fundação de Pesquisas Científicas de Ribeirão Preto (FUNPEC-RP);
• LivRe! - Portal do CNEN-Comissão Nacional de Energia Nuclear, do Ministério de Ciência, Tecnologia e Inovação;
• Qualis/CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Brasília, DF)

Neste número, destacamos os seguintes artigos na área de educação: 1- "Formação Continuada de Professores Alfabetizadores: uma avaliação do Programa Pró-Letramento". Escrito por Márcia Aparecida Alferes e Jefferson Mainardes, o artigo apresenta uma análise da concepção e gestão do Programa Pró-letramento, destinado à formação continuada de professores nas áreas de alfabetização/ linguagem e matemática; e 2- "O Portfólio Como Instrumento de Avaliação da Aprendizagem em Escola Montessoriana", trabalho pruduzido por Delcy Lacerda de Oliveira e Ligia Gomes Elliot. As autoras têm por objetivo registrar o processo de construção, em tempo real, do portfólio como avaliação da aprendizagem de alunos de 6 a 9 anos de uma escola montessoriana.

Na área da saúde, os destaques foram para os artigos: 1-"(Re)avaliando o Programa de Pós-graduação em Neurologia da UNIRIO: os estudantes ampliam sua avaliação", no qual Tânia Maria Rodrigues de França faz uma comparação da primeira e segunda avaliação (2008 e 2009, respectivamente) realizadas no programa de neuroligia da UNIRIO a partir da ótica discente;                            2- "Atenção em Saúde Bucal aos Pacientes do Centro de Medicina do Idoso do Hospital Universitário de Brasília: uma visão especial da odontologia no contexto multidisciplinar - avaliação do Projeto de Extensão".  O artigo escrito por Alexandre Franco Miranda,  Yeda Maria Parro, Sueli Ferri Pontual de Lemos, Liana Rodrigues Taminato de Carvalho, Maria Helena Lucas Fernandes e Érica Negrini Lia tem por finalidade apresentar as principais ações e orientações aos cuidadores e familiares de idosos a respeito da saúde bucal; e 3- "Qualidade de Vida: um processo avaliativo pós-cirúrgico" foi o tema escolhido pelas autoras Bernadette Valente Faria e Ligia Leite Silva, que objetiva avaliar os resultados do Programa de Obesidade Mórbida do Hospital da Força Aérea do Galeão.  Para essa avaliação, foram consultados 46 pacientes e analisados aspectos da qualidade de vida dos operadores em relação aos que aguardavam operação.

Resenha

Rosenilda Moura da Silva apresenta uma bem elaborada resenha sobre a abordagem dos grupos focais no enfoque da pesquisa qualitativa. A obra Grupos Focais faz parte da Coleção Pesquisa Qualitativa, coordenada por Uwe Flick e de autoria de Rosaline Barbour, publicada pela Artmed, Porto Alegre 2009.

Tenham todos uma ótima leitura!

Fátima Cunha

Editora