Contratação de Capacitação: construção e validação de instrumento avaliativo

Augusto Meira Homrich, Lígia Silva Leite

Resumo


O presente estudo teve como objetivo construir e validar um instrumento de avaliação para auxiliar os profissionais da Coordenadoria de Carreira e Desenvolvimento da Agência Nacional de Saúde Suplementar na tomada de decisão sobre contratação de ações de capacitação externas. O instrumento desenvolvido foi uma lista de verificação, intitulada Lista de Verificação para Contratação de Capacitação Externa, que contém seis categorias avaliativas - admissibilidade da capacitação, necessidade da capacitação, design instrucional, adequação ao público-alvo, investimento na capacitação e contratação, compostas, no total, por 50 itens de verificação, incluindo os subitens. Para sua construção, primeiramente foram identificadas as seis categorias avaliativas, a partir da análise dos dados coletados em sessão de grupo focal e em entrevistas individuais, com apoio de roteiros semiestruturados. Com uso dos subsídios dessas categorias, elaborou-se, em sequência, os indicadores e itens do instrumento, que foram analisados em nova sessão de grupo focal, segundo três critérios - adequação à categoria avaliativa, relevância para a contratação de capacitação externa e possibilidade de julgamento. Por último, produziu-se a versão preliminar do instrumento, para validação de conteúdo, com profissionais da Coordenadoria de Carreira e Desenvolvimento, e técnica, com especialistas em avaliação. Os resultados das etapas de validação evidenciaram a adequação do instrumento às necessidades dos futuros usuários e o atendimento dos critérios utilizados para aferição da qualidade técnica. Diante da lista de verificação construída e validada, foram feitas recomendações envolvendo: pré-teste, avaliação periódica, uso em outros contextos, ampliação da finalidade e da abrangência.

Texto completo:

PDF

Referências


ABBAD, Gardênia da Silva et al. Medidas de avaliação em treinamento, desenvolvimento e educação: ferramentas para gestão de pessoas. Porto Alegre: Artmed, 2012.

ABBAD, Gardênia da Silva. Educação a distância: o estado da arte e o futuro necessário. Revista do Serviço Público, Brasília, DF, v. 58, n. 3. p. 351-372, 2007.

______. Medidas de avaliação de procedimentos, processos e apoio instrucionais em TD&E. In: BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva; MOURÃO, Luciana. Treinamento, Desenvolvimento e Educação em organizações e trabalho: fundamentos para a gestão de pessoas. Porto Alegre: Artmed, 2006.

______. Um modelo integrado de avaliação de impacto de treinamento no trabalho: IMPACT. Tese (Doutorado em Psicologia Social e do Trabalho) – Universidade de Brasília, DF, 1999.

ABBAD, Gardênia da Silva.; BORGES-ANDRADE, Jairo Eduardo. Aprendizagem humana em organizações do trabalho. In: ZANELLI, José Carlos; BORGESANDRADE, Jairo Eduardo; BASTOS, Antonio Virgílio Bittencourt (Org.). Psicologia, organizações e trabalho no Brasil. Porto Alegre: Artmed, 2004.

ABBAD, Gardênia da Silva; ZERBINI, Thaís; SOUZA, Daniela Borges Lima de. Panorama das pesquisas em educação a distância no Brasil. Estudos de Psicologia, Natal, v. 15, n. 3, p. 291-298, 2010.

ABREU, Aline França; GONÇALVES, Caio Márcio; PAGNOZZI, Leila. Tecnologia da informação e educação corporativa: contribuições e desafios da modalidade de ensino-aprendizagem a distância no desenvolvimento de pessoas. Revista PEC, Curitiba, v. 3, n. 1, p. 47-58, 2003.

ADVOCACIA-GERAL DA UNIÃO (Brasil). Orientação Normativa nº 18, de 1º de abril de 2009. Diário Oficial da União de 7 de abril de 2009, Brasília, DF. Disponível em: . Acesso em: 13 out. 2017.

AGÊNCIA NACIONAL DE SAÚDE SUPLEMENTAR (Brasil). Relatório de atividades 2017. Gerência de Recursos Humanos. Rio de Janeiro: ANS, 2018. (Documento interno).

______. Relatório de atividades 2016. Gerência de Administração de Pessoal e Coordenadoria de Carreira e Desenvolvimento. Rio de Janeiro: ANS, 2017. (Documento interno).

______. Instrução de Serviço nº 14, de 7 de março de 2014. Estabelece os procedimentos para participações em eventos externos de capacitação de curta duração, dentro do território nacional, pelos servidores em efetivo exercício na Agência Nacional de Saúde Suplementar, e revoga a Instrução de Serviço - IS n. 9, de 27 de março de 2008, da Diretoria de Gestão - DIGES. Boletim de Serviço de 17 de março de 2014.

AGÊNCIA NACIONAL DE SAÚDE SUPLEMENTAR (Brasil). Resolução Administrativa nº 11, de 17 de abril de 2006. Dispõe sobre o Programa Permanente de Capacitação, Treinamento e Desenvolvimento do Quadro de Pessoal da Agência Nacional de Saúde Suplementar. Boletim de Serviço de 17 de abril de 2006.

BARDIN, Laurence. Análise de conteúdo. Lisboa: Edições 70, 1977.

BELLONI, Isaura. A educação superior na nova LDB. In: BRZEZINSKI, Iria (Org.). LDB interpretada: diversos olhares se entrecruzam. São Paulo: Cortez, 2003.

BIM, Solaine Meneguello. Inexigibilidade de licitação para contratação de professores para treinamento ou aperfeiçoamento de pessoal do sistema “S”. Instituto Brasiliense de Direito Público, Brasília, fev. 2013. Disponível em: . Acesso em: 13 out. 2017.

BOGDAN, Robert; BIKLEN, Sari. Investigação qualitativa em educação: uma introdução à teoria e aos métodos. Portugal: Porto Editora, 1994.

BORGES-ANDRADE, Jairo Eduardo. Avaliação integrada e somativa em TD&E. In: BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva; MOURÃO, Luciana. Treinamento, Desenvolvimento e Educação em organizações e trabalho: fundamentos para a gestão de pessoas. Porto Alegre: Artmed, 2006.

______. Avaliação somativa de sistemas instrucionais: integração de três propostas. Tecnologia educacional, Rio de Janeiro, v. 11, n. 46, p. 29-39, 1982.

BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva. Treinamento e desenvolvimento: reflexões sobre suas pesquisas científicas. Revista de Administração, São Paulo, v. 31, n. 2, p. 112-125, 1996.

BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva; MOURÃO, Luciana. Modelos de Avaliação e aplicação em TD&E. In: ABBAD, Gardênia da Silva et al. Medidas de avaliação em treinamento, desenvolvimento e educação: ferramentas para gestão de pessoas. Porto Alegre: Artmed, 2012.

BRASIL. Instrução Normativa Conjunta nº 1, de 10 de maio de 2016. Dispõe sobre controles internos, gestão de riscos e governança no âmbito do Poder Executivo federal. Diário Oficial da União, Brasília, DF, de 11 de maio de 2016. Disponível em: < https://www.cgu.gov.br/sobre/legislacao/arquivos/instrucoesnormativas/in_cgu_mpog_01_2016.pdf>. Acesso em: 23 fev. 2018.

______. Decreto nº 5.707, de 23 de fevereiro de 2006. Institui a política e as diretrizes para o desenvolvimento de pessoal da administração pública federal direta, autárquica e fundacional, e regulamenta dispositivos da Lei no 8.112, de 11 de dezembro de 1990. Diário Oficial da União, Brasília, DF, de 24 de fevereiro de 2006. Disponível em: . Acesso em: 13 out. 2017.

BRASIL. Lei nº 9.961, de 28 de janeiro de 2000. Cria a Agência Nacional de Saúde Suplementar – ANS e dá outras providências. Diário Oficial da União, Brasília, DF, 29 de janeiro de 2000. Disponível em: . Acesso em: 23 fev. 2018.

______. Lei nº 8.666, de 21 de junho de 1993. Regulamenta o art. 37, inciso XXI, da Constituição Federal, institui normas para licitações e contratos da Administração Pública e dá outras providências. Diário Oficial da União, Brasília, DF, 22 de junho de 1993. Disponível em: . Acesso em: 13 out. 2017.

______. Constituição (1988). Constituição da República Federativa do Brasil. Promulgada em 5 de outubro de 1988. Disponível em: . Acesso em: 13 out. 2017.

CAMÕES, Marizaura Reis de Souza; MENESES, Pedro Paulo Murce. Gestão de pessoas no governo federal: análise da implementação da Política Nacional de Desenvolvimento de Pessoal. Brasília, DF: ENAP, 2016. Disponível em: . Acesso em: 13 out. 2017.

CARVALHO, Renata Silveira. Avaliação de treinamento a distância: reação, suporte à transferência e impacto do treinamento no trabalho. Dissertação (Mestrado) – Psicologia Social e do Trabalho. Instituto de Psicologia. Universidade de Brasília, Brasília, DF, 2003.

CHAVES, Luiz Cláudio de Azevedo. Contratação de serviços de treinamento e aperfeiçoamento de pessoal na Administração Pública: uma breve análise da Decisão 439/98, Plenária do TCU. Revista do Tribunal de Contas da União, Brasília, DF, v. 129, p. 72-79, 2014.

______. Contratação de serviços de treinamento e aperfeiçoamento de pessoal na Administração Pública: caso de licitação, dispensa ou inexigibilidade? Revista JML de Licitações e Contratos, Paraná, v. 28, p. 26-43, 2013.

COELHO JUNIOR, Francisco Antônio; BORGES-ANDRADE, Jairo Eduardo. Uso do conceito de aprendizagem em estudos relacionados ao trabalho e organizações. Paidéia, Ribeirão Preto, São Paulo, v. 18, n. 40, p. 221-234, 2008.

ESCOLA NACIONAL DE ADMINISTRAÇÃO PÚBLICA (Brasil). Rede de escolas de governo. O que é a Rede Nacional de Escolas de Governo?. Brasília, DF, 2017. Disponível em: . Acesso em: 9 de jul. 2017.

FONTES, Rui Manuel dos Santos. Checklist: o que é isso?. 2010. Disponível em: . Acesso em: 26 fev. 2018.

FRANCO, Maria Laura Puglisi Barbosa. Análise de Conteúdo. 2. ed. Brasília, DF: Liber Livro Editora, 2005.

FREITAS, Isa Aparecida de; BRANDÃO, Hugo Pena. Trilhas de aprendizagem como estratégia de TD&E. In: BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva; MOURÃO, Luciana. Treinamento, Desenvolvimento e Educação em organizações e trabalho: fundamentos para a gestão de pessoas. Porto Alegre: Artmed, 2006.

HAMBLIN, Anthony Crandell. Avaliação e controle de treinamento. São Paulo: McGraw-Hill, 1978.

HOFFMAN-CÂMARA, Rosana. Análise de conteúdo: da teoria à prática em pesquisas socais aplicadas às organizações. Gerais: Revista Interinstitucional de Psicologia, Minas Gerais, v. 6, n. 2, jul./dez., 2013.

KIRKPATRICK, Donald L. Evaluation of training. In: CRAIG, R. L. Training and development handbook. 2. ed. New York: McGraw-Hill, 1976.

LEITE, Ligia Silva. Lista de verificação. In: ELLIOT, Ligia Gomes. (Org.). Instrumentos de avaliação e pesquisa: caminhos para construção e validação. Rio de Janeiro: Wak editora, 2012.

MACHADO, Tania Russo; CHAISE, Rosa Maria; ELLIOT, Ligia Gomes. A metaavaliação como instrumento de qualidade nas Políticas Públicas: Programa Segundo Tempo. Meta: Avaliação, Rio de Janeiro, v. 8, 1 Edição Especial, p. 1-20, 2016.

MINISTÉRIO DA EDUCAÇÃO (Brasil). Perguntas frequentes. Brasília, DF: MEC, 2017. Disponível em: . Acesso em: 9 jul. 2017.

MENESES, Pedro Paulo Murce; ZERBINI, Thaís; ABBAD, Gardênia da Silva. Manual de treinamento organizacional. Porto Alegre: Artmed, 2010.

MORAES, Roque. Análise de conteúdo. Revista Educação, Porto Alegre, v. 22, n. 37, p. 7-32, 1999. Disponível em: . Acesso em: 5 nov. 2017.

MINISTÉRIO DO PLANEJAMENTO, ORÇAMENTO E GESTÃO (Brasil). Guia da Gestão da Capacitação por Competências. Brasília, DF, 2012. Disponível em: . Acesso em: 13 out. 2017.

MÜLLER, Claudia Cristina. EAD nas organizações. Curitiba, PR: IESDE, 2009.

ORLANDO FILHO, Ovídio. Grupo focal. Rio de Janeiro, 2016. (Notas de aula).

RICHARDSON, Roberto Jarry et al. Pesquisa social: métodos e técnicas. São Paulo: Atlas, 1999.

RODRIGUEZ BILELLA, Pablo D. et al. Diretrizes para Avaliação para a América Latina e o Caribe. 1. ed. Ciudad Autónoma de Buenos Aires, 2016.

SAMPIERI, Roberto Hernández; COLLADO, Carlos Fernández; LUCIO, Maria del Pilar Baptista. Metodologia de pesquisa. 5. ed. Porto Alegre: Penso, 2013.

SÁ EARP, Maria de Lourdes; HILDENBRAND, Lucí. Abordagem qualitativa: características e procedimentos básicos. In: SILVA, Angela Carrancho. Avaliação e pesquisa: conceitos e reflexões. Rio de Janeiro: Editora Multifoco, 2016.

SCRIVEN, Michael. The evaluation of training: a checklist approach. 2011. Disponível em: . Acesso em: 21 nov. 2017.

______. Perspectivas e procedimentos de avaliação. In: BASTOS, Lilia da Rocha; PAIXÃO, Lyra; MESSICK, Rosemary Grèves (Org.). Avaliação educacional II: perspectivas, procedimentos, alternativas. Petrópolis, Editora Vozes, 1978.

SILVA, Christina Marília Teixeira da. Afinal, o que é avaliação? In: SILVA, Angela Carrancho. Avaliação e pesquisa: conceitos e reflexões. Rio de Janeiro: Editora Multifoco, 2016.

SILVA, Luciane Pires. Construção e validação de instrumento de avaliação dos projetos sociais do Programa Petrobrás Socioambiental. Dissertação (Mestrado Profissional em Avaliação) –Fundação Cesgranrio, Rio de Janeiro, 2015.

TRIBUNAL DE CONTAS DA UNIÃO (Brasil). Decisão nº 439, de 15 de julho de 1998, Plenário. Processo TC nº 000.830/98-4. Diário Oficial da União, Brasília, DF, 23 de julho de 1998.

VARGAS, Miramar Ramos Maia; ABBAD, Gardênia da Silva. Bases conceituais em treinamento, desenvolvimento e educação – TD&E. In: BORGES-ANDRADE, Jairo Eduardo; ABBAD, Gardênia da Silva; MOURÃO, Luciana. Treinamento, Desenvolvimento e Educação em organizações e trabalho: fundamentos para a gestão de pessoas. Porto Alegre: Artmed, 2006.

WORTHEN, Blaine R.; SANDERS, James R.; FITZPATRICK, Jody L. Avaliação de programas: concepções e práticas. São Paulo: Edusp, 2004.

ZERBINI, Thaís. Estratégias de aprendizagem, reações aos procedimentos de um curso via internet, reações ao tutor e impacto do treinamento no trabalho. Dissertação (Mestrado) – Psicologia Social e do Trabalho. Instituto de Psicologia. Universidade de Brasília, Brasília, DF, 2003.




DOI: http://dx.doi.org/10.22347/2175-2753v0i0.4601

Bookmark and Share


Direitos autorais 2023 Fundação Cesgranrio

Licença Creative Commons
Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.

Principios Norteadores para o Avaliador

Guiding Principles for Evaluators American Evaluation Association (AEA)

Com o proposito de guiar o trabalho dos profissionais de avaliação e assegurar a etica de sua atuacao, a American Evaluation Association (AEA) - Associacao Profissional de Avaliadores - estabeleceu cinco principios norteadores aqui resumidos:

1.  Indagacao Sistematica, no que se refere à capacidade de coletar dados utilizando tecnicas apropriadas e comunicando metodos e abordagens com a devida transparencia para permitir acesso e critica.

2.  Competencia, no que se refere a demonstrar atuacao competente perante os envolvidos no processo avaliativo e desenvolver continuamente sua capacidade para alcancar o mais alto nivel de desempenho possivel.

3.  Integridade/Honestidade, no que se refere a assegurar honestidade e integridade ao longo de todo o processo avaliativo, negociando com os envolvidos e interessados na avaliação e buscando esclarecer e orientar procedimentos que venham provocar distorcoes ou indevidas utilizacoes.

4.  Respeito pelas pessoas, no que se refere ao respeito pela seguranca, dignidade e auto-valorizacao dos envolvidos no processo avaliativo, atuando sempre com etica profissional, evitando riscos e prejuizos que possam afetar os participantes para assegurar, o melhor possivel, o respeito às diferencas e o direito social de retorno dos resultados, aos envolvidos.

5.  Responsabilidade pelo bem estar geral e público, no que se refere a levar em consideracao a diversidade de interesses e valores que possam estar relacionados ao público em geral,buscando responder nao somente às expectativas mais imediatas, mas tambem às implicacoes e repercussoes mais amplas e, nesse sentido, disseminar a informacao sempre que necessario.

Indexado em:

  1. Miguilim - Diretório das revistas científicas eletrônicas brasileiras

  2. DOAJ - Directory of Open Access Journals

  3. EBSCO - Information Services

  4. Edubase

  5. Google Scholar

  6. Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal

  7. LivRe! - Portal do CNEN - Comissão Nacional de Energia Nuclear do Ministério de Ciência, Tecnologia e Inovação

  8. OEI - Organizacion de Estados Iberoamericanos (Madri, Espanha, CREDI)

  9. RCAAP - Repositorio Cientifico de Acesso Aberto de Portugal

  10. REDIB - Red Iberoamericana de Innovación y Conocimiento Científico

  11. Scopus - A maior base de dados de abstracts e citacao de literatura revisada por pares:periodicos cientificos, livros e anais

 

Scimago

SJR : Scientific Journal Rankings

SCImago Journal & Country Rank
  
  

Meta: Aval., Rio de Janeiro, ISSN 2175-2753.