Portal Aluno da Universidade Federal do Rio de Janeiro: um estudo avaliativo na perspectiva de graduandos

Ricardo Storino, Lucí Mary Araújo Hildenbrand

Resumo


Esse estudo teve como objetivo avaliar a qualidade da informação e serviços oferecidos pelo Portal Aluno da Universidade Federal do Rio de Janeiro, bem como a usabilidade do sistema, considerando a opinião de graduandos da instituição. Para avaliar a qualidade da informação foram utilizados nove dos 16 critérios de avaliação constantes no framework de Eppler, e para usabilidade, as cinco categorias de Nielsen. Avaliaram-se também os serviços oferecidos pelo portal. A abordagem adotada foi a centrada nos consumidores. O instrumento de coleta de dados foi um questionário com 37 questões fechadas, abordando os três aspectos focalizados. As questões referentes à qualidade da informação e à usabilidade utilizaram cinco níveis de julgamento, do tipo Likert: discordo totalmente, discordo parcialmente, neutro, concordo parcialmente e concordo totalmente. O terceiro aspecto, qualidade dos serviços, considerou cinco níveis de julgamento: péssimo, ruim, regular, bom e ótimo. Ao final do questionário, três questões abertas solicitaram pontos fortes e fracos do portal, bem como sugestões de melhoria. As 37 questões quantitativas, submetidas à análise fatorial, foram agrupadas em cinco fatores: qualidade da informação no portal, aprendizado e memorização no uso do portal, suporte no uso do portal, serviço de emissão de documentos do portal e serviços acadêmicos do portal. As questões qualitativas foram categorizadas a partir das análises textual e temática. A conclusão do estudo enfatiza julgamento favorável aos fatores aprendizado e memorização no uso do portal, e serviços de emissão de documentos. Os fatores qualidade da informação, suporte ao uso e serviços acadêmicos do portal foram julgados predominantemente com conceito regular para bom, acrescido de sugestões de aprimoramento. As recomendações incluíram desde melhorias no Portal Aluno até sugestões de novos estudos envolvendo tecnologias móveis.

Texto completo:

PDF

Referências


ASSOCIAÇÃO BRASILEIRA DE NORMAS TÉCNICAS. NBR 9126-1: Engenharia de software: Qualidade de produto: Parte 1: Modelo de qualidade. Rio de Janeiro, 2003. Disponível em:. Acesso em: 15 jul. 2017.

BRASIL. Decreto nº 6.096 de 24 de abril de 2007. Institui o Programa de Apoio a Planos de Reestruturação e Expansão das Universidades Federais - REUNI. Diário Oficial da União, Brasília, DF, 25 abr. 2007. Disponível em: . Acesso em: 17 abril 2017.

______. Decreto nº 14.343 de 7 de setembro de 1920. Institui a Universidade do Rio de Janeiro. Diário Oficial da União, Brasília, DF, 10 set. 1920, Seção 1, p. 15115. Disponível em: . Acesso em: 13 maio 2017.

BRINGULA, Rex P.; BASA, Roselle S. Factors affecting faculty Web portal usability. Journal of Educational Technology & Society, Taiwan, v. 14, n. 4, p. 253-265, out. 2011.

BROOKE, John. SUS: a quick and dirty usability scale. 1996. Disponível em: . Acesso em: 9 set. 2017.

CHIANCA, Thomas. Avaliando programas sociais: conceitos, princípios e práticas. In: CHIANCA, Thomas; MARINO, Eduardo; SCHIESARI, Laura. Desenvolvendo a cultura das organizações da sociedade civil. São Paulo: Global Ed., 2001.

CLARO, Daniela Barreiro; SOBRAL, João Bosco Mangueira. Programação em JAVA. Florianópolis: Copyleft Pearson Education, 2008.

COLTON, David; COVERT, Robert W. Designing and Constructing Instruments for Social Research and Evaluation. São Francisco, CA: John Wiley & Sons, 2007.

COSTA, Luciana Ferreira da. Usabilidade do Portal de Periódicos da CAPES. 2008. 236 f. Dissertação (Mestrado em Ciência da Informação) – Programa de PósGraduação em Ciência da Informação, Universidade Federal da Paraíba, João Pessoa, 2008.

COSTA, Luciana Ferreira da; RAMALHO, Francisca Arruda. A usabilidade nos estudos de uso da informação: em cena, usuários e sistemas interativos de informação. Perspectivas em Ciências da Informação, Belo Horizonte, v.15, n.1, 2010.

CRUZ, Marly; MOREIRA, Elizabeth. O que são Modelos de Avaliação?. Rio de Janeiro: Fiocruz, 2015. Disponível em:< http://brasil.campusvirtualsp.org/sites/default/files/Aula%203%20Texto_apoio.Marly_ Beth.pdf>. Acesso em: 27 out. 2015.

DATE, Christopher J. Introdução a sistemas de bancos de dados. Rio de Janeiro: Elsevier, 2003.

DIAS, Claudia. Usabilidade na Web: criando portais mais acessíveis. Rio de Janeiro: Alta Books, 2007.

ELLIOT, Ligia Gomes; HILDENBRAND, Luci.; BERENGER, Mercêdes Moreira. Questionário. In: ELLIOT, Ligia Gomes. Instrumentos de Avaliação e Pesquisa: caminhos para construção e validação. Rio de Janeiro: Wak, 2012.

FERREIRA, Aurélio Buarque de Holanda. Novo dicionário Aurélio da Língua Portuguesa. 3. ed. rev. e atual. Curitiba: Positivo, 2000.

FERREIRA, Osmar Carmo Arouck. Atributos da qualidade da informação. 117f. 2011. Dissertação (Mestrado em Ciência da Informação) – Universidade de Brasília, Brasília, 2011.

GRESLER, Lori Alice. Introdução à pesquisa: projetos e relatórios. 2. ed. São Paulo: Loyola, 2004.

HAIR JUNIOR, Joseph F. et al. Análise multivariada de dados. 5. ed. Porto Alegre: Bookman, 2005.

HILERA, José R. et al. Evaluación de la accesibilidad de páginas web de universidades españolas y extranjeras incluidas en rankings universitarios internacionales. Revista Española de Documentación Científica, Madrid, v. 36, n. 1, 2013. Disponível em: . Acesso em: 30 ago. 2017.

HORTON JUNIOR, Forest Woody. Resource management: principles and practices. In: ______. Information resources management: concepts and cases. Cleveland: Association for Systems Management, 1979.

JARDIM, Maria Luiza Cavalcanti. O manual para a entrada de dados de monografias na base minerva: avaliação por catalogadores da UFRJ. 2014. 66 f. Dissertação (Mestrado) – Curso de Mestrado Profissional em Avaliação, Fundação Cesgranrio, Rio de Janeiro, 2014.

JOHNSON, Richard A.; WICHERN, Dean. W. Applied multivariate statistical analysis. 3. ed. Englewood Cliffs: Prentice Hall, 1992.

KIRAKOWSKI, Jurek; CLARIDGE, Nigel; WHITEHAND, Richard. Human Centred Measures of Success in Web site Design. In: PROC. CONF. HUMAN FACTORS AND THE WEB, 4., 1998. Anais… AT&T, Booking Ridge, N. J., 1998.

LEWIS, James R. Psychometric evaluation of the post-study system usability questionare: The PSSUQ. In: PROCEEDINGS OF THE HUMAN FACTORS SOCIETY, 36., 1992, Australia. Annual Meeting… Australia: PSSUQ, 1992.

MARCONI, Marina de Andrade; LAKATOS, Eva Maria. Fundamentos de metodologia científica. 7. ed. São Paulo: Atlas, 2010.

MINGOTI, Sueli Aparecida. Análise de dados através de métodos de estatística multivariada: uma abordagem aplicada. Belo Horizonte: UFMG, 2005.

NAZÁRIO, Débora Cabral; SILVA, Paulo Fernando da; ROVER, Aires José. Avaliação da qualidade da informação disponibilizada no Portal da Transparência do Governo Federal. Revista Democracia Digital e Governo Eletrônico, Florianópolis, v. 1, n. 6, 2012. Disponível em:< http://www.egov.ufsc.br/portal/sites/default/files/metricas_do_portal_de_transparenci a.pdf>. Acesso em: 9 abr. 2017.

NEHMY, Rosa Maria Quadro. Leitura epistemológico-social da qualidade da informação. 118 f. 1996. Dissertação (Mestrado em Ciência da Informação) – Programa de Pós-Graduação em Ciência da Informação, UFMG, Belo Horizonte, 1996.

NEHMY, Rosa Maria Quadro; PAIM, Isis. A desconstrução do conceito de qualidade da informação. Ciência da Informação, Brasília, DF, v. 27, n. 1, jan./abr. 1998.

NIELSEN, Jacob. Usability 101: introduction to usability. 2012. Disponível em:< https://www.nngroup.com/articles/usability-101-introduction-to-usability/>. Acesso em: 23 ago. 2017.

O’BRIEN, James A. Sistemas de informação e as decisões gerenciais na era da Internet. 2. ed. São Paulo: Saraiva, 2004.

OLETO, Ronaldo Ronan. Percepção da qualidade da informação. Ciência da Informação, Brasília, DF, v. 35, n. 1, jan./abr. 2006. Disponível em: . Acesso em: 23 ago. 2017.

OLIVEIRA, Antonio José Barbosa de (Org.). Universidade e lugares de memória. Rio de Janeiro: UFRJ; FCC; SiBI, 2008. Disponível: . Acesso em: 7 ago. 2017.

OLIVEIRA, Maria Beatriz Aguiar de. Usabilidade e Qualidade da Informação: avaliação do portal aluno da Universidade Federal do Espírito Santo. 2014. 144 f. Dissertação (Mestrado) –Programa de Pós-Graduação em Gestão Pública, Universidade Federal do Espirito Santo, Espírito Santo, 2014.

PERROTTI, Edmir. Entre a falta e excesso de informações. In: ______. (Coord.). A aventura de conhecer. Salto para o futuro, Brasília, DF, ano 18, boletim 15, set. 2008. Disponível em: . Acesso em: 5 de maio 2017.

PRUMPER, Jochen. Software evaluation based upon ISO 9241 part. 10. 1993 Disponível em: . Acesso em: 15 abr. 2017.

RAVDEN, Susannah J.; JOHNSON, Graham. Evaluating usability of humancomputer interfaces: a practical method. New York: Halsted Press, 1989.

RUBIN, Jeffrey; CHISNELL, Dana. Handbook of usability testing: how to plan, design, and conduct effective tests. Indianápolis: Wisley, 2008.

SANTOS, Cássia Dias; VALENTIM, Marta Lígia Pomim. As Interconexões entre a Gestão da Informação e a Gestão do Conhecimento para o Gerenciamento de Fluxos Informacionais. Perspectivas em Gestão & Conhecimento, João Pessoa, v. 4, n. 2, jul./dez. 2014. Disponível em:< https://repositorio.unesp.br/bitstream/handle/11449/114790/ISSN2236417X-2014-04- 02-19-33.pdf?sequence=1&isAllowed=y>. Acesso em: 17 jul. 2017.

SEVERINO, Antônio Joaquim. Metodologia do trabalho científico. 23. ed. São Paulo: Cortez, 2013.

SCHLESINGER, Cristina Costa Barros et al. Gestão do conhecimento na Administração Pública. Curitiba: Instituto Municipal de Administração Pública, 2008. Disponível em:. Acesso em: 17 jul. 2017.

SILVA JUNIOR, Laerte Pereira da. O portal do Centro de Ciências Humanas, Letras e Artes da Universidade Federal da Paraíba: usuários e usabilidade. 168 f. 2012. Dissertação (Mestrado em Ciência da Informação) – Programa de Pós-Graduação em Ciência da Informação, Universidade Federal da Paraíba, João Pessoa, 2012.

SCAPIN, Dominique L.; BASTIEN, J. M. Christian. Ergonomic criteria for evaluating the ergonomic quality of interactive systems. Behaviour and Information Technology, Australia, v. 16, n. 4/5, jul./out., p. 220-231, 1997.

STAIR, Ralph M.; REYNOLDS, George W. Princípios dos sistemas de informação. 9 ed. São Paulo: Cengage Learning, 2011.

SOUZA, Edivanio Duarte de; DIAS, Eduardo José Wense Dias; NASSIF, Mônica Erichsen. A Gestão da Informação e do Conhecimento na Ciência da Informação: perspectivas teóricas e práticas organizacionais. Informação & Sociedade: estudos, Paraíba, v. 21, n. 1, 2011. Disponível em:< http://www.ies.ufpb.br/ojs/index.php/ies/article/view/4039>. Acesso em: 21 jun. 2017.

SOUZA, Leocádio Leonardo Coelho de; SANTOS, Jane Lucia Silva. Gestão do conhecimento em organizações públicas: transferência do conhecimento suportada por tecnologias da informação e comunicação. In: 13º KM BRASIL, 13., 2016, São Paulo. Anais... São Paulo: SBGC, 2016. Disponível em: . Acesso em: 13 jul. 2017.

TARAPANOFF, kira (Org.). Inteligência, informação e conhecimento em corporações. Brasília, DF: IBICT; UNESCO, 2006. Disponível em:< http://unesdoc.unesco.org/images/0014/001469/146980por.pdf>. Acesso em: 13 jul. 2017.

UNIVERSIDADE FEDERAL DO RIO DE JANEIRO. Pró-Reitoria de Graduação. Divisão de Registro de Estudantes. 2017a. Disponível em: . Acesso em: 12 ago. 2017.

______. Núcleo de Computação Eletrônica. Institucional. Rio de Janeiro: NCE, 2017b. Disponível em:< http://www.nce.ufrj.br/institucional/historico.asp>. Acesso em: 10 ago. 2017b.

______. Portal do Aluno. Rio de Janeiro: UFRJ, 2017c. Disponível em:. Acesso em: 13 jul. 2017.

______. Pró-Reitoria de Graduação. Conselho de Ensino de Graduação. Resoluções: 2000/2009. Rio de Janeiro: UFRJ, 2017d. Disponível em: . Acesso em: 20 jul. 2017.

______. Pró-Reitoria de Graduação. Conselho de Ensino de Graduação. Resoluções: 2010/2019. Rio de Janeiro: UFRJ, 2017e. Disponível em: < https://xn-- graduao-2wa9a.ufrj.br/index.php/conselho-de-ensino-de-graduao-mainmenu148/resolues-ceg-240/2010-2019?start=50>. Acesso em: 1 ago. 2017.

______. Núcleo de Computação Eletrônica. Relatório Anual. Rio de Janeiro: UFRJ,1974.

______. Núcleo de Computação Eletrônica. Relatório Anual. Rio de Janeiro: UFRJ,1979.

______. Núcleo de Computação Eletrônica. Circuito impresso. Rio de Janeiro: UFRJ, 1998.

______. Núcleo de Computação Eletrônica. Circuito impresso. Rio de Janeiro: UFRJ, 2000.

VALLS, Valéria Martin, VERGUEIRO, Waldomiro C. S. A gestão da qualidade em serviços de informação no Brasil: uma revisão da literatura. Perspectivas em Ciência da Informação, Belo Horizonte, v. 3, n. 1, jan./jun. 1998.

VIEIRA, Priscila Rodrigues. Avaliação da qualidade da informação em sistemas de informações estratégicas voltados ao Judiciário Brasileiro. 83 f. 2015. Dissertação (Mestrado em Engenharia e Gestão do Conhecimento) – Universidade Federal de Santa Catarina, 2015.

VIEIRA, Sônia. Como elaborar questionários. São Paulo: Atlas, 2009.

WORTHEN, Blaine R.; SANDERS, James R.; FITZPATRICK, Jody L. Avaliação de programas: concepções e práticas. São Paulo: Ed. Gente, 2004.




DOI: http://dx.doi.org/10.22347/2175-2753v0i0.4815

Bookmark and Share


Direitos autorais 2024 Fundação Cesgranrio

Licença Creative Commons
Este obra está licenciado com uma Licença Creative Commons Atribuição-NãoComercial 4.0 Internacional.

Principios Norteadores para o Avaliador

Guiding Principles for Evaluators American Evaluation Association (AEA)

Com o proposito de guiar o trabalho dos profissionais de avaliação e assegurar a etica de sua atuacao, a American Evaluation Association (AEA) - Associacao Profissional de Avaliadores - estabeleceu cinco principios norteadores aqui resumidos:

1.  Indagacao Sistematica, no que se refere à capacidade de coletar dados utilizando tecnicas apropriadas e comunicando metodos e abordagens com a devida transparencia para permitir acesso e critica.

2.  Competencia, no que se refere a demonstrar atuacao competente perante os envolvidos no processo avaliativo e desenvolver continuamente sua capacidade para alcancar o mais alto nivel de desempenho possivel.

3.  Integridade/Honestidade, no que se refere a assegurar honestidade e integridade ao longo de todo o processo avaliativo, negociando com os envolvidos e interessados na avaliação e buscando esclarecer e orientar procedimentos que venham provocar distorcoes ou indevidas utilizacoes.

4.  Respeito pelas pessoas, no que se refere ao respeito pela seguranca, dignidade e auto-valorizacao dos envolvidos no processo avaliativo, atuando sempre com etica profissional, evitando riscos e prejuizos que possam afetar os participantes para assegurar, o melhor possivel, o respeito às diferencas e o direito social de retorno dos resultados, aos envolvidos.

5.  Responsabilidade pelo bem estar geral e público, no que se refere a levar em consideracao a diversidade de interesses e valores que possam estar relacionados ao público em geral,buscando responder nao somente às expectativas mais imediatas, mas tambem às implicacoes e repercussoes mais amplas e, nesse sentido, disseminar a informacao sempre que necessario.

Indexado em:

  1. Miguilim - Diretório das revistas científicas eletrônicas brasileiras

  2. DOAJ - Directory of Open Access Journals

  3. EBSCO - Information Services

  4. Edubase

  5. Google Scholar

  6. Latindex - Sistema regional de información en línea para revistas científicas de América Latina, el Caribe, España y Portugal

  7. LivRe! - Portal do CNEN - Comissão Nacional de Energia Nuclear do Ministério de Ciência, Tecnologia e Inovação

  8. OEI - Organizacion de Estados Iberoamericanos (Madri, Espanha, CREDI)

  9. RCAAP - Repositorio Cientifico de Acesso Aberto de Portugal

  10. REDIB - Red Iberoamericana de Innovación y Conocimiento Científico

  11. Scopus - A maior base de dados de abstracts e citacao de literatura revisada por pares:periodicos cientificos, livros e anais

 

Scimago

SJR : Scientific Journal Rankings

SCImago Journal & Country Rank
  
  

Meta: Aval., Rio de Janeiro, ISSN 2175-2753.