Usabilidade percebida e atributos de qualidade em um sistema acadêmico: reanálise do SAGRES/UESB e proposta de estrutura analítica em três eixos

Camilo Alves Mascarenhas de  Almeida; Francisco dos Santos Carvalho; Gidevaldo Novais Santos

doi:10.22481/recic.v8i1.20831

Authors

Camilo Alves Mascarenhas de Almeida Universidade Estadual do Sudoeste da Bahia https://orcid.org/0009-0006-8706-0939
Francisco dos Santos Carvalho Universidade Estadual do Sudoeste da Bahia https://orcid.org/0000-0003-3598-329X
Gidevaldo Novais Santos Universidade Estadual do Sudoeste da Bahia https://orcid.org/0000-0003-3170-0715

DOI:

https://doi.org/10.22481/recic.v8i1.20831

Keywords:

Perceived usability, Academic information systems, Software quality, ISO/IEC 25010, SAGRES

Abstract

This paper revisits data from a 2022 study on SAGRES, the academic information system used at the Universidade Estadual do Sudoeste da Bahia (UESB), to examine how its users perceived their experience of use during that period. The reanalysis starts from an important distinction: interaction problems, slowness, instability, distrust in the service, and functional coverage can all appear together in the user's experience, yet they do not belong to the same quality domain. Based on responses from 43 participants, the study revisits the original instrument, separates the items most directly related to interaction from those associated with the perceived behavior of the service, and compares these results with the strengths and weaknesses reported freely by respondents. The findings point to a predominantly unfavorable interaction experience, marked especially by difficulties with navigation, consistency, and perceived performance, while participants nonetheless recognize value in the academic functions the system offers. Based on this contrast, the paper proposes a three-axis analytical framework: perceived interaction/usability, perceived service behavior, and perceived functional adequacy. The proposal does not constitute a new scale, but a way of organizing evidence of distinct natures and guiding future evaluations of academic systems.

Downloads

Download data is not yet available.

Author Biographies

Camilo Alves Mascarenhas de Almeida, Universidade Estadual do Sudoeste da Bahia

Bacharel em Ciência da Computação pela Universidade Estadual do Sudoeste da Bahia (UESB, 2022) e Especialista em Gestão de Produtos Digitais pela FIAP (2026), com especializações em Digital Product Management pela University of Virginia, Product Ideation, Design, and Management pela University of Maryland, Software Development Lifecycle pela University of Minnesota e Software Product Management pela University of Alberta. Sua monografia investigou a usabilidade do sistema acadêmico SAGRES da UESB, sob orientação do Prof. Dr. Francisco dos Santos Carvalho. Atua como Product Manager na PROJECT/X e na gestão de produto da Plataforma Reunir, marketplace digital de inserção socioprodutiva. Integra o Grupo de Trabalho de GovTech e Inteligência Artificial do Conselho Municipal de Inovação (CONEIC) e o comitê de governança do Inova Conquista, ecossistema local de inovação. Foi bolsista do Programa de Residência em Software do CEPEDI, financiado pelo MCTI, atuando como Cientista de Dados e Scrum Master. Atuou como tradutor e revisor da Revista Binacional Brasil-Argentina e na organização da Semana Nacional de Ciência e Tecnologia/Cyber Conquista, em Vitória da Conquista (2022 e 2023), e do XIV Colóquio Nacional/VII Colóquio Internacional (2022). Atua também como parecerista ad hoc do XVI Colóquio Nacional/IX Colóquio Internacional do Museu Pedagógico da UESB (2026). Atualmente, seus interesses de pesquisa concentram-se na interseção entre Interação Humano-Computador, UX e educação em Computação, com ênfase no uso da gamificação no ensino de programação e algoritmos e nos processos de engajamento e retenção de estudantes.

Francisco dos Santos Carvalho, Universidade Estadual do Sudoeste da Bahia

Doutor pela Universitat de Barcelona (UB), España. Cursou graduação em Administração pela Universidade Estadual do Sudoeste da Bahia (1990) e mestrado em Ciências da Computação pela Universidade Federal de Pernambuco (2003). Atuou como professor e analista na Universidade Estadual do Sudoeste da Bahia. Experiência em Administração, Ciência da Computação, Engenharia de Computação, Engenharia da Produção, Sistemas de Informação, Estágio Supervisionado, Metodologia da Pesquisa, Trabalhos de Conclusão de Curso, Organização, Sistemas e Métodos, Consultoria Empresarial, Assessoria Técnica, Educação à Distância (EAD), Coordenação de Projetos de Pesquisa e Extensão, Políticas Públicas, Planificação Territorial e Gestão Ambiental. Cursou pós-graduação (especialização) em: Administração Pública (UEFS), Orçamento e Programação (UFBA), Sistemas de Informação e Planejamento Estratégico (PUC-MG), Ciência da Computação (UFPE-UESB), Teoria da Computação (UFPE-UESB) e em Gestão de Instituições de Ensino Superior.

Gidevaldo Novais Santos, Universidade Estadual do Sudoeste da Bahia

Possui graduação em Ciências Habilitação Matemática pela Universidade Estadual de Santa Cruz (1999), mestrado em Ciências Ambientais pela Universidade Estadual do Sudoeste da Bahia (2015) e doutorado em Educação e Contemporaneidade pela Universidade do Estado da Bahia (2023). Atualmente é pesquisador da Universidade do Estado da Bahia e professor adjunto da Universidade Estadual do Sudoeste da Bahia. Tem experiência na área de Educação e Computação, com ênfase em Tecnologia Educacional, atuando principalmente nos seguintes temas: informática na educação, sistemas de informação, ensino de computação, desenvolvimento de software e cultura digital.

References

INTERNATIONAL ORGANIZATION FOR STANDARDIZATION. ISO 9241-11:2018 – Ergonomics of human-system interaction – Part 11: Usability: definitions and concepts. Geneva: ISO, 2018.

ALMEIDA, C. A. M. de. Conhecimentos de interação em busca de melhorias no processo de desenvolvimento de sistemas de software: um estudo de caso à luz da análise de usabilidade. 2022. Monografia (Bacharelado em Ciência da Computação) – Universidade Estadual do Sudoeste da Bahia, Vitória da Conquista, 2022.

INTERNATIONAL ORGANIZATION FOR STANDARDIZATION; INTERNATIONAL ELECTROTECHNICAL COMMISSION. ISO/IEC 25010:2011 – Systems and software engineering – SQuaRE – System and software quality models. Geneva: ISO/IEC, 2011.

DEMIRKOL, D.; SENELER, C.; DAIM, T.; SHAYGAN, A. Measuring perceived usability of university students towards a student information system (SIS): a Turkish university case. Technology in Society, v. 62, 101281, 2020. DOI: 10.1016/j.techsoc.2020.101281.

COSTA, R. P. da; SANTOS, A. F. S. dos; SANTIAGO, C. P. Análise de usabilidade do sistema Q-Acadêmico utilizando o método System Usability Scale (SUS): um estudo de caso. In: ENCONTRO UNIFICADO DE COMPUTAÇÃO DO PIAUÍ (ENUCOMPI), 14., 2021. Anais [...]. Porto Alegre: SBC, 2021. p. 231-238. DOI: 10.5753/enucompi.2021.17776.

KHALIDA, R.; PAMUNGKAS, R. W. P. Enhancing usability of the academic information system at Bhayangkara University: a design thinking and system usability approach. PIKSEL: Penelitian Ilmu Komputer Sistem Embedded and Logic, v. 11, n. 2, p. 373-382, 2023. DOI: 10.33558/piksel.v11i2.7239.

AL-TAHAT, K. S. Using A-UMUX to measure perceived usability of the student information system (SIS) at Arab Open University. In: 2025 International Conference on Artificial Intelligence, Computer, Data Sciences and Applications (ACDSA). IEEE, 2025. DOI: 10.1109/ACDSA65407.2025.11166652.

NAMBO, I.; PAKAYA, N.; AMALI, L. N.; OLII, S. Evaluasi kualitas sistem informasi akademik terpadu (SIAT) menggunakan ISO/IEC 25010. Jambura Journal of Informatics, v. 7, n. 2, p. 143-153, 2025. DOI: 10.37905/jji.v1i2.33720.

CAROLINE, F. B.; ATIKAH, A. N. N.; SERVANDA, Y.; GANDARRITYAZ, R. Evaluasi Usability SIAM Universitas Mulia dengan Metode SUS. Jurnal Teknologi Informasi dan Ilmu Komputer, v. 2, n. 1, p. 18-25, 2026. DOI: 10.65258/jutekom.v2.i1.40.

VLACHOGIANNI, P.; TSELIOS, N. Perceived usability evaluation of educational technology using the System Usability Scale (SUS): a systematic review. Journal of Research on Technology in Education, v. 54, n. 3, p. 392-409, 2022. DOI: 10.1080/15391523.2020.1867938.

VLACHOGIANNI, P.; TSELIOS, N. Perceived usability evaluation of educational technology using the Post-Study System Usability Questionnaire (PSSUQ): a systematic review. Sustainability, v. 15, n. 17, 12954, 2023. DOI: 10.3390/su151712954.

INTERNATIONAL ORGANIZATION FOR STANDARDIZATION; INTERNATIONAL ELECTROTECHNICAL COMMISSION. ISO/IEC 25010:2023 – Systems and software engineering – Systems and software Quality Requirements and Evaluation (SQuaRE) – Product quality model. Geneva: ISO/IEC, 2023.

BROOKE, J. SUS: a "quick and dirty" usability scale. In: JORDAN, P. W. et al. (Eds.). Usability Evaluation in Industry. London: Taylor & Francis, 1996. p. 189-194.

LEWIS, J. R. The System Usability Scale: past, present, and future. International Journal of Human-Computer Interaction, v. 34, n. 7, p. 577-590, 2018. DOI: 10.1080/10447318.2018.1455307.

FILARDI, A. L.; TRAINA, A. J. M. Montando questionários para medir a satisfação do usuário: avaliação de interface de um sistema que utiliza técnicas de recuperação de imagens por conteúdo. In: SIMPÓSIO BRASILEIRO DE FATORES HUMANOS EM SISTEMAS COMPUTACIONAIS, 8., 2008, Porto Alegre. Anais [...]. Porto Alegre: SBC, 2008. p. 176-185.

DAVIS, F. D. Perceived usefulness, perceived ease of use, and user acceptance of information technology. MIS Quarterly, v. 13, n. 3, p. 319-340, 1989. DOI: 10.2307/249008.

BROWN, S. A.; MASSEY, A. P.; MONTOYA-WEISS, M. M.; BURKMAN, J. R. Do I really have to? User acceptance of mandated technology. European Journal of Information Systems, v. 11, n. 4, p. 283-295, 2002. DOI: 10.1057/palgrave.ejis.3000438.

VENKATESH, V.; DAVIS, F. D. A theoretical extension of the technology acceptance model: four longitudinal field studies. Management Science, v. 46, n. 2, p. 186-204, 2000. DOI: 10.1287/mnsc.46.2.186.11926.

DEČMAN, M. Modeling the acceptance of e-learning in mandatory environments of higher education: the influence of previous education and gender. Computers in Human Behavior, v. 49, p. 272-281, 2015. DOI: 10.1016/j.chb.2015.03.022.

BRASIL. Ministério da Saúde. Conselho Nacional de Saúde. Resolução nº 510, de 7 de abril de 2016. Dispõe sobre as normas aplicáveis a pesquisas em Ciências Humanas e Sociais. Diário Oficial da União, Brasília, DF, 24 maio 2016, seção 1, p. 44-46.

BARDIN, L. Análise de conteúdo. Lisboa: Edições Setenta, 1994.