Between innovation and skepticism

higher education professors facing assessment with the use of artificial intelligence

Authors

DOI:

https://doi.org/10.35699/2237-5864.2026.58840

Keywords:

assessment, artificial intelligence, ChatGPT, higher education, teacher training

Abstract

The main objective of this study was to investigate higher education teachers’ perceptions of ChatGPT, or similar tools, its uses, challenges, and difficulties associated with learning assessment. This is an exploratory research conducted in seven universities located in the Greater ABC region of São Paulo (São Paulo state). The research adopted a mixed-methods approach, structured in two phases: the first, qualitative in nature, consisted of conducting 16 interviews with professionals randomly selected in 2024, from Pedagogy, Literature, Medicine, and Law courses, among others; the second, quantitative in nature, completed in 2025, employed a Likert-type scale (N=136). The professors perceive ChatGPT as an effective resource for streamlining and personalizing assessment instruments, contributing to more innovative practices, and do not see it as a threat to teaching autonomy or student interaction. However, there is some hesitation regarding its use in formative assessment, highlighting gaps in training. There are also concerns about plagiarism and the superficiality of work produced by students, pointing to the need to develop evaluative judgment. Finally, although they recognize the innovative potential of these tools, the faculty remain skeptical about the replacement of summative assessments with more formative models and about a more transformative change in learning assessment. These data indicate the need for training policies that integrate artificial intelligence in a critical and pedagogical way.

Downloads

Download data is not yet available.

Author Biographies

  • Paulo Sérgio Garcia, City University of São Caetano do Sul

    Doutor em educação pela Faculdade de Educação da Universidade de São Paulo. Possui Pós-Doutorado com a realização de estudos em escolas no Brasil e na Itália. É professor titular da Universidade Municipal de São Caetano do Sul (Departamento de Educação) e líder do Grupo de Pesquisas em Avaliação Educacional e Desempenho (GPAED-CNPq), onde desenvolve estudos sobre assuntos relacionados à avaliação educacional, sobretudo da aprendizagem.

  • Paulo Roberto Rego dos Santos, City University of São Caetano do Sul

    Pedagogo e mestre em Educação, vinculado ao Programa de Pós-Graduação em Educação da Universidade Municipal de São Caetano do Sul, concentrando sua pesquisa na linha de Política e Gestão da Educação. É membro ativo do Grupo de Pesquisa em Avaliação e Desempenho Educacional (GPAED/CNPq).

  • Patrícia Cecília Silva, City University of São Caetano do Sul

    Mestranda em educação na Universidade Municipal de São Caetano do Sul (USCS). Possui graduação em Ciência e Tecnologia e Licenciatura em Química, ambas pela Universidade Federal do ABC. É professora de ensino médio e técnico na USCS.

  • Nicolas Valverde Costa, City University of São Caetano do Sul

    Licenciando em Pedagogia pela Universidade Municipal de São Caetano do Sul, foi bolsista PIBIC Iniciação Científica-CNPq e PIBID/CAPES (2023/2024). Participou do programa internacional UNIGOU/INCBAC, desenvolvendo pesquisa sobre o uso da inteligência artificial nas humanidades em parceria com a Universidade Palacký Olomouc (UPOL – Rep. Tcheca). Atualmente, é bolsista CAPES/PIBID e membro do Grupo de Pesquisa em Avaliação e Desempenho Educacional (GPAED/CNPq).

References

AGUIAR, Juliana; GONZAGA, Luciano Luz; LANNES, Denise. Representações sociais acerca de avaliação na educação superior: o caso de IES pública estadual. In: VI CONGRESSO NACIONAL DE EDUCAÇÃO, 2019, Campina Grande. Anais eletrônicos. Campina Grande, 2019. Disponível em: https://editorarealize.com.br/index.php/artigo/visualizar/62505. Acesso em: 05 jan. 2025.

ALAM, Ashraf. Possibilities and apprehensions in the landscape of artificial intelligence in education. International Conference on Computational Intelligence and Computing Applications, Nagpur (Índia), p. 1-8, 2021. DOI: https://doi.org/10.1109/iccica52458.2021.9697272. Disponível em: https://ieeexplore.ieee.org/document/9697272. Acesso em: 11 jan. 2025.

AMANTE, Lucia; OLIVEIRA, Isolina; PEREIRA, António. Serviços e modelos de apoio ao estudante em contexto de ensino online. In: MONTEIRO, A.; MOREIRA, J. A. (org.). Ensino Superior a Distância e e-learning: desafios e oportunidades. Coimbra: Imprensa da Universidade de Coimbra, 2017. p. 97-116.

BARDIN, Laurence. Análise de Conteúdo. Tradução: Luís Antero Reto e Augusto Pinheiro. Lisboa: Edições 70, 1977.

BEARMAN, Margaret; TAI, Joanna; DAWSON, Phillip; BOUD, David; AJJAWI, Rola. Developing evaluative judgement for a time of generative artificial intelligence. Assessment & Evaluation in Higher Education, [S.l.], v. 49, n. 6, p. 893-905, 2024. DOI: https://doi.org/10.1080/02602938.2024.2335321. Disponível em: https://www.tandfonline.com/doi/full/10.1080/02602938.2024.2335321. Acesso em: 11 jan. 2025.

BEAULAC, Cédric; ROSENTHAL, Jeffrey S. Predicting university students’ academic success and major using random forests. Research in Higher Education, [S.l.], v. 60, n. 7, p. 1048-1064, 2019. DOI: https://doi.org/10.1007/s11162-019-09546-y. Disponível em: https://arxiv.org/abs/1802.03418. Acesso em: 11 jan. 2025.

BERTAUX, Daniel. L’approche biographique: sa validité méthodologique, ses potentialités. In: BERTAUX, Daniel. Cahiers Internationaux de Sociologie. Paris: Presses Universitaires de France, 1980. v. 69, p. 197-225.

BLACK, Paul; WILIAM, Dylan. Assessment and classroom learning. Assessment in Education: Principles, Policy & Practice, London, v. 5, p. 7-74, 1998. DOI: http://dx.doi.org/10.1080/0969595980050102. Disponível em: https://www.gla.ac.uk/t4/learningandteaching/files/PGCTHE/BlackandWiliam1998.pdf. Acesso em: 05 jan. 2025.

BOUD, David. Sustainable assessment: rethinking assessment for the learning society. Studies in Continuing Education, [S.l.], v. 22, p. 151-167, 2000. DOI: https://doi.org/10.1080/713695728. Disponível em: https://www.tandfonline.com/doi/abs/10.1080/713695728. Acesso em: 05 jan. 2025.

CAMPOS, Luis Fernando Altenfelder de Arruda; LASTÓRIA, Luiz Antônio Calmon Nabuco. Semiformação e inteligência artificial no ensino. Pro-Posições, Campinas, v. 31, p. 1-12, 2020. https://doi.org/10.1590/1980-6248-2018-0105. Disponível em: https://www.scielo.br/j/pp/a/RMMLt3y3cwPs9f4cztTtMSv/?lang=pt. Acesso em: 05 jan. 2025. Acesso em: 21 jan. 2025.

CHEN, Xieling; ZOU, Di; XIE, Haoran; CHENG, Gary; LIU, Caixia. Two decades of artificial intelligence in education: contributors, collaborations, research topics, challenges, and future directions. Educational Technology & Society, Hong Kong, v. 25, n. 1, p. 28-47, 2022. DOI: https://doi.org/10.30191/ETS.202201_25(1).0003. Disponível em: https://scholars.ln.edu.hk/en/publications/two-decades-of-artificial-intelligence-in-education-contributors-/. Acesso em: 12 jan. 2025.

COOPER, Grant. Examining science education in ChatGPT: an exploratory study of generative artificial intelligence. Journal of Science Education and Technology, [S. l.], v. 32, p. 444-452, 2023. DOI: https://doi.org/10.1007/s10956-023-10039-y. Disponível em: https://link.springer.com/article/10.1007/s10956-023-10039-y. Acesso em: 12 jan. 2025.

COSTA JÚNIOR, José Francisco et al. A inteligência artificial como ferramenta de apoio no ensino superior. Rebena – Revista Brasileira de Ensino e Aprendizagem, [S. l.], v. 6, p. 246-269, 2023. Disponível em: https://rebena.emnuvens.com.br/revista/article/view/111. Acesso em: 04 jan. 2025.

COSTA, Nicolas Valverde; GARCIA, Paulo Sérgio. Avaliação educacional e inteligência artificial: o olhar de futuros professores. ARACÊ, São José dos Pinhais, v. 7, n. 2, p. 9731-9746, 2025. DOI: https://doi.org/10.56238/arev7n2-297. Disponível em: https://periodicos.newsciencepubl.com/arace/article/view/3559. Acesso em: 7 jan. 2025.

CRESSWELL, John W. Projeto de pesquisa: métodos qualitativo, quantitativo e misto. 2. ed. Porto Alegre: Artmed, 2007.

DUQUE, Rita de Cássia Soares et al. Formação de professores e a inteligência artificial: desafios e perspectivas. Contribuciones a las Ciencias Sociales, [S. l.], v. 16, n. 7, p. 6864-6878, 2023. DOI: https://doi.org/10.55905/revconv.16n.7-158. Disponível em: https://ojs.revistacontribuciones.com/ojs/index.php/clcs/article/view/1306. Acesso em: 7 jan. 2025.

EDWARDS, Frances. The effect of the lens of the teacher on summative assessment decision making: the role of amplifiers and filters. The Curriculum Journal, [S. l.], v. 31, p. 379-397, 2020. DOI: https://doi.org/10.1002/curj.4. Disponível em: https://bera-journals.onlinelibrary.wiley.com/doi/10.1002/curj.4. Acesso em: 7 jan. 2025.

FERNANDES, Allyson Barbosa; NARCISO, Rodi; GUIMARÃES, Christiane Diniz; MATTOS, Cláudio Gonçalves de. Inteligência artificial na avaliação de desempenho acadêmico: desafios e oportunidades no ensino médio. Revista Ibero-Americana de Humanidades, Ciências e Educação, [S. l.], v. 10, n. 3, p. 180-196, 2024. DOI: https://doi.org/10.51891/rease.v10i3.13059.

FLICK, Uwe. Uma introdução à pesquisa qualitativa. 2. ed. Tradução: Sandra Netz. Porto Alegre: Bookman, 2004.

GARCÍA-PEÑALVO, Francisco José. The perception of artificial intelligence in educational contexts after the launch of ChatGPT: disruption or panic? Education in the Knowledge Society, Salamanca, v. 24, e32111, 2023. DOI: https://doi.org/10.14201/eks.31279. Disponível em: https://revistas.usal.es/index.php/eks/article/view/31279. Acesso em: 7 jan. 2025.

GARCIA, Paulo Sérgio (org.) Avaliação formativa para a aprendizagem: um estudo exploratório. São Carlos: Pedro & João Editores, 2024.

GARDNER, John; O’LEARY, Michael; YUAN, Li. Artificial intelligence in educational assessment: “Breakthrough? Or buncombe and ballyhoo?” Journal of Computer Assisted Learning, [S. l.], v. 37, n. 5, p. 1207-1216, 2021. DOI: https://doi.org/10.1111/jcal.12577. Disponível em: https://onlinelibrary.wiley.com/doi/10.1111/jcal.12577. Acesso em: 9 jan. 2025.

GATTI, Bernadete Angelina; BARRETO, Elba Siqueira de Sá; ANDRÉ, Marli Eliza Dalmazo Afonso de; ALMEIDA, Patrícia Cristina Albieri. Professores do Brasil: novos cenários de formação. Brasília: UNESCO, 2019.

GONZÁLEZ-CALATAYUD, Victor; PRENDES-ESPINOSA, Paz; ROIG-VILA, Rosabel. Artificial intelligence for student assessment: a systematic review. Applied Sciences, [S. l.], v. 11, p. 5467, 2021. DOI: https://doi.org/10.3390/app11125467. Disponível em: https://www.mdpi.com/2076-3417/11/12/5467. Acesso em: 19 jan. 2025.

HADJI, Charles. Avaliação desmistificada. Porto Alegre: Artmed Editora, 2001.

HOODA, Monika; RANA, Chhavi; DAHIYA, Omdev; RIZWAN, Ali; HOSSAIN, Md Shamim. Artificial intelligence for assessment and feedback to enhance student success in higher education. Mathematical Problems in Engineering, [S. l.], p. 1-19, 2022. DOI: https://doi.org/10.1155/2022/5215722. Disponível em: https://onlinelibrary.wiley.com/doi/10.1155/2022/5215722. Acesso em: 22 jan. 2025.

HOPFENBECK, Therese N.; ZHANG, Zhonghua; SUN, Sundance Zhihong; ROBERTSON, Pam; MCGRANE, Joshua A. Challenges and opportunities for classroom-based formative assessment and AI: a perspective article. Frontiers in Education, Lausanne, v. 8, 2023. DOI: https://doi.org/10.3389/feduc.2023.1270700. Disponível em: https://www.frontiersin.org/journals/education/articles/10.3389/feduc.2023.1270700/full. Acesso em: 7 jan. 2025.

IBGE. INSTITUTO BRASILEIRO DE GEOGRAFIA E ESTATÍSTICA. Estimativas da população residente com data de referência 1º de julho de 2022. Disponível em: https://www.ibge.gov.br/estatisticas/sociais/populacao/9103-estimativas-de-populacao.html.

KASNECI, Enkelejda et al. ChatGPT for good? On opportunities and challenges of large language models for education. Learning and Individual Differences, [S. l.], v. 103, 2023. DOI: https://doi.org/10.1016/j.lindif.2023.102274. Disponível em: https://www.sciencedirect.com/science/article/pii/S1041608023000195?via%3Dihub. Acesso em: 22 jan. 2025.

LIM, Weng Marc; GUNASEKARA, Asanca; PALLANT Jessica Leigh; PALLANT, Jason Ian; PECHENKINA, Ekaterina. Generative AI and the future of education: ragnarök or reformation? A paradoxical perspective from management educators. The International Journal of Management Education, v. 21, n. 2, jul. 2023, p. 100790. DOI: https://doi.org/10.1016/j.ijme.2023.100790. Disponível em: https://www.sciencedirect.com/science/article/pii/S1472811723000289?via%3Dihub. Acesso em: 30 jan. 2026.

LIMA, Thamyla; BARRADAS FILHO, Alex; BARROS, Alan K.; VIANA, Davi; BOTTENTUIT JUNIOR, João B.; RIVERO, Luis. Avaliando um jogo educacional para o ensino de inteligência artificial: qual metodologia para avaliação escolher? In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO. Porto Alegre: Sociedade Brasileira de Computação, 2020. p. 66-70. DOI: https://doi.org/10.5753/wei.2020.11131. Disponível em: https://sol.sbc.org.br/index.php/wei/article/view/11131. Acesso em: 30 jan. 2026.

LO, Chung Kwan. What is the impact of ChatGPT on education? A rapid review of the literature. Education Sciences, [S. l.], v. 13, n. 4, p. 410, 2023. DOI: https://doi.org/10.3390/educsci13040410. Disponível em: https://www.mdpi.com/2227-7102/13/4/410. Acesso em: 7 jan. 2025.

LUCKEZI, Cipriano Carlos. Avaliação em educação: questões epistemológicas e práticas. São Paulo: Cortez, 2018.

MALDONADO-FUENTES, Ana Carolina. Representación escolarizada de la evaluación: un aprendizaje social profesional. Alteridad, Quito, v. 16, n. 2, p. 184-197, 2021. DOI: https://doi.org/10.17163/alt.v16n2.2021.02. Disponível em: https://alteridad.ups.edu.ec/index.php/alteridad/article/view/2.2021.02. Acesso em: 7 jan. 2025.

MARCOM, Jacinta Lúcia Rizzi; PORTO, Ana Paula Teixeira. O uso da inteligência artificial na educação com ênfase à formação docente. Revista de Ciências Humanas, Frederico Westphalen, v. 24, n. 3, p. 229-246, 2023. DOI: https://doi.org/10.31512/19819250.2023.24.03.229-246. Disponível em: https://revistas.fw.uri.br/revistadech/article/view/4584. Acesso em: 27 jan. 2025.

MARTÍNEZ-COMESANA, Miguel; RIGUEIRA-DÍAZ, Xurxo; LARRAÑAGA-JANEIRO, Ana; MARTÍNEZ-TORRES, Javier; OCARRANZA-PRADO, Iago; KREIBEL, Denis. Impact of artificial intelligence on assessment methods in primary and secondary education: systematic literature review. Revista de Psicodidáctica (English ed.), [S. l.], v. 28, n. 2, p. 93-103, 2023. DOI: https://doi.org/10.1016/j.psicoe.2023.06.002. Disponível em: https://www.sciencedirect.com/science/article/pii/S2530380523000072?via%3Dihub. Acesso em: 8 jan. 2025.

OBEDUCGABC. OBSERVATÓRIO DE EDUCAÇÃO DO GRANDE ABC. O uso do ChatGPT relacionado às possibilidades para a educação infantil e ensino fundamental. Relatório primeiro semestre de 2024. Disponível em: https://sites.google.com/view/observatriodeeducaodograndeabc/p%C3%A1gina-inicial. Acesso em: 30 jan. 2026.

OWAN, Valentine Joseph; ABANG, Kingsley Bekom; IDIKA, Delight Omoji; ETTA, Eugene Onor; BASSEY, Bassey Asuquo. Exploring the potential of artificial intelligence tools in educational measurement and assessment. Eurasia Journal of Mathematics, Science and Technology Education, [S. l.], v. 19, n. 8, em2307, 2023. DOI: https://doi.org/10.29333/ejmste/13428. Disponível em: https://www.ejmste.com/article/exploring-the-potential-of-artificial-intelligence-tools-in-educational-measurement-and-assessment-13428. Acesso em: 27 jan. 2025.

POPHAM, W. James. Classroom assessment: what teachers need to know. Boston: Pearson, 2014.

PRADO, Magaly. Inteligência artificial e os impactos dos grandes modelos de linguagem na educação e na cultura informativa. Jornal da USP, 12 jan. 2024. Disponível em: https://jornal.usp.br/artigos/inteligencia-artificial-e-os-impactos-dos-grandes-modelos-de-linguagem-na-educacao-e-na-cultura-informativa/. Acesso em: 3 de fev. 2025.

PREUSS, Evandro; PASSERINO, Liliana; BALDASSARRI, Sandra; CAMARGO, Vinicius R.; ALMEIDA, Lana Kober de. E-DUB-A: a tangible educational resource editor in inclusive classes. In: IEEE 19TH INTERNATIONAL CONFERENCE ON ADVANCED LEARNING TECHNOLOGIES (ICALT), Maceió, 2019. Maceió: IEEE, 2019. p. 303-307. DOI: https://doi.org/10.1109/ICALT.2019.00095. Disponível em: https://ieeexplore.ieee.org/document/8820875 . Acesso em: 7 jan. 2025.

RODRIGUES, Olira Saraiva; RODRIGUES, Karoline Santos. A inteligência artificial na educação: os desafios do ChatGPT. Texto Livre, Belo Horizonte, v. 16, p. e45997, 2023. DOI: https://doi.org/10.1590/1983-3652.2023.45997. Disponível em: https://periodicos.ufmg.br/index.php/textolivre/article/view/45997. Acesso em: 7 jan. 2025.

SHIN, Jinnie; CHEN, Fu; LU, Chang; BULUT, Okan. Analyzing students’ performance in computerized formative assessments to optimize teachers’ test administration decisions using deep learning frameworks. Journal of Computers in Education, [S. l.], v. 9, p. 71-91, 2022. DOI: https://doi.org/10.1007/s40692-021-00196-7. Disponível em: https://link.springer.com/article/10.1007/s40692-021-00196-7. Acesso em: 7 jan. 2025.

SWIECKI, Zachari et al. Assessment in the age of artificial intelligence. Computers and Education: Artificial Intelligence, [S. l.], v. 3, p. 1-10, 2022. DOI: https://doi.org/10.1016/j.caeai.2022.100075. Disponível em: https://www.sciencedirect.com/science/article/pii/S2666920X22000303. Acesso em: 7 jan. 2025.

TAI, Joanna; AJJAWI, Rola; BOUD, David; DAWSON, Phillip; PANADERO, Ernesto. Developing evaluative judgement: enabling students to make decisions about the quality of work. Higher Education, [S. l.], v. 76, n. 3, p. 467-481, 2018. DOI: https://doi.org/10.1007/s10734-017-0220-3. Disponível em: https://link.springer.com/article/10.1007/s10734-017-0220-3. Acesso em: 7 jan. 2025.

VIEIRA, Sonia. Introdução à bioestatística. Rio de Janeiro: Elsevier Brasil, 1997.

VILLAS BOAS, Benigna Maria de Freitas. Avaliação formativa e formação de professores: ainda um desafio. Linhas Críticas, Brasília, v. 12, n. 22, p. 75-90, 2006. DOI: https://doi.org/10.26512/lc.v12i22.3283. Disponível em: https://periodicos.unb.br/index.php/linhascriticas/article/view/3283. Acesso em: 14 fev. 2025.

VILLAS BOAS, Benigna Maria de Freitas (org.). Avaliação formativa: práticas inovadoras. Campinas, SP: Papirus, 2011.

WANG, Xingzhi; ANWER, Nabil; DAI, Yun; LIU, Ang. ChatGPT for design, manufacturing, and education. Procedia CIRP, [S.l.], v. 119, p. 7-14, 2023. DOI: https://doi.org/10.13140/RG.2.2.35077.22244. Disponível em: https://www.sciencedirect.com/science/article/pii/S2212827123000723. Acesso em: 10 jan. 2025.

XU, Xing; WANG, Jianzhong; PENG, Hao; WU, Ruilin. Prediction of academic performance associated with internet usage behaviors using machine learning algorithms. Computers in Human Behavior, [S.l.], v. 98, p. 166-173, 2019. DOI: https://doi.org/10.1016/j.chb.2019.04.015. Disponível em: https://www.sciencedirect.com/science/article/pii/S0747563219301554. Acesso em: 7 jan. 2025.

ZHAI, Xiaoming; NEHM, Ross H. AI and formative assessment: the train has left the station. Journal of Research in Science Teaching, [S. l.], v. 60, n. 6, p. 1390-1398, 2023. DOI: https://doi.org/10.1002/tea.21885. Disponível em: https://onlinelibrary.wiley.com/doi/full/10.1002/tea.21885. Acesso em: 7 jan. 2025.

ZHOU, Jie; KE, Pei; QIU, Xipeng; HUANG, Minlie; ZHANG, Junping. ChatGPT: potential, prospects, and limitations. Frontiers of Information Technology & Electronic Engineering, [S. l.], v. 25, p. 6-11, 2023. DOI: https://doi.org/10.1631/FITEE.2300089. Disponível em: https://link.springer.com/article/10.1631/FITEE.2300089. Acesso em: 7 jan. 2025.

Seção especial: IA nos processos de ensino-aprendizagem

Published

2026-03-09

Issue

Section

Seção especial: IA nos processos de ensino-aprendizagem

How to Cite

GARCIA, Paulo Sérgio; SANTOS, Paulo Roberto Rego dos; SILVA, Patrícia Cecília; COSTA, Nicolas Valverde. Between innovation and skepticism: higher education professors facing assessment with the use of artificial intelligence. Revista Docência do Ensino Superior, Belo Horizonte, v. 16, p. 1–23, 2026. DOI: 10.35699/2237-5864.2026.58840. Disponível em: https://periodicos.ufmg.br/index.php/rdes/article/view/58840. Acesso em: 10 mar. 2026.