Densidade lexical em textos gerados pelo ChatGPT: implicações da inteligência artificial para a escrita em línguas adicionais

Silva, Antonio Marcio Da; Rottava, Lucia

doi:10.1590/1983-3652.2024.47836

Resumo

O avanço tecnológico tem tido um grande impacto na produção escrita, especialmente em Línguas Adicionais (LAs). Embora a tecnologia tenha trazido novas oportunidades para o ensino de LAs, ela também apresenta desafios, incluindo preocupações sobre a complexidade da escrita e a autenticidade dos trabalhos dos alunos. Uma dessas ferramentas é o ChatGPT, plataforma de inteligência artificial (IA) que tem sido objeto de debates desde sua popularização em 2022. Este estudo analisa um corpus composto por seis tarefas produzidas pelo ChatGPT em cinco idiomas (alemão, espanhol, francês, italiano e português), considerando os níveis de proficiência propostos pelo Quadro Comum Europeu de Referência para Línguas (CEFR), que totalizou 2991 textos e 706,401 palavras. Os dados foram gerados por alunos em um laboratório de informática em uma universidade britânica a partir de 100 diferentes perfis na plataforma do ChatGPT, seguindo instruções dos pesquisadores. A análise dos dados utiliza a linguística sistêmico-funcional (LSF) e o conceito de densidade lexical ( Halliday, 1985HALLIDAY, Michael Alexander Kirkwood. Spoken and written language. Geelong: Deakin University Press, 1985. (Language education)., 1987HALLIDAY, Michael Alexander Kirkwood. Spoken and written modes of meaning. In: HOROWITZ, Rosalind; SAMUELS, S. Jay (ed.). Comprehending oral and written language. Orlando: Academic Press, 1987. p. 55–82., 1993HALLIDAY, Michael Alexander Kirkwood. Part A. In: HALLIDAY, Michael Alexander Kirkwood; HASAN, Ruqaiya (ed.). Language, context and text. 2. ed. Oxford: Oxford University Press, 1989. p. 3–49.; Halliday; Matthiessen, 2014HALLIDAY, Michael Alexander Kirkwood; MATTHIESSEN, Christian Mathias Ingemar Martin. An Introduction to Functional Grammar. 4. ed. London: Edward Arnold, 2014) para investigar a complexidade dos textos produzidos, dado que a complexidade lexical está relacionada à proficiência na escrita, na qual textos mais avançados usam proporcionalmente mais “palavras de conteúdo” (nomes, verbos, adjetivos e alguns advérbios de modo). Os resultados revelam que o ChatGPT não segue as instruções das tarefas quanto ao número de palavras solicitadas, impactando, assim, no cálculo da densidade lexical, nem produz textos que mostram diferenças significativas da densidade lexical entre as línguas adicionais e níveis de proficiência.

Palavras-chave:
Línguas adicionais; ChatGPT; Inteligência Artificial; Linguística Sistêmico-funcional; Densidade lexical

[1] ^∗ Email: antonio.dasilva@essex.ac.uk

	Nível A1	Nível A2	Nível B1	Nível B2	Nível C1	Nível C2
Alemão	99%	84%	83%	78%	33%	0%
Espanhol	95%	88%	97%	88%	45%	3%
Francês	100%	98%	99%	99%	63%	1%
Italiano	94%	73%	89%	83%	19%	0%
Português	89%	76%	96%	86%	21%	0%

	Nível A1	Nível A2	Nível B1	Nível B2	Nível C1	Nível C2
Alemão	0%	0%	1%	0%	7%	96%
Espanhol	2%	0%	0%	1%	3%	82%
Francês	0%	0%	0%	0%	0%	72%
Italiano	1%	3%	1%	0%	16%	90%
Português	0%	1%	0%	0%	19%	93%

	Nível A1	Nível A2	Nível B1	Nível B2	Nível C1	Nível C2
Alemão	41.57	44.16	37.74	45.14	40.64	43.89
Espanhol	48.00	50.67	44.03	46.91	44.45	47.45
Francês	42.67	48.18	47.28	48.38	43.28	48.09
Italiano	46.51	49.51	49.47	49.53	45.05	48.78
Português	50.83	54.31	46.00	50.96	47.71	50.63

	Coeficiente de correlação	Coeficiente valor de t (t-value) - Constante	Coeficiente valor de t (t-value) - TotaldePalavras
Nível A1	-0.544	< 0.001	< 0.001
Nível A2	-0.142	< 0.001	0.001
Nível B1	0.124	< 0.001	0.006
Nível B2	0.011	< 0.001	0.808
Nível C1	-0.179	< 0.001	< 0.001
Nível C2	-0.039	< 0.001	0.389

Brasil

Brasil

Densidade lexical em textos gerados pelo ChatGPT: implicações da inteligência artificial para a escrita em línguas adicionais

Lexical density in texts generated by ChatGPT: implications of artificial intelligence for writing in additional languages

Resumo