Estudo sobre o impacto dos modelos de linguagem de inteligência artificial nas capacidades cognitivas

Recentemente, um estudo aprofundado conduzido por uma instituição de ensino renomada investigou o impacto do uso de grandes modelos de linguagem (LLM) nas capacidades cognitivas em ambientes educacionais. Esta pesquisa de 4 meses envolveu 54 participantes e teve como objetivo avaliar os potenciais efeitos do uso de LLM em tarefas de escrita sobre a função cerebral e as capacidades cognitivas.

A equipe de pesquisa dividiu os participantes em três grupos: aqueles que usaram LLM, aqueles que usaram motores de busca e aqueles que dependeram apenas do cérebro. Cada grupo completou tarefas de escrita sobre diferentes tópicos dentro de um período de tempo estipulado. A pesquisa também incluiu uma quarta rodada de experimentos, onde alguns participantes mudaram a forma como usavam as ferramentas.

Para avaliar de forma abrangente o desempenho dos participantes, o estudo utilizou vários métodos:

1. Registo de Electroencefalograma (EEG): utilizado para avaliar o envolvimento cognitivo e a carga.
2. Análise de Processamento de Linguagem Natural (NLP): Avaliar as características do conteúdo escrito.
3. Entrevistas com participantes: compreender a experiência subjetiva.
4. Professores humanos e avaliação de IA: Avaliar os resultados da escrita.

Os resultados da pesquisa mostram que os participantes que usaram LLM apresentaram diferenças significativas em vários aspectos:

• Homogeneidade na escrita: Os artigos do grupo LLM demonstram uma alta consistência em vários temas.
• Uso de entidades nomeadas: O grupo LLM utilizou o maior número de entidades nomeadas específicas.
• Padrão de Conexão Neural: O grupo LLM mostrou a mais fraca acoplamento de rede cerebral.
• Sentido de pertencimento do artigo: O grupo LLM tem o menor sentido de pertencimento às suas obras.
• Capacidade de memória: o grupo LLM teve o pior desempenho ao citar conteúdos de artigos que acabaram de finalizar.

Em comparação, o grupo que depende apenas do cérebro apresenta o melhor desempenho em termos de diversidade de escrita, atividade da rede cerebral e senso de pertencimento ao artigo. O desempenho do grupo de motores de busca geralmente fica entre os outros dois grupos.

A pesquisa também descobriu que, após a mudança na forma de uso das ferramentas, os padrões de atividade cerebral dos participantes também mudaram. Os participantes que passaram de LLM para depender apenas do cérebro mostraram conexões neurais mais fracas, enquanto os participantes que foram de depender apenas do cérebro para usar LLM mostraram uma capacidade de recuperação de memória mais forte.

Os resultados deste estudo suscitaram uma reflexão sobre a aplicação do LLM na educação. Embora as ferramentas LLM possam aumentar a eficiência na escrita, a dependência excessiva pode afetar o desenvolvimento das capacidades cognitivas, especialmente para os usuários mais jovens. Os pesquisadores sugerem que, antes de uma ampla aceitação dos benefícios do LLM para os humanos, mais estudos de longo prazo são necessários para entender o seu impacto no cérebro humano.

É importante notar que este estudo ainda não foi sujeito a revisão por pares. Não deve ser entendido como uma negação completa do valor dos LLM, mas sim como um lembrete de que precisamos usar estas ferramentas com cautela e de forma estratégica, a fim de maximizar seus benefícios enquanto minimizamos os potenciais impactos negativos.