Estudo explora ensaios de admissão escritos por IA

Os escritórios de admissão têm disputado redações geradas por inteligência artificial há mais de três anos e meio; de acordo com um Pesquisa de 2024cerca de metade dos candidatos à faculdade usam IA para debater suas redações universitárias e um em cada cinco a usa para criar um primeiro rascunho.

UM estudo recente por pesquisadores das universidades Cornell e Carnegie Mellon investigaram mais profundamente quais alunos estão usando IA em suas redações e como isso afeta o conteúdo e a eficácia dessas redações.

O estudo analisou dezenas de milhares de ensaios submetidos a uma instituição seletiva não identificada ao longo de quatro anos, começando antes da introdução de ferramentas generativas de IA. Os pesquisadores descobriram que os estudantes de baixa renda – representados neste estudo por aqueles que receberam isenção de taxas de inscrição – eram mais propensos a usar IA em suas redações, assim como os estudantes que acabaram sendo rejeitados pela faculdade.

Jinsook Lee, autor principal do estudo e Ph.D. candidata em Cornell, disse que está interessada nas variações de quem usa IA e como ela se correlaciona com as diferenças socioeconômicas.

Ela levantou a hipótese de que os candidatos de baixa renda teriam maior probabilidade de usar grandes modelos de linguagem para ajudar nas redações da faculdade, porque têm menos acesso a outros recursos para obter ajuda. Mesmo entre o grupo de estudantes que utilizaram IA, os estudantes com rendimentos mais baixos tinham maior probabilidade de serem rejeitados do que os estudantes com rendimentos mais elevados, descobriram os investigadores. Isso pode ocorrer porque os estudantes de renda mais alta podem pagar versões melhores de ferramentas de IA e podem estar trabalhando com conselheiros ou treinadores de redação que entendem como usar a IA de maneira mais eficaz, disse ela.

“Os alunos de alta renda têm muitos recursos diferentes; eles têm conselheiros, têm professores e têm mais apoio além do ChatGPT”, disse Lee. Por outro lado, os estudantes de baixa renda “talvez só consigam usar o nível gratuito em vez do nível de US$ 200 por mês [version of] Claude, e a qualidade do resultado que o ChatGPT de nível gratuito nos oferece é realmente ruim.”

Ensaios pessoais impessoais

O estudo também avaliou a homogeneização da linguagem nas redações, ou o quão semelhantes elas são entre si. Lee e seus coautores descobriram que a homogeneização aumentou significativamente após o lançamento das plataformas de IA, com maior convergência entre estudantes de baixa renda e estudantes que foram rejeitados na faculdade.

Embora este relatório não tenha investigado exatamente quais características linguísticas se tornaram mais comuns em redações universitárias na era da IA, AJ Alvero, professor do departamento de sociologia de Cornell e coautor do artigo, disse que é preocupante pensar que as redações de admissão estão se tornando menos pessoais.

“O ensaio foi elaborado para dar aos candidatos a oportunidade de destacar… as idiossincrasias de suas vidas, como eles se tornaram quem são, esses tipos de experiências e narrativas altamente individualistas”, disse ele. “Se estiver empurrando todos esses candidatos para o mesmo tipo de redação, o mesmo modelo… pode ser que os alunos estejam perdendo inadvertidamente essa oportunidade.”

Pesquisa anteriortambém de Cornell, mostrou que os ensaios de aplicação escritos por IA são genéricos, fáceis de detectar e não parecem escritos por uma pessoa real.

A conclusão do novo relatório argumenta que, à medida que o uso da IA ​​se torna cada vez mais predominante, os escritórios de admissão universitária devem considerar as disparidades de riqueza ao avaliar as redações.

“Vistos através da estrutura da exclusão digital, os nossos resultados sugerem uma mudança das desigualdades no acesso para as desigualdades nos retornos, sublinhando a necessidade de as instituições reavaliarem a forma como as evidências baseadas em ensaios são interpretadas à medida que a escrita assistida por IA se torna comum”, escreveram os autores. “A investigação futura deve combinar abordagens experimentais, qualitativas e multi-institucionais para identificar como as ferramentas de IA interagem com os sistemas existentes de estratificação educacional e para informar práticas de avaliação mais equitativas.”

Em pesquisas futuras, disseram Alvero e Lee, eles esperam investigar quais escolhas linguísticas e de tópicos são mais comuns em redações de admissão em faculdades geradas por IA. Alvero observou que as características linguísticas mais comuns nas redações dos estudantes de renda mais alta são também aquelas que a IA parece imitar. Lee, entretanto, observou que os LLM tendem a querer incluir informações irrelevantes sobre a identidade de um aluno, como abrir uma frase na redação de um candidato que se identifica como asiático com “como uma mulher asiática” – mesmo que a cláusula seguinte não tenha nada a ver com ser uma mulher asiática.