The feedback on student academic writing based on automated digital framework descriptors

Abstract

O feedback digital automatizado sobre a escrita acadêmica dos alunos é investigado em vários estudos. No entanto, poucas pesquisas têm focado neste tipo de feedback em relação à escrita acadêmica dos alunos não apenas em relação à forma, mas também ao conteúdo. O presente estudo consistiu na submissão de dezesseis ensaios autênticos de alunos de graduação à análise de três programas de feedback automatizados. Para este estudo, os três programas selecionados foram: Grammarly, Paper Rater e Microsoft Word. Desta forma, tais programas foram usados para analisar até que ponto esses programas cobrem recursos de feedback em relação à forma e ao conteúdo. Desses programas, apenas três características, todas relacionadas à forma, foram identificadas mutuamente, quais sejam: Ortografia Inglesa, Gramática Inglesa e Convenções de Pontuação. Em relação a tais traços de forma, houve uma discrepância no número de erros apresentados e na forma como foram apresentados, indicando uma falta de uniformidade em sua cobertura. Em relação ao conteúdo, também houve falta de uniformidade na abrangência das sugestões dadas e na forma como foram apresentadas.

Abstract: The automated digital feedback on student academic writing has been investigated in a number of studies. However, little research has focused on this type of feedback in relation to academic writing of students regarding not only form but also content. The current study consisted of the submission of sixteen authentic essays of undergrad students to the analysis of three automated digital programs. For this study, the three automated feedback programs were: Grammarly, Paper Rater, and Microsoft Word. In this sense, such programs were used to analyze to what extent such programs cover feedback features in relation to form and content as well. From those programs, only three traits, which were all related to form, were mutually spotted, which were: English Spelling, English Grammar and Punctuation Conventions. In relation to such form traits, there was a discrepancy on the numbers of errors displayed and the way they were presented, indicating a lack of uniformity in their coverage. In relation to content, there was also a lack of uniformity in the coverage of the suggestions given and the way they were presented.