Test usefulness in the efl extension program at Universidade Federal de Santa Catarina (UFSC): an analysis

Abstract

No presente estudo investiga-se a utilidade dos testes escritos criados pelos professores do programa extracurricular de inglês como língua estrangeira na Universidade Federal de Santa Catarina (UFSC). Os dados consistiram de uma amostra de cada teste escrito - aplicados na metade e no final de semestre, respectivamente - de todos os níveis existentes, totalizando vinte amostras coletadas. Cada teste foi analisado utilizando-se do modelo de utilidade de teste proposto por Bachman e Palmer (1996), composto de seis qualidades: confiabilidade, validade do construto, autenticidade, interatividade, praticidade, e impacto. Entretanto, a sexta qualidade, impacto, não foi incluída na análise, pois esta requereria instrumentos específicos e tempo extra para ser mensurada. Além disso, foram conduzidas entrevistas com os professores a fim de confirmar os resultados obtidos através da análise. A análise dos dados revelou que, ao criarem os testes, os professores parecem não se basear em nenhuma teoria ou orientação na área de avaliação de línguas, confiando em sua própria intuição e concepções adquiridas a partir de sua experiência na prática do ensino e avaliação em sala de aula. Mais especificamente, com relação à analise de utilidade baseada no modelo de Bachman e Palmer (1996), os resultados mostraram que é possível afirmar que nenhum dos testes possui todas as qualidades de utilidade de uma forma balanceada. Em alguns testes uma ou outra qualidade se destaca em detrimento de outra. Em outras palavras, dentre os testes analisados, diferentes testes possuem diferentes qualidades de utilidades em diferentes níveis. Acredita-se que estudos como este possam contribuir para uma melhor compreensão da ligação entre a prática do ensino e da avaliação no presente contexto de pesquisa. Além disso, propõem-se sugestões para um treinamento em avaliação aos professores sob a forma de oficinas (workshops), a fim de trilhar os caminhos em busca de uma prática mais padronizada de avaliação pelos professores do programa extracurricular de inglês na UFSC.