Precisão e complexidade gramatical na avaliação de proficiência oral em inglês do formando em Letras: implicações para a validação de um teste

Abstract

Este trabalho, de natureza híbrida, insere-se na linha de investigações sobre avaliação de proficiência e estuda a validade dos descritores de gramática na escala do Teste de Proficiência Oral em Língua Inglesa (TEPOLI), especificamente elaborado para professores de inglês como língua estrangeira no Brasil. Justifica-se socialmente pelo resultado de diversas pesquisas em Linguística Aplicada que atestam o baixo nível de proficiência (principalmente oral) de formandos em Letras e professores em serviço no ensino regular, o que tem sido apontado na literatura como uma das razões para o insucesso no ensinoaprendizagem nesses contextos. São revisados na literatura pressupostos teóricos sobre avaliação de proficiência oral e sobre investigação da gramática em produções orais. As perguntas que norteiam esta pesquisa são: (1) como se caracteriza a gramática ao longo das faixas de proficiência no desempenho dos participantes em relação a (a) características da língua falada, (b) precisão e (c) complexidade?; e (2) que relações podem ser estabelecidas entre o desempenho gramatical dos participantes no teste oral e no seminário?. Participam da pesquisa oito alunas formandas de um curso de Letras de uma universidade pública paulista, cujas notas no TEPOLI se distribuem ao longo da escala. Os dados foram coletados por meio de questionários, entrevistas semiestruturadas e gravações de seminários realizados durante o último semestre da graduação e de aplicações do TEPOLI. O foco das análises é dado para a precisão e a complexidade gramatical das estruturas morfossintáticas empregadas na produção oral das participantes durante os eventos de avaliação. Os resultados apontam que há diferenças quantitativas e qualitativas entre as faixas de proficiência para precisão e para complexidade, e que o teste...

This research study, of a hybrid nature, is included in the language testing body of research. It aims at investigating the validity of the grammar descriptors of the Test of Oral Language Proficiency in English (TEPOLI), specifically designed for teachers of English as a foreign language in Brazil. The work is socially justified by the results of several studies in Applied Linguistics which attest the low proficiency level (particularly in oral skills) attained by students graduating from teacher education undergraduating courses and in-service teachers working in regular schools, something that has been accounted as one of the reasons for unsuccessful teaching and learning in such settings. It reviews the theoretical principles of oral language testing and grammar in oral production. The research questions that guide this study are: (1) how is grammar characterized along the proficiency bands in the participants’ performance in terms of (a) the characteristics of spoken language, (b) accuracy and (c) complexity?; and (2) what interrelations can be established between the participants’ grammatical performance in the oral test and in a seminar? Eight students graduating from a teacher education course in a public university in the state of Sao Paulo take part in this study. Data were collected by means of questionnaires, semistructured interviews, recordings of the seminars given in the last term of the students at university, and recordings of the administration of the TEPOLI. The focus of analysis is on grammatical accuracy and complexity of the morphosyntactic structures employed in the participants’ oral production at the assessment events. Results point to quantitative and qualitative differences between the proficiency bands for accuracy and complexity, and also indicate that the test has predictive power over... (Complete abstract click electronic access below)