Avaliação da leitura em inglês como língua estrangeira e validade de construto

In this article, the analysis conducted by Tumolo and Tomich (2007) and Tumolo (2005) on items from the English subtest of the University of Campinas entrance examination has been questioned. The analysis, carried out as part of a study which investigates the defensibility of items from three different EFL assessment instruments -- international proficiency tests (TOEF and IELTS), entrance examinations of two Brazilian universities (Unicamp e UFSC) and classroom tests developed by the teacher -- has construct validity as its main criterion. The items were divided into defensible and non-defensible. According to the authors, defensible items are those which “allow for the demonstration of the reading ability as described in the construct, whereas non-defensible items do not allow for collecting evidence for a more valid interpretation of the relevant ability” (Tumolo and Tomich, 2007, p. 67). Our main criticism is that the reading construct used for the analysis is different from the one which underlies the Unicamp examination. Key words: reading assessment, EFL, construct validity, entrance examination.Neste artigo, a análise conduzida por Tumolo e Tomich (2007) e Tumolo (2005) em itens extraídos da prova de inglês do vestibular da Unicamp é questionada. A análise, conduzida como parte de um estudo que investiga a defensibilidade de itens de três instrumentos de avaliação de leitura em inglês como língua estrangeira – exames internacionais de proficiência (TOEFL e IELTS), exames vestibulares de duas universidades brasileiras (Unicamp e UFSC) e exames elaborados pelo professor em sala de aula – tem a validade de construto como seu critério principal. Os itens são classificados em defensáveis e não defensáveis. Itens defensáveis, para os autores, seriam aqueles que “permitem a demonstração da habilidade como definida no construto, enquanto os não defensáveis não permitem coletar evidências para uma interpretação válida da habilidade relevante” (Tumolo e Tomich, 2007, p. 67). O argumento principal de nosso questionamento é o fato de o construto em que se baseia a análise ser distinto daquele que fundamenta a prova da Unicamp. Palavras-chave: avaliação da leitura, inglês, língua estrangeira, validade de construto, exames vestibulares