Os descritores gerais e a progressão dos níveis de proficiência do exame CELPE-BRAS

Abstract

O Certificado de Proficiência em Língua Portuguesa para Estrangeiros (Celpe-Bras) avalia e certifica, por meio de um único exame que integra produção oral e compreensão oral (Parte Oral) e produção escrita e leitura ou produção escrita e compreensão oral (Parte Escrita), quatro níveis de proficiência: Intermediário, Intermediário Superior, Avançado e Avançado Superior. Os descritores dos níveis de certificação apresentados na Cartilha do Participante (BRASIL, 2019) descrevem as características do desempenho esperado em cada nível de proficiência sem, no entanto, oferecer indicações claras sobre conteúdos específicos relevantes para alcançar cada um dos níveis. De acordo com Weir (2005), os sistemas de avaliação de línguas devem informar sobre a progressão dos níveis avaliados, explicitando como os níveis diferem e as condições contextuais (por exemplo, os conteúdos avaliados, as características das tarefas, os parâmetros de avaliação) que podem afetar o desempenho do examinando. Com vistas a contribuir para a formulação de descritores que reflitam de modo mais preciso os níveis de proficiência avaliados pelo Celpe-Bras, este estudo investigou a Parte Escrita do exame, focalizando tarefas que integram produção escrita com compreensão de vídeo (Tarefa 1) e com leitura (Tarefa 4). A pesquisa teve como objetivo identificar aspectos relacionados à recontextualização de informações dos textos de insumo (compreensão) e ao uso de recursos linguístico-discursivos que pudessem ser relevantes e produtivos para distinguir os níveis Intermediário Superior e Avançado Superior. Para isso, foram analisadas duas tarefas da Parte Escrita da edição de 2016-1 do Celpe-Bras e um conjunto de 50 textos de examinandos, levando em conta as características de cada tarefa quanto à modalidade do texto de insumo (vídeo; impresso) e aos propósitos interlocutivos do texto a ser produzido (incentivar colega a participar de um programa de intercâmbio, apresentando o programa e narrando a experiência vivida; posicionar-se em relação ao uso de redes sociais, argumentando e refutando contra-argumentos). Tendo como base as características das tarefas analisadas, os resultados apresentam uma descrição detalhada de aspectos informacionais e linguísticodiscursivos que constroem a concretude e a coesão dos textos produzidos em cada nível. A partir da análise dos textos, foi proposta uma progressão do nível Intermediário Superior para o nível Avançado Superior em relação à recontextualização de informações do texto de insumo e ao uso de recursos linguístico-discursivos relevantes e produtivos para a distinção dos níveis, subsidiando empiricamente uma descrição mais detalhada dos níveis de certificação da Parte Escrita do exame. As conclusões do estudo têm implicações para o ensino e a aprendizagem de Português como Língua Adicional (PLA), para informar examinandos sobre como se preparar para o exame, bem como para no desenho curricular de programas de PLA.

The Certificate of Proficiency in Portuguese for Foreigners (Celpe-Bras) assesses and certifies, through a single exam which integrates speaking and listening (Oral Exam) and writing and reading or writing and listening (Written Exam), four levels of proficiency: Intermediate, Upper Intermediate, Advanced and Upper Advanced. The band score rubrics presented in the Participant's Handbook (BRASIL, 2019) describe the characteristics of the expected performance at each proficiency level without, however, providing clear indications about specific content relevant to reaching each level. According to Weir (2005), language assessment systems should inform about the progression of the levels assessed, explaining how they differ and the contextual conditions (eg, content assessed, task characteristics, assessment parameters) that can affect the candidate’s performance. In order to contribute to the formulation of rubrics that can reflect more accurately Celpe-Bras proficiency band scores, this study investigated the Written Exam, focusing on tasks integrating writing with video listening (Task 1) and with reading (Task 4). The study aimed to identify aspects related to the recontextualization of information from input texts (comprehension) and the use of linguistic-discursive resources that could be relevant and productive to distinguish the Upper Intermediate and Upper Advanced levels. In order to do so, two tasks of the Written Part of the 2016-1 edition of Celpe-Bras and a set of 50 candidates’ written texts were analyzed, taking into account the characteristics of each task regarding the modality of the input text (video or written text) and the interlocutory purpose (to encourage colleagues to participate in an exchange program, presenting the program and narrating their experience; to take a stand on the use of social networks, presenting arguments and refuting counterarguments). Considering the characteristics of the tasks analyzed, the results present a detailed description of informational and linguisticdiscursive aspects that build the concreteness and cohesion of the texts produced at each level. Based on the analysis of the texts, a progression from Upper Intermediate level to Upper Advanced was proposed in relation to the recontextualization of the information of the input text and the use of linguistic-discursive resources relevant and productive to distinguish both levels, empirically subsidizing a more detailed description of the certification levels of the Written Part of the exam. The conclusions of this research have implications for Portuguese as an Additional Language (PAL) teaching and learning, for informing candidates about relevant content to prepare for the exam, as well as for curriculum design of PAL programs.