THREE INVESTIGATIONS OF PROFICIENCY SCALES AND THEIR INTERPRETATION

• Main Author: LINA KATIA MESQUITA DE OLIVEIRA
• Other Authors: FRANCISCO CRESO JUNQUEIRA FRANCO JUNIOR
• Language: Portuguese
• Published: PONTIFÍCIA UNIVERSIDADE CATÓLICA DO RIO DE JANEIRO 2008
• Online Access: http://www.maxwell.vrac.puc-rio.br/Busca_etds.php?strSecao=resultado&nrSeq=12868@1; http://www.maxwell.vrac.puc-rio.br/Busca_etds.php?strSecao=resultado&nrSeq=12868@2

COORDENAÇÃO DE APERFEIÇOAMENTO DO PESSOAL DE ENSINO SUPERIOR === As avaliações de proficiência em larga escala vêm exercendo um papel relevante no contexto educacional contemporâneo, pois servem, entre outros propósitos, para retratar mais precisamente o nível de desempenho escolar de uma grande quantidade de alunos avaliados, como também para fornecer subsídios mais sólidos ao aperfeiçoamento das políticas educacionais que vêm sendo implementadas. As escalas de proficiência utilizadas nessas avaliações revestem-se de uma grande importância nesse processo, visto que são utilizadas pelos avaliadores e pelos gestores educacionais como um instrumento capaz de aferir e interpretar a proficiência dos alunos nas diversas habilidades que compõem os domínios de conhecimento investigados. O objeto de estudo da presente tese são precisamente as escalas de proficiência utilizadas nos sistemas de avaliação em larga escala, que são tratadas em três diferentes abordagens: primeiro, há uma avaliação das diferentes abordagens para se obter uma associação entre os itens de um teste e os níveis ou pontos significativos de proficiência de diversas escalas atualmente empregadas. Depois, utilizando uma escala de proficiência em Matemática para a quarta série do Ensino Fundamental, é desenvolvida uma abordagem alternativa para caracterizar os níveis representativos de uma escala de proficiência escolar. Para isso foram utilizados métodos baseados em análise de conglomerados (cluster analysis) para a escolha do subconjunto de itens que caracteriza cada nível de proficiência. Por fim, é realizada uma interpretação pedagógica dos clusters formados, com base nos conhecimentos do ensino e da aprendizagem das habilidades básicas da educação matemática para a primeira etapa do ensino fundamental. A abordagem utilizada será a análise da natureza das operações mentais que caracterizam cada uma das competências e habilidades que compõem os clusters, tendo como pressupostos básicos as referências ao processo de aprendizagem da matemática. === Large-scale evaluations have played a relevant role in the contemporary field of education, not only because of their importance in providing a more precise assessment of the proficiency of large numbers of students, but also because of their use as a means of producing more reliable elements that are used in the improvement of educational policies. The proficiency scales adopted in these evaluation programs are a very important part of this process, for they are employed by educational evaluators and decision-makers as an instrument able to gauge and interpret the students` levels of proficiency in the many different abilities that compose the knowledge domains under investigation. The object of this thesis is precisely the proficiency scales used in large scale evaluation systems, which are treated according to three different approaches: First an investigation is made about the relative merit of different methods of association between the items that make up a test and the significant points or levels of proficiency in several scales that have been employed by different evaluation programs. Then, by using a 4th-grade Mathematics proficiency scale, an alternative approach to characterize levels that are representative of a proficiency scale is developed. This is done by the use of a cluster analysis method aimed at choosing a subset of items that characterize each proficiency level. Finally, a pedagogical interpretation of the clusters formed along the proficiency scale is obtained through the consideration of teaching and learning of Mathematics education basic skills, related to the beginning series of the fundamental level. The methodology used in this process is the analysis of the nature of mental operations that characterize each one of the competencies and skills that are typical of each cluster, by adopting references to Mathematics learning processes as basic assumptions.