FACTORS ASSOCIATED WITH PROFICIENCY VALUE-ADDED IN HIGH SCHOOL: AN ANALYSIS BASED ON SAERJ

• Main Author: LUIZ CARLOS DE SOUZA
• Other Authors: ALICIA MARIA CATALANO DE BONAMINO
• Language: Portuguese
• Published: PONTIFÍCIA UNIVERSIDADE CATÓLICA DO RIO DE JANEIRO 2016
• Online Access: http://www.maxwell.vrac.puc-rio.br/Busca_etds.php?strSecao=resultado&nrSeq=27948@1; http://www.maxwell.vrac.puc-rio.br/Busca_etds.php?strSecao=resultado&nrSeq=27948@2

PONTIFÍCIA UNIVERSIDADE CATÓLICA DO RIO DE JANEIRO === COORDENAÇÃO DE APERFEIÇOAMENTO DO PESSOAL DE ENSINO SUPERIOR === PROGRAMA DE EXCELENCIA ACADEMICA === Investigamos fatores associados ao valor agregado de proficiência em Língua Portuguesa e Matemática, a alunos do Ensino Médio de escolas estaduais do estado do Rio de Janeiro. A escolha pelo Ensino Médio é justificada pela importância desta etapa para a concretização plena do direito à Educação Básica, pelos baixos índices de desempenho e rendimento evidenciados nas avaliações nacionais e pela carência de estudos, no Brasil, sobre fatores associados ao desempenho dos alunos nesse nível de ensino. Seguindo apontamentos da literatura sobre as escolas eficazes e estudos baseados na análise de valor agregado, investigamos a variação dos ganhos de proficiência em Língua Portuguesa e Matemática entre os alunos de diferentes escolas da rede e sua associação com um conjunto de fatores internos e externos à escola, por meio do uso de dados do Sistema de Avaliação da Educação do Estado do Rio de Janeiro – SAERJ. Utilizando uma abordagem longitudinal, a obtenção dos valores agregados ao longo do Ensino Médio se deu pela comparação entre as proficiências prévias dos alunos, no SAERJ 2010, quando cursavam o nono ano do Ensino Fundamental, e as proficiências de saída desses mesmos alunos, quando foram avaliados no terceiro ano do Ensino Médio, em 2013. A análise dos dados compreendeu três etapas principais. Na primeira, tendo em vista que o nosso grupo de interesse estava constituído por alunos sem reprovações, comparamos características desse grupo com o restante dos alunos avaliados pelo SAERJ em 2013, de maneira a verificar o quanto nossa amostra se aproximava da realidade do restante do estado em termos das características sociodemográficas e socioeconômicas dos alunos, bem como das características do sistema de ensino (turno, modalidade de Ensino Médio, distribuição geográfica etc.). Os resultados dessa comparação evidenciaram que a amostra de alunos apresenta grandes semelhanças com o universo de alunos avaliados. Na segunda etapa, mapeamos a distribuição dos valores agregados de proficiência entre as escolas da rede estadual, buscando identificar variâncias significativas nos valores agregados, bem como escolas que tivessem se destacado positiva ou negativamente. A conclusão dessa segunda etapa nos permitiu categorizar as escolas da amostra, tendo em vista tanto suas médias de desempenho quanto sua localização na escala de padrões de desempenho do SAERJ. Os resultados mostram que há grandes desafios no Ensino Médio, referentes aos dois componentes curriculares avaliados, sobretudo em Matemática, disciplina na qual uma pequena minoria dos alunos se encontra nos níveis adequado ou avançado de proficiência. Na última etapa, através do uso de modelagem linear hierárquica, foram feitas análises dos fatores associados aos valores agregados de proficiência. Os principais resultados apontam que o porte da escola importa tanto para a eficácia como para a equidade escolar; que a reprovação está associada a desempenhos mais baixos dos alunos especialmente em Matemática; e que políticas e práticas mais democráticas de gestão escolar estão associadas a melhores proficiências em Língua Portuguesa e, principalmente, em Matemática. A tese também traz evidências de escolas em que há associação significativa entre eficácia e equidade, especialmente em Língua Portuguesa. === We investigated factors associated with proficiency value-added in Portuguese and Mathematics to high school students in the state of Rio de Janeiro. The relevance of this work is based on the importance of this level of education for the full realization of the right to education, the low levels of performance evidenced by national educational evaluation systems and the lack of studies in Brazil on factors associated with student performance at this level of education. Following notes of the literature on effective schools and studies based on value-added analysis, we investigated the variation of proficiency gains in Portuguese Language and Mathematics among students from different schools of the network and its association with a set of internal and external factors to school. Data were obtained through the Evaluation System of education in the state of Rio de Janeiro - SAERJ. From a longitudinal approach, added-values over the high school was given by comparing the previous proficiencies students in SAERJ 2010, when they were attending the 9th grade of elementary school, and the output proficiencies of these same students, when evaluated in the 3rd year of high school, in 2013. Data analysis was developed in three stages. At first, given that our interest group was made up of students without reproaches, we compare characteristics of this group with the rest of the students evaluated by SAERJ in 2013, in order to check how much our sample approached the state of the rest, in terms of sociodemographic and socioeconomic characteristics of students as well as the characteristics of the education system (shift, high school mode, geographical distribution etc.). The results of this comparison showed that the sample of students is very similar to the universe of evaluated students. In the second step, we map the distribution of proficiency added-values between schools of the state, seeking to identify significant variances in the aggregate figures and schools that had stood out positively or negatively. The completion of this second stage allowed us to categorize the schools in the sample, with a view both their average performance and its location on the scale of SAERJ performance standards. The results show that there are major challenges in high school, for the two curriculum components evaluated, especially in Mathematics, in which a small minority of students is in the appropriate level or advanced level of proficiency. In the last step, through the use of hierarchical linear modeling, analysis of factors associated with proficiency added-values was made. The main results show that school size matters both for effectiveness and for school equity; that school failure is associated with lower performance of the students especially in mathematics; and more democratic policies and practices of school management are associated with better proficiency in Portuguese and, especially, in mathematics. The thesis also provides evidences of schools where there is a significant association between efficiency and equity, especially in Portuguese.