Résumé Cet article propose em indicateur qui décrit, pour chaque municipalité brésilienne, son niveau et ses inégalités d’apprentissage. Cet indicateur est nécessaire car les inégalités d’apprentissage augmentent et ne sont pourtant pas observées par l’indicateur éducatif principal du pays, l’Indice de Développement de l’Éducation de Base (IDEB). L’étude onstatelize initialement la justice em éducation et se situe dans le débat sur les théories de la justice distributive. Ensuite, on onstate les aspects méthodologiques de l’indicateur et les résultats obtenus. La principale constatation est que les matières et les séries scolaires où l’on a onstat le plus grand nombre de municipalités augmentant leur niveau d’apprentissage sont également celles où l’on a onstate une forte augmentation des inégalités. décrit brésilienne dapprentissage. dapprentissage d apprentissage. apprentissage lindicateur l pays lIndice Indice lÉducation Éducation IDEB. IDEB . (IDEB) Létude L étude distributive Ensuite obtenus lon (IDEB

Resumen Este artículo propone un indicador que describe, para cada municipio brasilero, el nivel y las desigualdades de aprendizaje y sus diferencias. Ese indicador es necesario porque las desigualdades de aprendizaje son crecientes y, no obstante, no son observadas por el principal indicador educativo del país, el Índice de Desarrollo de la Educación Básica (IDEB). El estudio inicialmente conceptualiza la justicia en educación, situándose en el debate sobre teorías de justicia distributiva. Después, presenta los aspectos metodológicos del indicador y los resultados obtenidos. La principal constatación es que las disciplinas y grados escolares en que se verificó un mayor número de municipios con aumento de su nivel de aprendizaje son también en los que se verificó un fuerte aumento de las desigualdades. describe brasilero diferencias obstante país IDEB. IDEB . (IDEB) educación distributiva Después obtenidos (IDEB

Abstract This article proposes an indicator that describes each Brazilian municipality’s learning level of its elementary school students, as well as learning inequalities among groups of students defined by socioeconomic status, race, and sex. This indicator is necessary because learning inequalities are growing and are not observed by the country’s main educational indicator, the Basic Education Development Index (IDEB). This study initially conceptualizes justice in education, positioning itself in the debate on theories of justice. Then, it presents the methodological aspects of the indicator and the results obtained. The main finding is that the subjects and school grades in which the highest number of municipalities increased their learning levels are also those in which there was a strong increase in inequalities. municipalitys municipality s status race sex countrys country IDEB. IDEB . (IDEB) education Then obtained (IDEB

Resumo Este artigo propõe um indicador que descreve, para cada município brasileiro, o nível de aprendizagem de seus estudantes do ensino fundamental e as desigualdades de aprendizagem entre grupos de estudantes definidos por nível socioeconômico, raça e sexo. Esse indicador é necessário porque as desigualdades de aprendizagem são crescentes e, contudo, não são observadas pelo principal indicador educacional do país, o Índice de Desenvolvimento da Educação Básica (IDEB). O estudo inicialmente conceitualiza justiça em educação, situando-se no debate sobre teorias de justiça distributiva. Em seguida, apresenta os aspectos metodológicos do indicador e os resultados obtidos. A principal constatação é que as disciplinas e séries escolares nas quais se verificou o maior número de municípios aumentando o seu nível de aprendizagem são também aquelas em que se verificou forte aumento das desigualdades. descreve brasileiro socioeconômico sexo contudo país IDEB. IDEB . (IDEB) educação situandose situando distributiva seguida obtidos (IDEB

Résumé L'article présente une mesure du niveau socio-économique (NSE) pour presque toutes les écoles brésiliennes. Des indicateurs primaires – calculés à partir de données provenant de questionnaires auxquels les élèves ont répondu dans le cadre d'évaluations éducatives – et des indicateurs secondaires – qui caractérisent le contexte social des écoles – ont été agrégés sur une échelle de NSE au moyen d'un modèle de théorie de la réponse aux items. Le NSE a été calculé pour plus de 180.000 écoles. La méthodologie a donné une visibilité aux petites écoles ou à celles situées dans des zones reculées qui, jusqu'alors, étaient invisibles pour les politiques publiques, puisqu'elles ne participent pas aux évaluations éducatives. La relation entre les résultats scolaires et les NSE représente les inégalités du pays. Les NSE des écoles est utile pour la recherche académique et peut contribuer à l'amélioration des politiques visant à réduire les inégalités éducatives. Larticle L article socioéconomique socio économique (NSE brésiliennes dévaluations d dun un items 180000 180 000 180.00 jusqualors, jusqualors jusqu alors, alors jusqu'alors publiques puisquelles puisqu elles pays lamélioration l amélioration 18000 18 00 180.0 1800 1 0 180.

Resumen El artículo presenta una medida del nivel socioeconómico (NSE) para casi todas las escuelas brasileñas. Indicadores primarios – calculados con los datos de los cuestionarios respondidos por los alumnos en las evaluaciones educativas – e indicadores secundarios – que caracterizan el contexto social de los centros escolares – se agregaron en una escala de NSE mediante un modelo de la Teoría de Respuesta al Ítem. El NSE se calculó para más de 180.000 centros escolares. La metodología dio visibilidad a escuelas pequeñas o de zonas remotas que, hasta entonces, eran invisibles para las políticas públicas, ya que no participaban en las evaluaciones educativas. La relación entre los resultados educativos y el NSE representa las desigualdades del país. El NSE de las escuelas es útil para la investigación académica y tiene el potencial de contribuir a la mejora de las políticas públicas destinadas a reducir las desigualdades educativas. (NSE brasileñas Ítem 180000 180 000 180.00 entonces país 18000 18 00 180.0 1800 1 0 180.

Abstract The article presents a measure of socioeconomic status (SES) for nearly all Brazilian schools. Primary indicators – calculated with data from questionnaires answered by students in educational assessments – and secondary indicators – which characterize the schools' social contexts – were aggregated into an SES scale through an Item Response Theory model. The SES was calculated for more than 180,000 schools. The methodology gave visibility to small schools or ones in remote areas that, until now were invisible to public policies since they had not participated in educational assessments. The relationship between educational outcomes and SES represents the inequalities in the country. The schools' SES are useful for academic research, and can help improve public policies aimed at reducing educational inequalities. (SES model 180000 180 000 180,00 that country research 18000 18 00 180,0 1800 1 0 180,

Este artigo apresenta uma medida do nível socioeconômico (NSE) de quase todas as escolas brasileiras. Indicadores primários – calculados com dados de questionários respondidos pelos estudantes nas avaliações educacionais – e indicadores secundários – que caracterizam o contexto social das escolas – foram agregados em uma escala de NSE por meio de um modelo da Teoria de Resposta ao Item. O NSE foi calculado para mais de 180 mil escolas. A metodologia deu visibilidade às escolas pequenas ou de áreas remotas que, até então, eram invisíveis para as políticas públicas, uma vez que elas não participam das avaliações educacionais. A relação entre resultados educacionais e o NSE representa as desigualdades do país. O NSE das escolas tem utilidade para a pesquisa acadêmica e potencial para contribuir com o aperfeiçoamento das políticas públicas que visam a reduzir as desigualdades educacionais. (NSE brasileiras Item 18 então país 1

 This paper proposes an indicator that describes, for each Brazilian municipality, its learning level and its inequalities. This indicator is necessary because learning inequalities are growing and they are not observed by the country's main educational indicator, the Elementary Education Development Index (IDEB). The paper initially conceptualizes justice in education, situating it in the debate about theories of justice. Then, it presents the methodological aspects of the indicator and the results obtained. The main conclusion is that the subjects and school grades where the largest number of municipalities increased their learning levels are also those where there was a strong increase in inequalities.

Este texto propõe um indicador que descreve, para cada município brasileiro, o seu nível e suas desigualdades aprendizagem. Esse indicador é necessário porque as desigualdades de aprendizagem são crescentes e contudo não são observadas pelo principal indicador educacional do país, o Índice de Desenvolvimento da Educação Básica (IDEB). O trabalho inicialmente conceitualiza justiça em educação, situando-se no debate sobre teorias de justiça distributiva. Depois, apresenta os aspectos metodológicos do indicador e os resultados obtidos. A principal constatação é que as disciplinas e séries escolares em que se verificou o maior número de municípios aumentando o seu nível de aprendizagem são também aquelas em que se verificou forte aumento das desigualdades.

Resumo Segundo a Constituição Federal brasileira, o direito à educação significa a garantia do acesso à escola, onde a população deve permanecer durante o tempo legalmente determinado, a fim de adquirir os conhecimentos e habilidades necessários para a vida adulta plena. Este artigo tem como foco a análise da permanência dos estudantes na escola, condição essencial para a aprendizagem e representada por suas trajetórias educacionais. Dados longitudinais do Censo Escolar, de 2007 a 2015, foram utilizados para analisar as trajetórias educacionais classificadas em três tipos: regular; com poucas irregularidades; e com muitas irregularidades. Os resultados mostram que alguns grupos sociais são muito mais propensos a ter uma trajetória regular e outros a ter repetência ou a ficar fora da escola em alguns anos. Uma proporção alta de meninos de cor/raça preta tem trajetórias com muitas irregularidades. O artigo mostra que o Índice de Desenvolvimento da Educação Básica (Ideb) – o indicador oficial para medir a qualidade da educação nos municípios – pode atingir um valor alto, mesmo que muitos estudantes tenham trajetórias irregulares. Isso evidenciou o efeito da seletividade embutido nesse indicador. Em conclusão, este trabalho sugere a incorporação das trajetórias educacionais no monitoramento da qualidade da educação nos municípios.

Abstract According to the Federal Brazilian Constitution, the right to education means that all children had access to a school, and remained there for the legally determined time and, acquired the knowledge and skills necessary for full adult life. This paper focuses on the analysis of students’ permanence in school, an essential condition for learning represented here by their educational trajectories. The School Census longitudinal data, from 2007 to 2015 were used to analyze the student’s educational trajectories classified into three types: regular; with few irregularities; and with many irregularities. The results show that some social groups are much more prone to having a regular trajectory, and others to having grade repetition or being out of school after few years. A large proportion of black boys have trajectories with many irregularities. In addition, this paper shows that the Basic Education Development Index (IDEB, acronym in Portuguese) – the official index for measuring the quality of education in the municipalities – can reach a high value even if many students have irregular trajectories. This evidenced the selectivity effect embedded in this indicator. This paper suggests the incorporation of educational trajectories into the indicator to monitor the quality of education in Brazilian municipalities.

Resumen De acuerdo con la Constitución Federal brasileña, el derecho a la educación significa la garantía de acceso a la escuela, donde los estudiantes deben permanecer por el tiempo legalmente determinado para adquirir los conocimientos y habilidades necesarios para la vida adulta plena. Este artículo se centra en el análisis de la permanencia de los estudiantes en la escuela, condición esencial para el aprendizaje, y representada por sus trayectorias educativas. Datos longitudinales de los censos escolares desde 2007 hasta 2015 se utilizaron para estudiar las trayectorias educativas del alumno, que se clasificaron en tres tipos: regular, con pocas irregularidades, con muchas irregularidades. Los resultados muestran que algunos grupos sociales son mucho más propensos a tener una trayectoria regular y otros a repetir el grado o quedar fuera de la escuela por algunos años. Una gran proporción de estudiantes negros tiene trayectorias con muchas irregularidades. Además, este trabajo muestra que el Índice de Desarrollo de la Educación Básica (IDEB) —índice oficial para medir la calidad de la educación en los municipios— puede alcanzar un valor alto a pesar de que muchos estudiantes tienen trayectorias irregulares. Esto evidenció el efecto de selectividad incorporado en este indicador. Este trabajo sugiere la incorporación de las trayectorias educativas en el indicador de seguimiento de la calidad de la educación en los municipios brasileños.

Este artigo apresenta a metodologia e os resultados do desenvolvimento de um índice de nível socioeconômico das escolas de educação básica do Brasil. Os dados provêm dos questionários contextuais aos quais os alunos respondam nas avaliações educacionais feitas pelo governo federal nesse nível de ensino. Foram consideradas as respostas válidas de 20.806.062 alunos em 21 bases de dados. Para estimar o índice, itens relacionados às dimensões escolaridade e ocupação dos pais do aluno e a renda familiar foram agregados, empregando-se um modelo da Teoria da Resposta ao Item. Os resultados foram validados mostrando-se fidedignos. Correlações com outros índices semelhantes são positivas e altas. A correlação com a renda per capita dos municípios revela que a realidade nacional vista por um indicador econômico e um indicador obtido pelas respostas a um questionário é, no nível macro, a mesma. A avaliação de especialistas em diferentes localidades do país coincide com a retratada pelo indicador.

This article presents the methodology and the results of a new index of socioeconomic status of the schools of basic education in Brazil. The data used are from the contextual questionnaires filled by students at the time they answer the cognitive tests of several educational assessments organized by the federal government. Valid responses from 20,806,062 students in 21 databases were considered. In order to estimate the index, items related to the dimensions of education and occupation of student's parents and family income were aggregated using a model of Item Response Theory. The results were validated showing to be quite reliable. Correlations of the index introduced in this paper with similar indices, especially the per capita income of municipalities are positive and high This shows that the reality described by the national economic indicator and an indicator obtained by students responses to a questionnaire in an educational evaluation, at the macro level, are basically the same. The assessment of socioeconomic status of schools as perceive by educational specialists in different localities of the country coincides with the one depicted by the indicator.

Este artículo presenta la metodología y los resultados del desarrollo de un índice de nivel socioeconómico de las escuelas de educación básica en Brasil. Los datos proceden de los cuestionarios contextuales que los alumnos contestaron en las evaluaciones educativas que el gobierno federal realizó para este nivel de educación. Se incluyeron en este estudio respuestas válidas de 20.806.062 estudiantes de 21 bases de datos diferentes. Para estimar el índice se agregan los indicadores sobre las dimensiones de escolaridad, ocupación de los padres y los ingresos de la familia de los estudiantes y se utiliza un modelo de la Teoría de Respuesta al Ítem. Los resultados fueron alidados y se pude demostrar que son confiables. Las correlaciones con índices similares son positivas y altas. La correlación con la renta per cápita de los municipios muestra que la realidad vista por un indicador económico nacional y un indicador obtenido mediante respuestas a un cuestionario contextual contestados por estudiantes, en el nivel macro, es la misma. La evaluación de los especialistas en distintas localidades del país coincide con la retratada por el indicador.

O Índice de Desenvolvimento da Educação Básica (Ideb) assume que as escolas devem ser avaliadas não só pelos seus processos de ensino e gestão ou pelos recursos disponíveis, mas também pelo aprendizado de seus alunos sobre as capacidades básicas e pela sua trajetória escolar. O primeiro objetivo deste artigo é, através da descrição dos algoritmos do Ideb, explicitar sua concepção de qualidade e de equidade de escolas. Isso permite identificar os efeitos diretos e indiretos que seu uso induz nas escolas e que reorientam suas políticas e práticas, buscando sua maximização. Em seguida, mostra-se que algumas opções feitas na sua concepção têm consequências indesejáveis. Diante disso, o artigo traz sugestões de aperfeiçoamento, junto com propostas de mudanças na forma de divulgação e uso, que tornam o Ideb mais relevante pedagogicamente.

IDEB (Basic Education Quality Indicators) regards that schools should be evaluated not only by their teaching and management processes or by the resources available to them, but also by the success of their students on learning the basic skills as well as their schooling trajectories. The first objective of this article, achieved by describing IDEB's algorithms, is to present the concepts of quality and equity of schools, latent in IDEB's definition. This allows the identification of the direct and indirect effects of IDEB's use in schools that reorient their policies and practices, seeking their maximization. Then it is shown that some choices made in its design have undesirable pedagogical consequences. Lastly, this paper presents suggestions on how to make IDEB more pedagogically relevant, along with proposals for improving its dissemination and use.

L'Index de Développement de l'Education de Base (Ideb) considère que les écoles devraient être évaluées non seulement par l'enseignement et par la gestion ou les ressources disponibles, mais aussi par l'apprentissage des compétences de base des élèves et leurs parcours scolaire. Le premier but de cet article est celui d'expliciter, par la description des algorithmes de l'Ideb, sa conception de qualité et d'équité d'écoles. Cela permet d'identifier les effets directs et indirects provoqués par son utilisation dans les écoles qui réorientent leurs politiques et leurs pratiques, en cherchant sa maximisation. Ensuite, on montre que certains choix faits dans sa conception ont des conséquences indésirables. Finalement, cet article présente des suggestions d'amélioration, ainsi que des propositions de modification de la forme de divulgation et d'utilisation qui rendent l'Ideb plus pertinent du point de vu pédagogique.

Este estudo, em linha com a literatura sobre os efeitos das escolas, tem como principal objetivo identificar escolas públicas e municípios que contribuem para elevar significativamente os resultados de seus alunos. Para isso, comparamos os efeitos das escolas e dos municípios avaliados com outros indicadores de qualidade educacional, como o Índice de Desenvolvimento da Educação Básica - Ideb - e os gastos municipais por aluno, e também a eficiência das redes de ensino públicas dentro dos municípios. Utilizamos as bases de dados da Prova Brasil de 2005, 2007, 2009 e 2011, e estimamos modelos de regressão hierárquicos, que possibilitam um melhor controle sobre os fatores contextuais que influenciam os resultados dos alunos. A conclusão é que os efeitos das escolas e dos municípios são melhores indicadores da qualidade educacional do que o Ideb. Identificamos inúmeras escolas e municípios que, consideradas as características sociodemográficas dos alunos e do contexto escolar, têm efeitos muito acima do esperado e com eficiência de gastos.

The purpose of this study, which is based on schools' effects literature, is to identify public schools and municipalities that improve the learning of their students. The effects of schools and municipalities were compared with other educational quality indicators such as the Índice de Desenvolvimento da Educação Básica (Basic Education Development Index) and the per-student municipal expenditures, as well as the efficiency of the municipal public school systems. Data from the 2005, 2007, 2009 and 2011 editions of the Prova Brasil exam were used to estimate hierarchical regression models that allow better control of contextual factors that influence the results of the students. This study shows that the effects of schools and municipalities are better indicators of educational quality than the Basic Education Development Index and identify several schools and municipalities where, given the social-demographic characteristics of the students and of the school context, have effects that are well above the expected, and are cost effective.

Este estudio, en línea con la literatura sobre los efectos de las escuelas, tiene el objetivo de identificar escuelas públicas y municipios que contribuyen para mejorar significativamente los resultados de sus alumnos. Para ello, comparamos los efectos de las escuelas y los municipios evaluados con otros indicadores de calidad educacional, como el Índice de Desenvolvimento da Educação Básica [Índice de Desarrollo de la Educación Básica] y los gastos municipales por alumno, así como la eficiencia de las redes de enseñanza pública dentro de los municipios. Utilizamos las bases de datos de la Prova Brasil de 2005, 2007, 2009 y 2011, y estimamos modelos de regresión jerárquicos, que hacen posible un mejor control de los factores contextuales que influyen sobre los resultados de los alumnos. La conclusión es que los efectos de las escuelas y los municipios son mejores indicadores de la calidad educacional que el índice de desarrollo. Identificamos un sinnúmero de escuelas y municipios que, consideradas las características sociodemográficas de los alumnos y del contexto escolar, obtienen efectos muy superiores a lo que se espera, y con eficiencia de gastos.

A introdução do Índice de Desenvolvimento da Educação Básica (Ideb) pelo governo federal representou uma mudança significativa na forma como a educação passou a ser acompanhada no Brasil. O Ideb é o indicador de qualidade desenvolvido para avaliar a educação oferecida no país e em cada unidade da federação, município e escola pública. Ele serve também para acompanhar a melhoria da qualidade educacional segundo metas preestabelecidas. Seu uso para essas finalidades tem suscitado debates sobre o tipo de política de responsabilização que o indicador engendra. Argumenta-se, neste artigo, que o Ideb coloca foco em resultados finalísticos, sem considerar as condições que propiciam a obtenção de tais resultados. O trabalho analisa a relação entre o indicador e o contexto escolar, considerando para tal o perfil de seus alunos e as características do estabelecimento de ensino. A análise empírica utiliza dados da Prova Brasil, do Censo Escolar e do próprio Ideb, por meio de modelos de regressão linear múltipla. Os resultados mostram que as escolas que atendem a alunos de menor nível socioeconômico, como esperado, têm piores resultados, mesmo com o controle de outras características. Para essas escolas, é muito mais difícil elevar o valor do indicador. Além disso, as condições de infraestrutura e de complexidade da instituição também guardam relação com o Ideb. Por fim, os resultados indicam que são necessárias políticas de superação dessas limitações e que tais condições não podem ser ignoradas na análise do Ideb.

The introduction by the federal government of the Basic Education Development Index (Ideb in the Portuguese acronym for Índice de Desenvolvimento da Educação Básica) represented a significant change in the way in which education is followed in Brazil. Ideb is the quality indicator developed to evaluate the education offered in this country and by each unit of the Federation, municipality, and public school. It also allows following the improvement in the quality of education according to preestablished goals. Its use for these purposes has been fuelling debates about the kind of policy of accountability that the indicator creates. It is argued in this article that Ideb puts focus on end results, without taking into account the conditions that have contributed to obtaining such results. The work analyzes the relations between this indicator and the school context, considering the profile of the pupils and the characteristics of the teaching institution. The empirical study makes use of data from the Prova Brasil, from the School Census and from Ideb itself through models of multiple linear regression. The results show that the schools that cater for pupils of a less privileged socioeconomic background exhibit, as expected, poorer results even when controlled for other features. These schools find it much more difficult to elevate the value of the indicator. Besides, infrastructure conditions and the complexity of the institutions are also correlated with Ideb. Lastly, the results indicate that there is a need for policies to overcome these limitations and that these conditions cannot be ignored in the analysis of the Ideb.

Em qualquer sociedade, diferenças entre os indivíduos são consistentemente observadas quanto ao lugar que ocupam na hierarquia social. Tais diferenças se associam profundamente às oportunidades educacionais, às trajetórias ocupacionais, ao acesso aos bens e serviços, ao prestígio social, ao comportamento político e social, etc. Neste artigo, assume-se que todas essas diferenças podem ser descritas adequadamente por um único construto denominado de nível socioeconômico (NSE). Este trabalho tem como objetivos principais: discutir formas de medir o NSE nas pesquisas sociais e produzir uma medida de NSE que expresse as variações entre famílias representadas nessas pesquisas, bem como interpretar a escala proposta. A consistência da proposta teórica é verificada com dados da Pesquisa Geração Escolar 2005 - Polo Belo Horizonte.

In any society, individuals differ markedly in relation to their place in the social hierarchy. Those differences are deeply associated to each individual educational opportunities, occupational history, access to goods and services, social prestige and political and social options. In this paper, we assume that all those differences can be adequately described by a unique construct named SES - Socioeconomic Status. Given this, the main purposes of this paper is to discuss different forms of measuring the SES in applied social science research and to introduce a specific measure, with the appropriate interpretation, for this construct. The usefulness of the new measure is verified with the data from a longitudinal educational survey named GERES 2005 - acronym for School Generation 2005.

Nas pesquisas sobre o efeito das escolas, reconhece-se uma clara distinção entre desempenho escolar e aprendizado. A primeira noção se refere ao nível de desempenho em alguma etapa da escolarização, e a segunda, à aquisição de conhecimentos durante a trajetória escolar. Há um consenso na literatura que, para se estudar o sucesso de escolas específicas, é preciso analisar a segunda noção com dados longitudinais. O objetivo deste estudo é medir o efeito das sete escolas públicas de Belo Horizonte semelhantes quanto à localização e ao perfil socioeconômico. O estudo se baseou em dados longitudinais coletados em dois anos e com início na 5ª série. Os alunos foram submetidos a testes cognitivos em três ocasiões. Eles também responderam a um questionário contextual para levantar informações sobre suas características demográficas, socioeconômicas e outros dados. O efeito das escolas no aprendizado foi analisado com modelos multiníveis de regressão para dados longitudinais, nos quais as escolas foram incluídas com variáveis indicadoras. Os resultados mostraram que os alunos com nível inicial mais baixo, em média, progrediram mais que os alunos com nível inicial mais alto, embora as diferenças de nível persistam no final do estudo. Os atributos socioeconômicos dos alunos têm muito impacto na explicação de diferenças no nível inicial, mas apenas algumas têm impacto no aprendizado dos alunos, dependendo da disciplina e da série. Este estudo tem contribuições metodológicas importantes para a investigação do efeito das escolas em perspectiva longitudinal.

In the studies on the effects of schools there is a clear distinction between pupil's performance at school and learning. The former notion refers to the level of performance at some stage of the process of schooling, whereas the latter is related to the acquisition of knowledge along the school trajectory. There is a consensus in the literature around the fact that, in order to study the success of individual schools, one has to analyze the latter notion using longitudinal data. The objective of the present study is to measure the effect of seven public schools of the city of Belo Horizonte, which are similar in terms of their location and socioeconomic profile. The study is based on longitudinal data collected during two years starting at the 5th grade. The students were subjected to cognitive tests at three moments. They also responded to an in-context questionnaire to gather information on their demographic and socioeconomic characteristics, amongst other data. The effect of schools on learning was analyzed with multilevel regression models for longitudinal data, in which the schools entered with indicator variables. The results have shown that, on average, students with lower initial level improved more than students with higher initial level, although differences in level remain at the end of studies. The socioeconomic attributes of pupils have large impact on the explanation of differences of initial level, but only some of them have impact on pupils' learning, depending on the discipline and grade. This study offers important methodological contributions to the investigation of the effect of schools under a longitudinal perspective.

Este artigo apresenta as metodologias de análise utilizadas em uma pesquisa longitudinal, cujo objetivo foi medir o efeito das escolas de sete estabelecimentos de ensino públicos localizados em uma mesma região da cidade de Belo Horizonte, MG. As pesquisas sobre o efeito das escolas constituem uma área específica no campo da Sociologia da Educação, que investiga o impacto das escolas para desempenho acadêmico dos alunos, após o controle das características de origem social dos alunos e do contexto das escolas. Durante dois anos letivos, foram coletados dados quantitativos, através de testes e questionários respondidos pelos alunos das escolas selecionadas, e dados qualitativos, através entrevistas com familiares de alunos e profissionais das escolas. Para a análise desses dados foram incorporadas novas técnicas estatísticas. Os modelos da Teoria da Resposta ao Item (TRI) foram utilizados para estimar os escores longitudinais dos alunos e os seus respectivos níveis socioeconômicos; e os modelos de regressão multiníveis, para a análise de dados longitudinais e com diferentes níveis de agregação. Os dados qualitativos foram analisados em conjunto com os resultados quantitativos, o que foi facilitado pelo uso de uma ferramenta que possibilitou a integração de dados textuais e atributos numéricos. Os resultados mostraram que a análise do efeito das escolas através de dados longitudinais é ser mais justa para as escolas, porque mostra o seu impacto no processo de aprendizagem dos alunos. A análise dos dados qualitativos mostrou fatores escolares e familiares que impactam os resultados dos alunos e que contribuem para a estratificação escolar. Considerando o potencial que as pesquisas educacionais podem ter para as políticas públicas, o artigo conclui sobre a importância da escolha de modelos de análise adequados para a análise do efeito das escolas. Além disso, a pesquisa mostrou a viabilidade do uso integrado de dados obtidos através de metodologias quantitativa e qualitativa, paradigmas usualmente tratados como se fossem necessariamente opostos, e a relevância desse procedimento para a compreensão dos resultados gerais.

This paper presents the methods used in a school effects study of seven public schools from the same geographical area of Belo Horizonte, state capital of Minas Gerais - Brazil. The school effects research, a sub-area of Sociology of the Education, deals with the schools impact in student achievement, after the individual student socioeconomic status and pertinent school contexts variables are accounted for. During the two years that the study reported here lasted, the students' achievement was measured through their results in three tests and family and school staff context data through several interviews. Item Response Theory (IRT) models were used to estimate and equalize the students' proficiency in the three waves of the study. The socioeconomic status measure was constructed using the similar IRT models. Regression models for hierarchical data were adjusted to analyze the longitudinal data nested in different levels of aggregation. Software that allows the integration of textual and numerical data helped the analysis of the data collected through the interviews. Longitudinal data allows the use of more appropriate measures of school effects since it captures the student learning and not only the student achievement. The qualitative data analyses expose the school and familial factors that affects the results of the pupils and contribute for the pertaining to school stratification. Considering the potential impact of educational research on policy, the paper emphasizes the importance of using adequate models in the analysis of longitudinal data for the estimation of the school effects. Moreover, this study shows the viability of the integrated use of quantitative and qualitative methodologies, which are usually treated as opposite paradigms, and the relevance of this procedure for the understanding of the general results.

Este estudo mediu o efeito-escola no desempenho acadêmico dos alunos de sete escolas públicas que atendem a comunidades vizinhas relativamente homogêneas do ponto de vista socioeconômico. O efeito-escola foi mensurado através da identificação da parte do progresso dos alunos que pode ser atribuída às escolas. A pesquisa coletou dados longitudinais junto a todas as turmas de 5ª série do Ensino Fundamental no início e no final do ano letivo. Os alunos responderam a testes de Português (leitura) e Matemática e preencheram um questionário sobre suas características demográficas, socioeconômicas e culturais, itens sobre o percurso escolar e hábitos de estudo. Também foram realizadas entrevistas com profissionais das escolas e com familiares dos alunos com o objetivo de contextualizar os resultados obtidos com os instrumentos quantitativos. Os resultados revelam que o efeito-escola se estrutura pela forma como as escolas organizam os alunos em turmas. A formação das turmas por nível de habilidade impacta não apenas o nível de desempenho dos alunos, mas também as diferenças nas taxas de progresso observadas durante o estudo. Os critérios de formação de turmas contribuem para que pequenas diferenças entre os alunos se transformem em grandes diferenças entre os grupos e acirrem a estratificação escolar de uma forma mais ampla.

This study measures the school effects on the achievement for fifth grade students of seven public schools, which serve homogeneous, in terms of their socioeconomic status, communities. The school effect is measured through a hierarchical linear model, which allows the separation of the learning of fifth grade students due to their schools practices from other sources of influence. The students included in this study were tested at the beginning and at the end of the school year. They answered a Portuguese language and a Mathematics test and filled a questionnaire with items on their demographic, socioeconomic and cultural characteristics. Additional items in the questionnaire captured the students' studying habits and their academic trajectory. Some parents and school staff were also interviewed in order to help the contextualization of the results, obtained with the achievement tests and questionnaires. The results show that the way the schools allocate students to classes has a large impact on student achievement. Using academic ability to allocate students to different classes impact not only the individual student achievement level, but also their corresponding learning rates. This class composition criterion contributes to transform small initial differences among students in large differences on their academic achievement, increasing therefore the school stratification.

Este artigo introduz um modelo conceitual que relaciona fatores intra e extra-escolares a uma medida de desempenho cognitivo dos alunos. Com a ajuda desse esquema revisam-se as evidências presentes na literatura educacional sobre as possibilidades de melhoria dos resultados cognitivos dos alunos do ensino fundamental. Muitos dos resultados das pesquisas relatadas na literatura internacional não foram validados por estudos empíricos no Brasil até o momento. Os melhores dados para estudo do assunto disponíveis no país são os do Sistema Nacional de Avaliação da Educação Básica - Saeb, que têm muitas limitações. No entanto, já é possível garantir que, considerando o nível atual do desempenho dos alunos, há ações que podem ser realizadas no nível da escola com grande potencial de melhoria das proficiências dos alunos. Assim, neste momento, é preciso enfatizar as políticas escolares, tendo em vista que elas só serão viáveis com a implantação da autonomia das escolas, preceito já estabelecido em lei, mas ainda não completamente implementado.

This paper introduces a conceptual model which relates intra and extra school factors to elementary school students' achievement. Using this model as reference, the main evidences from the literature on how to improve student's achievement were reviewed. However, it should be noted that several of the results published in the international literature haven't been replicated with data collected in Brazil. The best Brazilian data to study these questions are those from Brazilian System for Evaluation of Basic Education - Saeb. Considering the low level attained today by the Brazilian students, there are several actions, which can be taken at the school level that, if applied, will impact positively on the student's achievement. At this point in time, it is strategic to emphasize school policies, considering, however, that they only will be viable with the implementation of school autonomy, idea already present in law, but not completely put into practice.

This article discusses the processes by which family structure affects students' cognitive performance in Brazilian schools. The article's basic premise is that family influence is not a uni-dimensional construct, and the study thus uses four dimensions to capture such influence. The effects of these factors on students' performance are measured through a school attainment analysis model. The data are compatible with a model in which the parents' involvement acts as a mediating factor for the action of cultural resources, which in turn depend on economic resources, which have only indirect effects on students' cognitive performance in primary school.

Dans cet article, on examine les processus à travers lesquels la structure familiale peut gêner les performances cognitives des élèves au Brésil. On part du pressupposé que l'influence de la famille ne repose pas sur un principe unidimensionnel mais que, pour la saisir, il faut se servir de quatre dimensions. Les effets de ces facteurs sur les résultats scolaires des élèves sont examinés par le moyen d'un modèle d'analyse des trajectoires. Les données sont compatibles avec un modèle où l'engagement des parents agit comme un facteur de médiation dans l'intervention des ressources culturelles qui, à leur tour, dépendent des ressources économiques; celles-ci n'ont que des effets indirects sur les performances cognitives des élèves de l'enseignement primaire et secondaire.

Nesse artigo, os autores analisam, de maneira comparativa, o Exame Nacional de Avaliação do Desempenho de Estudante - ENADE, e o Exame Nacional de Cursos - ENC, mais conhecido como Provão, a partir de críticas feitas ao segundo e da capacidade do ENADE de endereçá-las. Ao fazê-lo, identificam diferenças e similaridades entre os dois exames, argumentam que ambos têm integridade técnica e apresentam contribuições para o aprimoramento do exame vigente, tais como a elaboração de uma matriz permanente e a pré-testagem dos instrumentos. Em síntese, as análises apontam para uma grande similaridade dos processos técnicos das duas abordagens, enquanto que as diferenças se apresentam mais no plano conceitual, vez que o ENADE se propõe a apresentar um indicador de diferença de desempenho e, especialmente, perde o caráter high stakes do exame que o antecedeu. Os autores concluem que o novo exame não conseguiu, até o momento, resolver vários dos problemas identificados na abordagem anterior, mas que algumas das propostas, se implementadas, constituirão um avanço real para a utilização dos seus resultados.

In this article, the authors comparatively analyze the National Exam for Evaluating Student Achievement - ENADE, and the National Course Exam - ENC, better known as the Provão, focusing on criticisms directed at the latter and the ENADE's ability to address them. In so doing, they identify similarities and differences between the two exams, argue that both sustain an adequate level of technical integrity, and present suggestions for improving the present exam regarding aspects such as test specification and instrument pretesting. The analyses reveal that the technical processes adopted by the two approaches are very similar. Their differences are primarily conceptual in nature, since the ENADE, in contrast to the Provão, proposes to indicate achievement gain over time and is not high stakes in orientation. The authors conclude that the new exam has not, as yet, resolved a number of problems associated with the previous approach, but some of the current proposals, if implemented, constitute a genuine advance with respect to the utilization of the exam results.

En este artículo, los autores analizan, de un modo comparativo, el Examen Nacional de Evaluación del Desempeño de los Estudiantes (ENADE) y el Examen Nacional de Carreras (ENC, más conocido como Provão), a partir de críticas hechas al segundo y de la capacidad del ENADE de encaminarlas. Al hacerlo, identifican diferencias y similitudes entre los dos exámenes, argumentan que ambos tienen integridad técnica y presentan contribuciones para el perfeccionamiento del examen vigente, tales como la elaboración de una matriz permanente y el testeo previo de los instrumentos. En síntesis, los análisis señalan una gran similitud entre los procesos técnicos de los dos abordajes, siendo que las diferencias aparecen más en el ámbito conceptual, dado que el ENADE se propone presentar un indicador de diferencia de desempeño y, especialmente, pierde el carácter high stakes del examen que lo antecedió. Los autores concluyen que el nuevo examen no consiguió, hasta el momento, resolver varios de los problemas identificados en el abordaje anterior, pero que algunas de las propuestas, si fueran implementadas, constituirían un avance real para la utilización de sus resultados.