FUNDAÇÃO GETULIO VARGAS ESCOLA DE ECONOMIA DE SÃO PAULO LEONARDO MAKOTO KAWAHARA UNDERSTANDING THE IMPACTS OF A FULL-TIME SCHOOLING PROGRAM São Paulo 2019 LEONARDO MAKOTO KAWAHARA UNDERSTANDING THE IMPACTS OF A FULL-TIME SCHOOLING PROGRAM Dissertação apresentada à Escola de Econo- mia de São Paulo como pré-requisito à ob- tenção de título de mestre em Economia de Empresas. Orientador: Vladimir Pinheiro Ponczek. São Paulo 2019 Kawahara, Leonardo Makoto. Understanding the impacts of a full-time schooling program / Leonardo Makoto Kawahara. - 2019. 91 f. Orientador: Vladimir Pinheiro Ponczek. Dissertação (mestrado CMEE) – Fundação Getulio Vargas, Escola de Economia de São Paulo. 1. Escolas públicas - Brasil. 2. Educação integral. 3. Avaliação educacional - Brasil. I. Ponczek, Vladimir Pinheiro. II. Dissertação (mestrado CMEE) – Escola de Economia de São Paulo. III. Fundação Getulio Vargas. IV. Título. CDU 37.018.591(81) Ficha Catalográfica elaborada por: Isabele Oliveira dos Santos Garcia CRB SP-010191/O Biblioteca Karl A. Boedecker da Fundação Getulio Vargas - SP LEONARDO MAKOTO KAWAHARA UNDERSTANDING THE IMPACTS OF A FULL-TIME SCHOOLING PROGRAM Dissertação apresentada à Escola de Econo- mia de São Paulo como pré-requisito à ob- tenção de título de mestre em Economia de Empresas. Data de aprovação: / / Banca examinadora: Prof. Dr. Vladimir Pinheiro Ponczek FGV-EESP (Orientador) Prof. Dr. André Portela Fernandes de Souza FGV-EESP Prof. Dr. Naercio Aquino Menezes Filho Insper Dedico este trabalho ao meus pais, Paulo e Suely, e à minha irmã, Paula, por estarem ao meu lado em todos os momentos da minha vida e por acreditarem em mim. Aos meus amigos da minha turma de pós-graduação, em especial Gabriel, Bruna, Túlio, Nicolas e João Pedro, pelos desafios que juntos superamos. Aos meus amigos da salinha. Aos meus amigos Janaína, Pedro, Rodrigo, Adriano e Arthur, por estarem do meu lado nos momentos de maior necessidade. Aos meus primos, Marina, Melina e Samuel, pelo apoio. À Erica, pelo companheirismo. Agradecimentos Ao meu orientador, Vladimir Ponczek, pelo esforço e pela orientação. À Helena Lima e à Thereza Barreto, pelo auxílio, informações e disponibilidade. Ao corpo docente da Escola Economia de São Paulo da Fundação Getúlio Vargas pelas aulas e pelo conhecimento fornecido. "O presente trabalho foi realizado com apoio da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - Brasil (CAPES) - Código de Financiamento 001." "This study was financed in part by the Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - Brasil (CAPES) - Finance Code 001" Resumo Este trabalho estima os impactos do programa de ensino em tempo integral, uma interven- ção em escolas públicas brasileiras de ensino fundamental e médio, em notas médias da Prova Brasil e do ENEM, e em indicadores de fluxo, como taxas de aprovação, reprovação, abandono e distorção série-idade. Para atingir tal objetivo, fizemos o uso da metodologia de diferenças-em-diferenças com dados do Censo Escolar, ENEM, Prova Brasil, e indicadores de fluxo. Os resultados indicam que o programa tem impactos significantes em todos as variáveis. Em média, o programa aumenta as notas das escolas, aumenta a taxa de aprovação e diminui as taxas de reprovação, desistência e distorção série-idade. Testamos para outros efeitos do programa, como impacto na composição da escola e em escolas não tratadas na mesma cidade. Os resultados sugerem que existe um efeito seleção em ação, mas que não é o maior responsável pelo impacto do programa. Ainda, buscando entender os canais de transmissão do programa, usamos variações na implementação do programa para estimar quais características parecem ser mais relevantes para o impacto positivo. Os resultados indicam que, em escolas que implementaram processos de seleção e remoção de professores e diretores, o programa teve maior impacto. Essas descobertas trazem maior compreensão em como programas de ensino em tempo integral impactam as variáveis educacionais. Palavras-chave: Ensino em tempo integral, aumento da jornada escolar, qualidade do ensino. Abstract This work estimates the impact of the full-time schooling program, an intervention in Brazilian public middle and high schools, on test score such as Prova Brasil and ENEM test scores and on flow indicators, such as promotion, failure, drop-out and grade-age distortion. The results indicate that the program has significant impacts in all the outcomes. In average, the program increases the test scores of schools, increases promotion rates, decreases failure, drop-out, and grade-age distortion rates. We test for other effects of the program, like the impact on school composition and on other schools in the city. The findings suggest that there is a selection effect in place, but that they are not the main responsible for the impact of the program. Furthermore, to understand the channels of transmission of the program, we use some variation in the implementation of the program to estimate which characteristics seem to be more relevant for the positive impact. The results indicate that, in schools which had implemented process of selection and removal of teachers and principals, the impact of the program was larger. These findings bring comprehension in how programs of full-time schooling may impact educational outcomes. Keywords: Full-time schooling, quality of education, extension of school time. List of Figures Figure 1 – Elementary and middle schools flow variables .............. 12 Figure 2 – High schools flow variables......................... 13 Figure 3 – Enrollment rates .............................. 14 Figure 4 – Conclusion rates .............................. 15 Figure 5 – SAEB mathematics test scores....................... 15 Figure 6 – SAEB portuguese test scores........................ 16 Figure 7 – New schools................................. 23 Figure 8 – New schools receiving the program in the high school.......... 24 Figure 9 – New schools receiving the program in the middle school......... 24 Figure 10 – Total of schools receiving the program .................. 25 Figure 11 – Total of schools receiving the program in the high school . 25 Figure 12 – Total of schools receiving the program in the middle school . 25 Figure 13 – Scree plot PCA............................... 90 List of Tables Table 1 – Main variables................................ 27 Table 2 – Descriptive statistics - High school sample - All years .......... 31 Table 3 – Descriptive statistics - Middle school sample - All years ......... 32 Table 4 – Descriptive statistics - High school sample - 2004 - 2009 - 2015 . 33 Table 5 – Descriptive statistics - Middle school sample - 2011 - 2013 - 2015 . 34 Table 6 – Sample balancing before matching - Average school characteristics in 2003, by treatment status - High school sample.............. 35 Table 7 – Sample balancing before matching - Average school characteristics in 2007, by treatment status - Middle school sample............. 36 Table 8 – Impact of the full-time schooling program on ENEM test - High school sample .................................... 41 Table 9 – Impact of the full-time schooling program on flow indicators (1) - High school sample ................................ 42 Table 10 – Impact of the full-time schooling program on flow indicators (2) - High school sample ................................ 43 Table 11 – Impact of the full-time schooling program on educational outcomes - Middle school sample ............................ 46 Table 12 – Spillover effect - Impact of the full-time schooling program on city average educational outcomes - High school sample ................ 53 Table 13 – Impact of the full-time schooling program on average students character- istics - High school sample ......................... 55 Table 14 – Impact of the full-time schooling program on school characteristics - High school sample ................................ 56 Table 15 – Impact of the full-time schooling program on number of students and teachers - High school sample........................ 58 Table 16 – Estimating the mediators’ effect ...................... 60 Table 17 – Estimating the mediators’ effect - Aggregating dummies - All . 61 Table 18 – Estimating the mediators’ effect - Aggregating dummies - Any . 62 Table 19 – Estimating the mediators’ effect - Components.............. 64 Table 20 – Different implementations.......................... 66 Table 21 – Overflow effect - High school sample.................... 67 Table 22 – Overflow effect - Middle school sample................... 68 Table 23 – Sample Balancing after matching - Average school characteristics, in 2003, by treatment status - High school sample.............. 82 Table 24 – Sample Balancing after matching - Average school characteristics, in 2007, by treatment status - Middle school Sample ............ 83 Table 25 – Descriptive Statistics - City level - High school sample.......... 85 Table 26 – Sample balancing before matching - Average city characteristics, by treatment status - High school sample................... 86 Table 27 – Sample Balancing after matching - Average city characteristics, by treat- ment status - High school sample...................... 87 Table 28 – Mediators correlation matrix........................ 88 Table 29 – Eingenvalues................................. 89 Table 30 – Components Mediator Correlation Matrix................. 91 Contents 1 INTRODUCTION............................ 12 2 THE FULL-TIME SCHOOLING PROGRAM............. 21 3 DATA AND EMPIRICAL STRATEGY................. 26 3.1