Avaliação de um mestrado profissional em nível de impacto social

Abstract

Em média, os jovens brasileiros têm apresentado baixo desempenho na disciplina Matemática em avaliações em larga escala, como o Sistema de Avaliação da Educação Básica (Saeb) e o Programa Internacional de Avaliação de Estudantes (Pisa), demonstrando precário letramento matemático. Com vistas a mitigar esse problema, a Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes), induziu a criação de programa de mestrado profissional em rede nacional, destinado a professores de matemática das escolas públicas, como forma de suprir déficit de formação, melhorando a aprendizagem dos estudantes. Desde o início do Programa de Mestrado Profissional em Matemática em Rede Nacional (PROFMAT), em 2011, foram destinados mais de R$204 milhões para sua execução, o que torna relevante para a sociedade a busca de evidências da efetividade dessa política pública. O objetivo principal deste estudo foi avaliar o impacto do PROFMAT, no nível de impacto social, nas instituições públicas de origem dos concluintes do programa. Para tanto, foram conduzidos três estudos. O primeiro teve delineamento de natureza mista, qualitativa e quantitativa, de corte transversal com pesquisa em dados de fontes secundárias (documental e arquivística) e primárias, por meio de entrevistas com stakeholders do PROFMAT. O segundo estudo teve delineamento de natureza mista, qualitativa e quantitativa, descritiva, de corte transversal com pesquisa em dados de fontes secundárias (fontes arquivísticas). Por fim, o terceiro estudo apresentou delineamento quase-experimental com cinco grupos compostos por escolas onde atuam egressos do PROFMAT (grupos experimentais) e cinco grupos controle, compostos por escolas onde não há egressos do programa. As amostras abrangeram escolas públicas do DF (n=29), GO (n=39), MT (n=12), MS (n=23) e PR (n=61). O impacto social foi medido em termos de aumento da média dos estudantes no Saeb Matemática Séries Finais do Ensino Fundamental nos anos de 2013, 2015 e 2017. Foram aplicados Testes t de Student e Ancova fatorial mista de medidas repetidas. Os resultados dos Testes t apontaram que houve diferenças estatisticamente significativas nas médias das notas das escolas com e sem egressos do PROFMAT em três unidades da Federação: DF, GO e PR, indicando maiores médias em escolas com egressos do programa. Porém as Ancovas fatoriais mistas foram executadas apenas para as escolas do DF, haja vista que, nas amostras das demais unidades da federação, houve quebra de pressupostos estatísticos. Assim, somente no DF foram encontradas diferenças dentro de cada grupo entre as notas do Saeb 2013, 2015 e 2017, quando as notas dessas escolas no pré-teste (Saeb 2011) foram utilizadas como covariável. Concluiu-se, portanto, que os achados apontam indícios da efetividade do PROFMAT na medida em que a melhoria na nota do Saeb Matemática das escolas onde atuam seus egressos pode estar relacionada ao programa, evidenciando, assim, existência de impacto social.