COLEÇÃO EDUCAÇÃO MATEMÁTICA E SUAS TECNOLOGIAS PROALFA 2018 E 2019: Um olhar sobre as competências e habilidades Matemáticas Rede Municipal de Educação de Diamantina Relatório Técnico e Evento Organizado Caroline Miranda Barroso Stella Maris Lemos Nunes Mestrado Profissional em Educação em Ciências, Matemática e Tecnologia UNIVERSIDADE FEDERAL DOS VALES DO JEQUITINHONHA E MUCURI Reitor Janir Alves Soares Vice-Reitor Marcus Henrique Canuto APOIO Grupo de Avaliação e Pesquisas Educacionais (GAPE) Caroline Miranda Barroso Stella Maris Lemos Nunes PRODUTO EDUCACIONAL: Relatório Técnico e Evento Organizado PROALFA 2018 e 2019: Um olhar sobre as competências e habilidades Matemáticas – Rede Municipal de Educação de Diamantina 1ª Edição UFVJM Produto Educacional apresentado como requisito à obtenção do grau de Mestre em Educação em Ciências, Matemática e Tecnologia pelo Programa de Mestrado Profissional em Educação em Ciências Matemática e Tecnologia da Universidade Federal dos Vales do Jequitinhonha e Mucuri, campus Diamantina. Aprovado em banca de defesa de mestrado no dia 16/fev./2022,pelos seguintes membros: Profa. Dra. Luciana Resende Allain /UFVJM Profa. Dra. Maria Teresa Gonzaga Alves/UFMG Profa. Dra. Stella Maris Lemos Nunes /UFVJM Diamantina, MG 2022 O conteúdo desta publicação é de inteira responsabilidade dos autores. Permitida a reprodução total ou parcial, desde que citada a fonte. Editoração eletrônica e projeto gráfico/capa: Programa de Pós-Graduação em Educação em Ciências, Matemática e Tecnologia SUMÁRIO APRESENTAÇÃO DO PRODUTO EDUCACIONAL .................................................................... 1 INTRODUÇÃO............................................................................................................................... 3 REFERENCIAL TEÓRICO ............................................................................................................ 5 METODOLOGIA DE DESENVOLVIMENTO DO PE ..................................................................... 8 Os Subtipos do PE .................................................................................................................... 8 1. Relatório Técnico ................................................................................................................... 8 2. Evento Organizado .............................................................................................................. 11 CONSIDERAÇÕES FINAIS......................................................................................................... 14 REFERÊNCIAS BIBLIOGRÁFICAS ........................................................................................... 15 APÊNDICE A – RELATÓRIO TÉCNICO ..................................................................................... 17 ANEXO A – DECLARAÇÃO DE RECEBIMENTO DO RELATÓRIO TÉCNICO ........................ 56 ANEXO B – CERTIFICADO DE PARTICIPAÇÃO ...................................................................... 57 ANEXO C – CARACTERIZAÇÃO DO PRODUTO EDUCACIONAL .......................................... 58 ANEXO D – FICHA DE AVALIAÇÃO DO PRODUTO EDUCACIONAL ..................................... 61 1 APRESENTAÇÃO DO PRODUTO EDUCACIONAL Este material, apresentado como Produto Educacional (PE), é parte integrante da pesquisa intitulada “Desempenho em Matemática dos alunos do 2º ano do Ensino Fundamental da Rede Municipal de Educação de Diamantina/MG: análise das habilidades e competências não consolidadas e visualização dos resultados”, desenvolvida no Programa de Mestrado Profissional em Educação em Ciências, Matemática e Tecnologia (PPGECMaT) da Universidade Federal dos Vales do Jequitinhonha e Mucuri (UFVJM), sob orientação da Professora Doutora Stella Maris Lemos Nunes. Tal PE é composto por dois Produtos Técnicos Tecnológicos (PTT), situados na linha de pesquisa referente ao Ensino e Aprendizagem em Educação em Ciências e Matemática (UFVJM, 2019) e envolve Produtos Educativos e Estudos sobre as Avaliações de Sistemas de Ensino e de Escolas da Educação Básica. Quanto ao tipo, esse PE é caracterizado como um piloto e é composto por dois subtipos: o PTT5 – Evento Organizado e o PTT6 – Relatório Técnico. O Sistema Mineiro de Avaliação e Equidade da Educação Pública (SIMAVE) é formado por um conjunto de avaliações em larga escala que buscam avaliar a qualidade do ensino ofertado nas escolas mineiras e é composto por dois programas: o Programa de Avaliação da Alfabetização (PROALFA) e o Programa de Avaliação da Rede Pública de Educação Básica (PROEB). O objetivo do presente PE é analisar e apresentaros resultados de desempenho dos estudantes do 2º ano do Ensino Fundamental (EF) da Rede Municipal de Educação de Diamantinanas avaliações de Matemática do PROALFA realizadas em 2018 e 2019. Cada subtipo desse PE tem um objetivo específico. O subtipo PTT6 – Relatório Técnico –tem como escopo agregar e analisar os resultados de desempenho, enquanto o PTT5 – Evento Organizado – tem como desígnio apresentar e discutir os achados da pesquisa para o público-alvo. O Evento Organizado também foi realizado com o propósito de divulgar e tornar público o conteúdo do Relatório Técnico. O PE possui abrangência de aplicabilidade local, envolvendo a cidade de Diamantina e suas áreas rural e urbana. O seu público-alvo são os membros da Secretaria Municipal de Educação de Diamantina/MG, os diretores, coordenadores, supervisores e professores municipais. Devido à escassez de estudos mais detalhados sobre a situação do desempenho em Matemática dos alunos da Rede Municipal de Educação de Diamantina/MG que agregue todas as escolas municipais, os PTT5 e PTT6 se configuram importantes instrumentos para melhorar a compreensão acerca das habilidades matemáticas não consolidadas pelos alunos dessa Rede Municipal de Educação. Dessa forma, este PE apresenta um impacto do tipo potencial, capaz de auxiliar a Secretaria Municipal de Educação (SME) de Diamantina a visualizar e melhor compreender como está o desempenho em Matemática dos alunos do 2º ano do EF da sua rede como um todo. Embora o PROALFA disponibilize os resultados das avaliações, seus resultados são divulgados por escola, turma e aluno ou agregados por Superintendências Regionais de Ensino. 2 As Secretarias Municipais de Educaçãonãotêm acesso às informações e resultados agregados das suas Redes Municipais de Educação. Nessa perspectiva, uma contribuição importante do presente PE é agregar e analisar os resultados da Rede Municipal de Educação de Diamantina, possibilitando à SME uma visualização dos resultados da sua rede, principalmente no que diz respeito à consolidação de habilidades matemáticas. Os dados utilizados para a elaboração deste PE são secundários, tendo como principal fonte os dados oficiais do SIMAVE obtidos via Secretaria Estadual de Educação de Minas Gerais (SEE/MG) e por meio do site (https://simave.educacao.mg.gov.br/). Dessa forma, o PE, ao envolver a combinação e/ou compilação de conhecimentos pré-estabelecidos, possui médio teor inovador. É possível aplicar o método utilizado para analisar o desempenho em Matemática neste PE em outros anos e outras etapas de escolaridade do PROALFA e/ou do SIMAVE, entretanto, é importante destacar que os dados são distintos e cada análise é única. Assim, este PE possui potencial de replicabilidade. A Forma de avaliação (validação) realizada para o PE é de 1ª instância, por meio da sua apresentação aos gestores e atores educacionais da Rede Municipal de Educação de Diamantina; e de 2ª instância, ao ser apresentado à banca de defesa. 3 INTRODUÇÃO A educação para todos possui um grande desafio no que se refere ao ensino/aprendizagem da Matemática. Diante das diversas iniciativas para se ofertar uma educação de qualidade, as avaliações em larga escala se tornaram um importante instrumento para revelar o desempenho de alunos em diversas partes do mundo. Para uma rede de ensino, tais avaliações se tornaram uma das principais formas de se identificar as reais dificuldades e necessidades em relação às habilidades matemáticas na atualidade. Em consonância com as iniciativas governamentais, a Secretaria de Educação do Estado de Minas Gerais, por meio do SIMAVE, busca fomentar ações para transformações e melhorias na educação. O SIMAVE écomposto por dois programas, ambos de caráter censitário: o PROALFA e o PROEB. Embora essas avaliações sejam instrumentos importantes para mensurar a qualidade do ensino e o aprendizado dos alunos mineiros, elas demandam altos investimentos, seus resultados demoram a ser disponibilizados e existe uma dificuldade de quem precisa utilizá-los a interpretar e se apropriar desses resultados, o que pode fazer com que os benefícios dessas avaliações sejam subutilizados, com pouco ou nenhum impacto na gestão pedagógica. Nesse cenário, a Secretaria Municipal de Educação de Diamantina estabeleceu uma parceria com a UFVJM para auxiliá-los na análise dos dados das avaliações de Matemática do PROALFA, vislumbrando melhor compreender o desempenho em Matemática dos alunos da sua rede. Partindo dessa perspectiva, o presente trabalho consiste em um Produto Educacional (PE), definido pela área de Ensino como “o resultado de um processo criativo gerado a partir de uma atividade de pesquisa, com vistas a responder a uma pergunta ou a um problema ou, ainda, a uma necessidade concreta associados ao campo de prática profissional, podendo ser um artefato real ou virtual, ou ainda, um processo” (BRASIL, 2019, p. 16). O problema deste PE consiste em: “auxiliar a SME/Diamantina a compreender os resultados de desempenho dos estudantes do 2º ano do Ensino Fundamental (EF) de sua rede de ensino nas avaliações de Matemática do PROALFA, realizadas em 2018 e 2019”. Diante da necessidade de se articular os conhecimentos científicos e matemáticos para aprimorar a compreensão dos resultados obtidos com as avaliações do PROALFA, o presente PE tem como objetivo geral analisar e apresentar os resultados de desempenho dos estudantes 4 do 2º ano da Rede Municipal de Educação de Diamantina nas avaliações de Matemática do PROALFA, realizadas em 2018 e 2019. Os resultados dessas avaliações possibilitam um acompanhamento e (re)planejamento das práticas pedagógicas e de gestão, uma vez que investigações dessa natureza são importantes para ajudar a compreender melhor o desempenho dos alunos em termos de habilidades e competências não consolidadas. 5 REFERENCIAL TEÓRICO As avaliações educacionais fazem parte do dia a dia das escolas por meio de provas, registros e observações. Elas dão suporte às tomadas de decisões políticas, pedagógicas e administrativas na educação. Podem ser classificadas em dois tipos: internas, realizadas na escola, aplicadas pelo professor no interior das suas salas de aula e que têm por objetivo avaliar a aprendizagem dos seus alunos; e externas, realizadas em larga escala e com objetivo de avaliar o desempenho dos estudantes de uma escola, rede de ensino, estado ou país. Existem alguns questionamentos (SAUL, 2015; DAMASCENO, 2017) acerca da avaliação externa, dos critérios para sua elaboração, da forma como ela é realizada, das questões éticas, políticas e econômicas que a permeiam. Uma das questões mais polêmicas que permeiam as avaliações externas é a relação com a qualidade educacional versus políticas de controle da gestão educacional e da responsabilização docente (accountability). De acordo com Shiroma e Evangelista (2011) “a melhoria da qualidade da educação foi apresentada como a principal justificativa para se profissionalizar os docentes; para aferi-la foram criados parâmetros e instrumentos padronizados de avaliação” (SHIROMA; EVANGELISTA, 2011, p. 131). Entendida dessa forma, as avaliações em larga escala seriam instrumentos da política de responsabilização aplicada pelos gestores nacionais, estaduais e municipais (OLIVEIRA; FRANÇA-CARVALHO; TAVARES, 2020). Por outro lado, na ausência de uma medida da qualidade da educação não há como verificar se o direito constitucional à educação foi atendido. Cada vez mais presente no Brasil e no mundo, a avaliação em larga escala constitui um conjunto enorme de processos avaliativos que favorecem a reflexão sobre uma determinada realidade (SOARES, 2011). De acordo com Souza (2016) “ao trazer os resultados dessas avaliações para o âmbito escolar, tem-se a clara intenção de fornecer subsídios para a orientação das ações pedagógicas” (SOUZA, 2016, p. 16).Portanto, apesar das críticas recebidas, as avaliações em larga escala nos fornecem dados que podem subsidiar, além das políticas públicas, estudos importantes para melhorar a compreensão e, consequentemente, a qualidade do aprendizado dos alunos brasileiros. Nessa perspectiva, Filgueiras (2013) destaca que as avaliações em larga escala “estão cada vez mais disseminadas entre os diversos estados, numa tentativa de prevenir os resultados poucos satisfatórios do desempenho dos estudantes” (FILGUEIRAS, 2013, p. 61). No estado de Minas Gerais, a avaliação do sistema estadual de educação se tornou prioridade através da reforma da educação prevista no artigo 196 da Constituição Estadual de 6 1989. A partir de um projeto piloto realizado por alguns professores da Universidade Federal de Juiz de Fora (UFJF), surgiu o Sistema Mineiro de Avaliação e Equidade da Educação Pública (SIMAVE) com o intuitode monitorar a qualidade da educaçãoe de inserir outros tipos de avaliações educacionais no Estado de Minas Gerais (ARAÚJO; SILVA, 2011). As avaliações externas do SIMAVE são realizadas por meio do PROEB e do PROALFA. Essas avaliações são complementares e integradas, realizadas de forma censitária e anual. O PROEB avalia o desempenho em Língua Portuguesa e Matemática dos estudantes dos anos finais do EF (5º, 7º e 9º anos) e no Ensino Médio (1º e 3º anos) (MINAS GERAIS, 2019). O PROALFA avalia o desempenho em Língua Portuguesa (leitura escrita) e Matemática dos alunos nos anos iniciais do EF, 2º e 3º anos. Por meio dessas avaliações, a SEE/MG busca compreender se foi ensinado e aprendido aquilo que foi planejado para ser ensinado e aprendido, bem como se o que foi ensinado corresponde a uma concepção atualizada do ensino em alfabetização, leitura e escrita (MINAS GERAIS, 2008). Ademais, no que se refere ao ensino de matemática, de acordo com Santos (2016), “as dificuldades e afinidades de aprender Matemática podem ocorrer por diversas situações, e é imprescindível que haja uma preocupação maior com relação a como se lidar com o seu aprendizado, deixando de torná-lo complexo e sem significado” (SANTOS, 2016, p. 39). O SIMAVE utiliza testes padronizados para mensurar o desempenho de um grande grupo de estudantes. Cada teste avalia uma única dimensão do conhecimento, sendo de fundamental importância a definição de quais as competências e habilidades se pretendem examinar em relação a um construto. Cada construto, ou seja, o que se deseja avaliar através do teste, é examinado pelas diferentes habilidades descritas na Matriz de Referência (MR) por meio dos itens que irão compor o teste. No caso em pauta, o construto avaliado é a Matemática. Os resultados do SIMAVE são sumarizados em indicadores de participação e desempenho. Esses indicadores são obtidos via Teoria Clássica dos Testes (TCT) e Teoria da Resposta ao Item (TRI). A proficiência do estudante é estimada por meio da TRI, um modelo estatístico que coloca em uma mesma métrica (ou escala) os estudantes e os itens do teste respondidos por eles (MINAS GERAIS, 2019). Assim, a proficiência do estudante representa o seu desempenho em relação ao construto avaliado no teste. O teste, por sua vez, possui itens que podem ser organizados na escala conforme o grau de dificuldade, contendo itens fáceis, os quais exigem habilidades menos complexas dos estudantes; e itens difíceis, que exigem habilidades mais complexas. Além disso, as análises dos percentuais de acerto por descritornos ajudam a compreender quais habilidades foram ou não bem consolidadas pelos estudantes. Essas análises auxiliam na identificação das maiores dificuldades dos estudantes em relação às 7 habilidades avaliadas bem como as áreas do currículo que precisam de um maior reforço pedagógico. Contudo, são poucas as pesquisas que abordam o desempenho em Matemática dos alunos do 2º ano do Ensino Fundamental em Minas Gerais. Arcas e Borges (2020) realizaram uma pesquisa em dois importantes repositórios nacionais, o da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) e o da Biblioteca Digital Brasileira de Teses e Dissertações (BDTD), na qual buscaram trabalhos realizados no período de 2000 a 2019 utilizando como palavras-chave: Sistema Mineiro de Avaliação; SIMAVE; PROEB; PROALFA; e PAAE. Nesse levantamento, eles encontraram 116 documentos, envolvendo 17 teses e 99 dissertações. Desses documentos, 6 trabalhos tiveram como tema o PROALFA e apenas 3 deles abordavam o desempenho dos alunos, mas nenhum deles tratava especificamente da Matemática. É importante observar que o PROALFA busca identificar como está a alfabetização dos alunos, observando como está seu desempenho, em termos de habilidades e competências, para subsidiar o processo de intervenção pedagógica nas escolas. De modo especial, o presente PE apresenta e analisa os resultados do desempenho em Matemática dos alunos do 2º ano do EF no PROALFA para todas as escolas da Rede Municipal de Educação de Diamantina. 8 METODOLOGIA DE DESENVOLVIMENTO DO PE Este PE é fruto de umapesquisa descritiva com abordagem quali-quantitativa que utilizou dados secundários do PROALFA dos anos de 2018 e 2019. Como dito anteriormente, eleestá disposto conforme a linha de pesquisa de Ensino e Aprendizagem em Educação em Ciências e Matemática (UFVJM, 2019) e envolve Produtos Educativos e Estudos sobre as Avaliações de Sistemas de Ensino e de Escolas da Educação Básica. O objetivo do presente PE é analisar e apresentar os resultados de desempenho dos estudantes do 2º ano do Ensino Fundamental (EF) da Rede Municipal de Educação de Diamantinanas avaliações de Matemática do PROALFA realizadas em 2018 e 2019. Os Subtipos do PE Este PE é composto por dois Produtos Técnicos Tecnológicos (PTT), classificados em dois subtipos: um Relatório Técnico (PTT6) e um Evento Organizado (PTT5). Primeiramente, elaboramos o Relatório Técnico contendo as análises dos resultados dos alunos do 2º ano do Ensino Fundamental nas avaliações do PROALFA em 2018 e 2019 agregados para a Rede Municipal de Educação de Diamantina. Após a elaboração do Relatório Técnico, entregamo-lo à SME de Diamantina/MG. Em seguida, realizamos o Evento Organizado a fim de divulgarmos os resultados das análises contidas no Relatório Técnico, apresentando e discutindo os achados da pesquisa com o público-alvo. No Anexo C, está disponibilizada a ficha de Caracterização do Produto Educacional. 1. Relatório Técnico O Relatório Técnico tem como objetivo agregar e analisar os resultados de desempenho dos alunos do 2º ano do Ensino Fundamental da Rede Municipal de Educação de Diamantina nas avaliações do PROALFA, em 2018 e 2019. Pretende-se que ele seja um instrumento para melhorar a compreensão sobre o desempenho em Matemáticados estudantes do 2º ano do EF da Rede Municipal de Educação de Diamantina, em termos de competências e habilidades não consolidadas. O relatório técnico produzido na pesquisa e entregue à SME/Diamantina encontra- se disponível no Apêndice A. 9 Para a elaboração do Relatório Técnico, foram utilizados os dados oficiaisdo SIMAVE que foram solicitados à Secretaria Estadual de Educação de Minas Gerais (SEE/MG) respeitando o recorte da pesquisa. A Figura 1 apresenta a capa e contracapa do relatório. Figura 1. Caracterização do Relatório Técnico – Capa e Contracapa Fonte: Elaborado pelas autoras. Quanto ao conteúdo apresentado, o Relatório Técnico buscou facilitar o processo de leitura e interpretação dos resultados e foi composto por seis seções: Apresentação, Leitura e Interpretação dos Resultados, A Rede Municipal de Educação de Diamantina, Análise dos Resultados, Considerações Finais e Referências. A Figura 2 ilustra a distribuição do conteúdo do relatório por meio do Sumário. 10 Figura 2. Caracterização do Relatório Técnico –Sumário Fonte: Elaborado pelas autoras. A elaboração do Relatório Técnico envolveu três etapas principais. Na primeira etapa da elaboração, reunimos e apresentamos alguns conceitos importantes relacionados às avaliações externas de modo a proporcionar o melhor entendimento das análises e resultados obtidos. Apresentamos uma breve revisão sobre o PROALFA e trabalhamos com a definição e estruturação dos principais indicadores de resultados do PROALFA: os indicadores de participação e de desempenho. Na segunda etapa, realizamos uma contextualização da Rede Municipal de Educação de Diamantina. Assim, apresentamos a distribuição das escolas municipais, envolvendo as áreas urbana e rural, e evidenciamos como estava a configuração da rede nos anos de 2018 e 2019, em termos de quantidade de matrículas e de servidores. Na terceira etapa, apresentamos as análises dos resultados em que foram evidenciados: o desempenho e participação de acordo com a localidade, a rede de ensino e a edição do PROALFA; a distribuição de estudantes por padrão de desempenho; o desempenho e a participação (evidenciando os resultados por escola da rede); a comparação dos resultados de 2018 com os de 2019. Finalizando a análise dos resultados de desempenho e objetivando 11 descrever sobre a consolidação das habilidades matemáticas, apresentamos uma análise dos descritores e dos itens dos testes de 2018 e 2019. Os indicadores estatísticos utilizados nas análises quantitativas apresentadas na terceira etapa foram: percentual de participação dos alunos no PROALFA; proficiência média em Matemática, percentual de alunos por padrão de desempenho da escala de proficiência e percentual de acertos por item. Portanto, a análise estatística mescla indicadores de participação e indicadores de desempenho obtidos via Teoria da Resposta ao Item (TRI) e da Teoria Clássica dos Testes (TCT). Posteriormente, os resultados obtidos foram analisados à luz da matriz de referência e da escala de proficiência do PROALFA, possibilitando uma análise quali-quantitativa sobre as habilidades e competências dos alunos do 2º ano do EF da Rede Municipal de Educação de Diamantina. Os itens das avaliações do PROALFA foram classificados de acordo com sua faixa de dificuldade. Para definição dos percentuais que delimitaram as categorias da dificuldade dos itens utilizamos como referência Fontanive, Elliot e Klein (2007). Dessa maneira, itens com percentual de acerto superior a 65% foram considerados fáceis e classificados como dificuldade baixa; itens com percentual de acerto maior ou igual a 30% e menor ou igual a 65% foram considerados intermediários e classificados como dificuldade média; e os itens com percentual de acerto inferior a 30% foram considerados difíceis e classificados como dificuldade alta. Essa categorização foi importante para possibilitar uma melhor visualização da consolidação das habilidades matemáticas e foi apresentada finalizando a análise dos dados. No Relatório Técnico, foram utilizados quadros e tabelas para auxiliar na organização e visualização dos resultados. Para a confecção e design do relatório, foi utilizada a plataforma Canva, de forma gratuita e on-line. O Canva é uma plataforma de design que permite integração com outras ferramentas e trabalho em equipe, podendo ser acessada pelo link: https://www.canva.com. O relatório foi entregue à Secretaria Municipal de Educação de Diamantina em uma reunião que ocorreu no dia 30/11/2021 (declaração de recebimento disponível no Anexo A) e foi apresentado posteriormente aos professores da rede por meio do Evento Organizado, realizado no dia 13/12/2021. 2. Evento Organizado O Evento Organizado teve como objetivo apresentar e discutir os achados da pesquisa para o público-alvo. Ele foi realizado em formato virtual, aberto e público a fim de facilitar a participação de todos os interessados. Por meio do Evento Organizado, buscamos apresentar e 12 discutir as informações e análises contidas no Relatório Técnico no intuito de que tais resultados possam ser acessados, visualizados, divulgados, estudados e trabalhados em reuniões de forma mais simples, intuitiva e acessível. Entendemos que através desse evento, as informações contidas no Relatório Técnico envolveram, de forma direta, desde os gestores educacionais até os professores, garantindo, assim, um ambiente participativo e evitando o discurso de responsabilização. Esse evento foi fruto da parceria das autoras com os organizadores dos Seminários e Oficinas de Educação Matemática e Científica (SOEMC) a fim de utilizar o canal do SOEMC no YouTube para a divulgação do conteúdo do Relatório Técnico ao maior número de educadores possível, sobretudo aos da Rede Municipal de Educação de Diamantina. O SOEMC é um projeto do Programa de Pós-Graduação em Educação em Ciências, Matemática e suas Tecnologias (PPGECMaT), apoiado pela Pró-Reitoria de Extensão (PROEXC) e Pró-Reitoria de Pós- Graduação (PRPPG) da UFVJM que visa auxiliar a formação dos professores de Ciências e Matemática na educação básica e no ensino superior (UFVJM, 2021). Para a realização do evento, inicialmente, entramos em contato com os organizadores do SOEMC para saber se seria possível utilizar o canal e se poderiam nos auxiliar com os preparativos para a transmissão. Dessa forma, tivemos ajuda da equipe do SOEMC na preparação do convite de divulgação, emissão do certificado de participação, na transmissão e gravação do evento. A Secretaria Municipal de Educação de Diamantina e a Superintendência Regional de Ensino de Diamantina divulgaram o evento para os seus atores educacionais e a coordenação do PPGECMaT e o canal do SOEMC divulgaram o evento aos seus alunos e seguidores. Para melhor caracterizar o Evento Organizado, a Figura 3 ilustra o convite de divulgação. Figura 3. Caracterização do Evento Virtual - Convite de Divulgação Fonte: Elaborado pelo SOEMC. 13 A transmissão do evento foi feita pelo canal do SOEMC no YouTube, podendo ser acessada no modo público pelo link https://youtu.be/4G0pau4_zHc, e a gravação se deu no Google Meet (com acesso restrito). O evento foi mediado pelas professoras do PPGECMaT: Aline de Souza Janerine, Helen Rose de Castro Silva Andrade e Stella Maris Lemos Nunes. A Figura 4 ilustra a transmissão do evento realizada pelo canal do SOEMC no YouTube. Figura 4. Transmissão do evento realizada pelo canal do SOEMC no YouTube Fonte: Print do evento no canal do SOEMC no YouTube (link: https://youtu.be/4G0pau4_zHc) A emissão do certificado de participação foi realizada mediante inscrição do participante no Even3, uma plataforma para criação de eventos on-line disponível no site https://www.even3.com.br. Dessa forma, todo participante que desejou receber o certificado se inscreveu no Even3 pelo link https://www.even3.com.br/ufvjm_soemc. A emissão do certificado foi realizada apenas para os participantes que se inscreveram e que estavam on-line durante a transmissão do evento. Assim, o Evento Organizado aconteceu e foi gravado no canal do SOEMC no YouTube, no dia 13/12/2021,com a finalidade de apresentar e divulgar os resultados do relatório técnico. O evento foi gratuito e aberto ao público, teve duração total de 1hora, 26 minutos e 20 segundos, contou com a participação da grande maioria dos professores e gestores da Rede Municipal de Educação de Diamantina, dos alunos e alguns professores do PPGECMaT. Teve um total geral de 77 emissões de certificados pelo Even3 e 305 visualizações no YouTube. O Anexo B apresenta o certificado de participação como palestrante emitido pelo SOEMC. 14 CONSIDERAÇÕES FINAIS Os subtipos que compõem este PE nos possibilitaram auxiliar a Rede Municipal de Educação de Diamantina a melhor compreender os resultados do desempenho em Matemática dos alunos do 2º ano do Ensino Fundamental. De forma mais específica e fugindo da perspectiva usual de analisar apenas os resultados de proficiência média, buscamos mesclar a TRI e a TCT para identificar e apresentar as habilidades matemáticas que possivelmente não estão sendo consolidadas pelos estudantes dessa rede de ensino. Com os resultados das análises disponíveis no Relatório e no Evento Organizado, a equipe da SME/Diamantina, os gestores e profissionais da educação poderão, com maior clareza, tomar as providências educacionais necessárias no ensino de Matemática da Rede Municipal. Assim, este PE pode ser utilizado como instrumento norteador para orientações pedagógicas e direcionamento do Projeto de Intervenção Pedagógica (PIP) que acontece nas suas escolas a fim de potencializar o aprendizado dos seus alunos e melhorar a qualidade do ensino na rede. 15 REFERÊNCIAS BIBLIOGRÁFICAS ARAÚJO, A. B.; SILVA, M. A. da. O lugar do Sistema Mineiro de Avaliação da Educação Pública (Simave) na busca pela qualidade da educação no Brasil. Roteiro, [S. l.], v. 36, n. 2, p. 205–224, 2011. Disponível em: https://portalperiodicos.unoesc.edu.br/roteiro/article/view/853. Acesso em: 09 jun. 2021. ARCAS, P. H.; BORGES, R. M. A produção acadêmica sobre o SIMAVE: mapeamento de teses e dissertações (2000-2019). Olhar de Professor, Brasil, Universidade Estadual de Ponta Grossa,vol. 23, 2020. DOI: https://doi.org/10.5212/OlharProfr.v.23.2020.15946.209209226789.0613. Disponível em: https://www.redalyc.org/jatsRepo/684/68464195005/68464195005.pdf. Acesso em: 09 jun. 2021. BRASIL, CAPES. Documento de Área – Ensino. Brasília, 2019. Disponível em: https://www.gov.br/capes/pt-br/acesso-a-informacao/acoes-e-programas/avaliacao/sobre-a- avaliacao/areas-avaliacao/sobre-as-areas-de-avaliacao/colegio-de-ciencias-exatas-tecnologicas- e-multidisciplinar/multidisciplinar/ensino. Acesso em: 22 jun. 2021. DAMASCENO, W. A. Persistência das desigualdades educacionais em escolas públicas de Barbacena/MG: uma avaliação dos efeitos da política de responsabilização sobre desigualdades educacionais. Orientador: José Alcides Figueiredo Santos. 2017. 206 p. Dissertação (Mestrado acadêmico em Ciências Sociais) – Programa de Pós-Graduação em Ciências Sociais, Instituto de Ciências Humanas, Universidade Federal de Juiz de Fora, Juiz de Fora, 2019. Disponível em: https://repositorio.ufjf.br/jspui/handle/ufjf/5815. Acesso em: 23 out. 2021. FILGUEIRAS, K. F. PROALFA (MG): Avaliação da alfabetização, em larga escala, no Brasil. Acolhendo a Alfabetização nos Países de Língua Portuguesa, [S. l.], v. 7, n. 13, p. 38-64, 2013. DOI: 10.11606/ISSN.1980-7686.v7i13p38-64. Disponível em: https://www.revistas.usp.br/reaa/article/view/45618. Acesso em: 09 jun. 2021. FONTANIVE, N. S.; ELLIOT, L. G.; KLEIN, R. Os desafios da apresentação dos resultados da avaliação de sistemas escolares a diferentes públicos. REICE - Revista Electrónica Iberoamericana sobre Calidad, Eficaciay Cambio em Educación, 2007, vol. 5, n. 2. Disponível em: https://revistas.uam.es/reice/article/view/10136/10245. Acesso em: 09 jun. 2021. LUCKESI, C. C. Avaliação da aprendizagem escolar: estudos e proposições. São Paulo: Cortez, 2008. 19 ed. 180 p. ISBN 9788524905506. MINAS GERAIS. Secretaria de Estado de Educação de Minas Gerais. Boletim Pedagógico: PROALFA 2008. 2008. Universidade Federal de Juiz de Fora, Faculdade de Educação, CAEd. Centro de Alfabetização, Leitura e Escrita, CEALE/UFMG. Disponível em: http://www.simave.caedufjf.net/wp- content/uploads/2012/06/BOLETIM_PEDAGOGICO_PROALFA_2008.pdf. Acesso em: 10 nov. 2020. MINAS GERAIS. Secretaria de Estado de Educação de Minas Gerais. SIMAVE: 2019. Universidade Federal de Juiz de Fora, Faculdade de Educação, CAEd, vol. 3, 2019. Juiz de Fora. Conteúdo: Revista do Sistema. ISSN 1983-0157. Disponível em: http://simave.educacao.mg.gov.br/#!/colecoes. Acesso em: 05 fev. 2021. 16 OLIVEIRA, L. X. de; FRANÇA-CARVALHO, A. D.; TAVARES, A. M. B. do N. Política de responsabilização escolar (accountabilityschool) e formação de professor: cenários e atores na avaliação educacional brasileira. Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 15, n. 4, p. 2049–2065, 2020. DOI: 10.21723/riaee.v15i4.13887. Disponível em: https://periodicos.fclar.unesp.br/iberoamericana/article/view/13887. Acesso em: 14 out. 2021. SANTOS, A. G. A falta de empatia no ensino de Matemática um estudo da prática docente e sua afinidade com a área de formação. Diversitas Journal, [S. l.], v. 1, n. 1, p. 33–40, 2016. DOI: 10.17648/diversitas-journal-v1i1.240. Disponível em: https://diversitasjournal.com.br/diversitas_journal/article/view/240. Acesso em: 16 dez. 2021. SAUL, A. M. Na contramão da lógica do controle em contextos de avaliação: por uma educação democrática e emancipatória. Educ. Pesqui., São Paulo, v. 41, n. especial, p. 1299-1311, 2015. DOI: http://dx.doi.org/10.1590/S1517-9702201508143035. Disponível em: https://www.scielo.br/j/ep/a/3nMScNcgg4HFXrrMTTTsGtc/?lang=pt. Acesso em: 17 ago. 2021. SHIROMA, E. O.; EVANGELISTA, O. Avaliação e responsabilização pelos resultados: atualizações nas formas de gestão de professores. Dossiê - Políticas Educativas Contemporâneas. PERSPECTIVA, Florianópolis, v. 29, n. 1, 127-160, jan./jun. 2011. DOI: https://doi.org/10.5007/2175-795X.2011v29n1p127.Disponível em: https://periodicos.ufsc.br/index.php/perspectiva/article/view/2175-795X.2011v29n1p127. Acesso em: 16 set. 2021. SOARES, C. R. Sistemas de Avaliações em Larga Escala na Perspectiva Histórico-Cultural: o caso do Sistema Mineiro de Avaliação da Educação Pública – SIMAVE. Orientador: Maria Cristina Araújo de Oliveira. 2011. 204 f. Dissertação (Mestrado Profissional em Educação Matemática) – Universidade Federal de Juiz de Fora, Juiz de Fora, 2011. DOI: https://repositorio.ufsc.br/xmlui/handle/123456789/161842. Disponível em: https://repositorio.ufsc.br/bitstream/handle/123456789/161842/Dissertacao-Carlos- Renato.pdf?sequence=1&isAllowed=y. Acesso em: 13 jun. 2020. SOUZA, S. R. de S. Avaliações em larga escala: impactos na escola e nas práticas docentes. Orientador: Ana Cristina da Silva Rodrigues. 2016. 115 f. Dissertação (mestrado profissional em Educação) – Universidade Federal do Pampa. 2016. Disponível em: http://dspace.unipampa.edu.br:8080/jspui/handle/riu/1462. Acesso em: 13 jun. 2020. UNIVERSIDADE FEDERAL DOS VALES DO JEQUITINHONHA E MUCURI. Programa de Pós- graduação em educação em Ciências, Matemática e Tecnologia (Mestrado). Edital n. 22/2019. Universidade Federal dos Vales do Jequitinhonha e Mucuri, 2019. Disponível em: http://prppg.ufvjm.edu.br/index.php?option=comedocman&view=category&id=354&Itemid=136. Acesso em: 07 nov. 2019. UFVJM, PPGECMaT. Programa de Pós-Graduação em Educação em Ciências, Matemática e suas Tecnologias. Seminários e Oficinas de Educação Matemática e Científica. 2021. Disponível em: https://www.youtube.com/channel/UCQghdAmpevjQW85QnoIqkXw/about. Acesso em: 03 dez. 2021. 17 APÊNDICE A – RELATÓRIO TÉCNICO 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 ANEXO A – DECLARAÇÃO DE RECEBIMENTO DO RELATÓRIO TÉCNICO 57 ANEXO B – CERTIFICADO DE PARTICIPAÇÃO 58 ANEXO C – CARACTERIZAÇÃO DO PRODUTO EDUCACIONAL Universidade Federal dos Vales do Jequitinhonha e Mucuri (UFVJM) Programa de Pós-Graduação em Educação em Ciências, Matemática e Tecnologia Discente: Caroline Miranda Barroso Orientadora: Stella Maris Lemos Nunes Co-orientador (caso tenha): Nada consta Critérios Detalhamento RESPOSTAS Aderência - critério obrigatório/itens não excludentes Nome do projeto de pesquisa que o PE está vinculado: Desempenho em matemática dos alunos da Rede Municipal de Educação de Diamantina: análise das habilidades e competências não consolidadas e visualização dos resultados Identificação da linha de pesquisa que o PE está vinculado: Linha de pesquisa de Ensino e Aprendizagem em Educação em Ciências e Matemática Área de concentração do Programa: Ensino de Ciências e Matemática. Tipo do PE Protótipo Piloto Projeto Outro Piloto Subtipo do PE PTT1 - Material didático/instrucional PTT2 - Curso de formação profissional PTT3 - Tecnologia social PTT4 - Software/Aplicativo PTT5 - Evento Organizados PTT6 - Relatório Técnico PTT7 – Acervo PTT8 - Produto de comunicação PTT9 - Manual/Protocolo PTT10 - Carta, mapa ou similar PTT5 - Evento Organizado PTT6 - Relatório Técnico Finalidade Descrever a finalidade do PTT (até 200 palavras ou 1000 caracteres): A finalidade do PE consiste em agregar e apresentar os resultados dos estudantes das escolas da Rede Municipal de Educação de Diamantina a fim de favorecer a compreensão sobre o desempenho em Matemática dos alunos do 2º Ano do Ensino Fundamental (EF) da rede nas avaliações do PROALFA 59 nos anos de 2018 e 2019. Assim, por meio do PTT6 (Relatório Técnico) agregamos e analisamos os resultados de desempenho, enquanto por meio do PTT5 (Evento Organizado), cujo propósito consiste em divulgar e tornar público o conteúdo do Relatório Técnico, buscamos apresentar e discutir os achados da pesquisa para públicoalvo. Impacto: Alto - PTT gerado no Programa, aplicado e transferido para um sistema, no qual seus resultados, consequências ou benefícios são percebidos pela sociedade. Médio - PTT gerado no Programa, aplicado no sistema, mas não foi transferido para algum segmento da sociedade. Baixo - PTT gerado apenas no âmbito do Programa e não foi aplicado nem transferido para algum segmento dasociedade. Indique se o impacto é Alto, Médio ou Baixo: Alto Impacto - Demanda Demanda espontânea Não se aplica Demanda contratada Não se aplica Demanda por concorrência (ex. Edital) Não se aplica Impacto - Objetivo da pesquisa Experimental Solução de um problema previamente identificado Sem um foco de aplicação inicialmente definido Solução de um problema previamenteidentificado Impacto: Área impacta da pela produção Indique se é: área econômica, cultural, ambiental, científica, social, de saúde, ensino ou aprendizagem. Ensino ou aprendizagem. Impacto: Tipo Real - efeito ou benefício que pode ser medido a partir de uma produção quese encontra em uso efetivo pela sociedade ou que foi aplicado no sistema. Isso é, serão avaliadas as mudanças diretamente atribuíveis à aplicação do PTT com opúblico-alvo. Potencial - efeito ou benefício de uma produção previsto pelos pesquisadores antes de esta ser efetivamente utilizada pelo público-alvo. É o efeito planejado ou esperado. Real Não Potencial Sim Caso seja Real, descrever o impacto da aplicação do produto, indicando local onde foi desenvolvido e público alvo (até 200 palavras ou 1000 caracteres). Replicabilidade - Possibilidade de o PTT ser repetido, mesmo com adaptações, em diferentes contextos daquele em que o mesmo foi produzido. Sim Sim Não Abrangência territorial - Refere-se a uma definição precisa da vocação do PTT, ou seja, se é local, regional, nacional ou internacional. Local Local (áreas urbana e rural) Regional Nacional Internacional Complexidade: - Alta complexidade - O PTT é concebido a partir da Indicar se é: Média complexidade 60 observação e/ou da prática do profissional e está atrelado à questão de pesquisa da dissertação/tese, apresenta método claro. Explica de forma objetiva a aplicação e análise do produto, há uma reflexão sobre o PTT com base nos referenciais teórico e teórico- metodológico, apresenta associação de diferentes tipos de conhecimento e interação de múltiplos atores - segmentos da sociedade, identificável nas etapas/passos e nas soluções geradas associadas ao produto, e existem apontamentos sobre os limites de utilização do PTT. - Média complexidade - O PTT é concebido a partir da observação e/ou da prática do profissional e está atrelado à questão de pesquisa da dissertação/tese. Apresenta método claro e explica de forma objetiva a aplicação e análise do produto, resulta da combinação de conhecimentos pré-estabelecidos e estáveis nos diferentes atores - segmentos da sociedade. - Baixa complexidade - O PTT é concebido a partir da observação e/ou da prática do profissional e está atrelado à questão de pesquisa da dissertação/tese. Resulta do desenvolvimento baseado em alteração/adaptação de conhecimento existente e estabelecido sem, necessariamente, a participação de diferentes atores - segmentos da sociedade. - Sem complexidade - Não existe diversidade de atores - segmentos da sociedade. Não apresenta relações e conhecimentos necessários à elaboração e ao desenvolvimento do PTT. Alta complexidade Média complexidade Baixa complexidade Sem complexidade Inovação: Alto teor inovativo - desenvolvimento com base em conhecimento inédito. Médioteorinovativo-combinação e/ou compilação de conhecimentos pré- estabelecidos. Baixo teor inovativo - adaptação de conhecimento existente. Indicar se é: Alto teor inovativo Médio teor inovativo Baixo teor inovativo Sem inovação aparente Médio teor inovativo Setor beneficiado, com informação sobre o setor da sociedade onde o impacto foi ou será gerado (atividades definidas na lista CNAE) Ex.: educação; informação e comunicação; atividades proficionais; científicas e técnicas etc. Educação URL Inserir endereço eletrônico dp PTT Nada consta Há registro/depósito de propriedade intelectual caso tenha (ISBN, ISSN, ficha catalográfica, entre outros)? Não Sim (inserir também o número do registro, por exemplo, ISBN, ISSN, ficha catalográfica, entre outros) Catalogação na fonte - Sisbi/UFVJM – B277b/2022 61 ANEXO D 62