{"id":6910,"date":"2022-01-11T10:09:08","date_gmt":"2022-01-11T13:09:08","guid":{"rendered":"http:\/\/www.schwartzman.org.br\/sitesimon\/?p=6910"},"modified":"2023-05-01T20:49:58","modified_gmt":"2023-05-01T23:49:58","slug":"francisco-soares-duas-inovacoes-na-avaliacao-da-educacao-basica","status":"publish","type":"post","link":"https:\/\/www.schwartzman.org.br\/sitesimon\/francisco-soares-duas-inovacoes-na-avaliacao-da-educacao-basica\/","title":{"rendered":"Francisco Soares: Duas inova\u00e7\u00f5es na avalia\u00e7\u00e3o da educa\u00e7\u00e3o b\u00e1sica"},"content":{"rendered":"\n

No fim do ano passado, o MEC introduziu duas inova\u00e7\u00f5es no seu ecossistema de avalia\u00e7\u00e3o da educa\u00e7\u00e3o b\u00e1sica. Lan\u00e7ou um portal com testes de Leitura e Matem\u00e1tica para todos os anos do ensino fundamental e aplicou, em uma amostra de escolas, o Estudo Internacional de Progresso em Leitura (PIRLS<\/a>), um teste de compreens\u00e3o leitora adequado para os estudantes no quarto ano de escolariza\u00e7\u00e3o.<\/p>\n\n\n\n

Como argumentei recentemente, as recomenda\u00e7\u00f5es da BNCC s\u00e3o muito gen\u00e9ricas e pass\u00edveis de diferentes interpreta\u00e7\u00f5es. Assim as avalia\u00e7\u00f5es, ao concretizar os aprendizados pretendidos em tarefas, t\u00eam grande potencial de apoiar ou perturbar o ensino, j\u00e1 que os estudantes aprendem o que fazem. Esses dois novos instrumentos mostram como o MEC interpreta os comandos normativos da BNCC e, por isso, merecem ser conhecidos e analisados por todos os atores do debate educacional. Este texto pretende contribuir para esse debate com uma an\u00e1lise centrada em princ\u00edpios e tecnologias da \u00e1rea de avalia\u00e7\u00e3o educacional, que deve ser complementada com a contribui\u00e7\u00e3o de outras vis\u00f5es pedag\u00f3gicas e educacionais.<\/p>\n\n\n\n

Em rela\u00e7\u00e3o ao PIRLS, o MEC divulgou apenas a tradu\u00e7\u00e3o do documento conceitual desse estudo, n\u00e3o o teste aplicado nos estudantes brasileiros. No entanto, muitos pa\u00edses, incluindo Portugal, j\u00e1 aderiram a essa avalia\u00e7\u00e3o, e h\u00e1, portanto, muitos documentos que podem ser usados para conhecer seu escopo, metodologia e resultados.<\/a><\/p>\n\n\n\n

O modelo conceitual do PIRLS estabelece que s\u00f3 atrav\u00e9s do uso de textos aut\u00eanticos \u00e9 poss\u00edvel gerar evid\u00eancias s\u00f3lidas sobre o desenvolvimento da compreens\u00e3o leitora dos estudantes. Por isso, seu teste usa apenas dois textos, cada um, tipicamente, com mais de 400 palavras. O PIRLS considera que a compreens\u00e3o leitora est\u00e1 desenvolvida apenas quando o estudante \u00e9 capaz de mobilizar as v\u00e1rias habilidades necess\u00e1rias para o entendimento do texto, as quais organiza em quatro categorias: Localizar e Recuperar informa\u00e7\u00f5es expl\u00edcitas, Fazer infer\u00eancias diretas, Interpretar e integrar ideias e informa\u00e7\u00f5es, Avaliar e Criticar. Para cada texto s\u00e3o formuladas em torno de 15 quest\u00f5es para verificar essas categorias. Algumas quest\u00f5es s\u00e3o de m\u00faltipla escolha, outras abertas, essas essenciais para se verificar o dom\u00ednio de habilidades de maior complexidade cognitiva.<\/p>\n\n\n\n

O PIRLS verifica n\u00e3o apenas o dom\u00ednio de habilidades isoladas, mas tamb\u00e9m e principalmente seu uso concomitante para a constru\u00e7\u00e3o do sentido do texto. Na realidade, a resposta a um item isolado n\u00e3o gera evid\u00eancia de dom\u00ednio de uma habilidade espec\u00edfica. Esse fato \u00e9 comprovado ao se constatar que h\u00e1 itens que se referem \u00e0 mesma habilidade, situados em pontos diferentes na escala. Finalmente, o PIRLS reconhece a import\u00e2ncia de textos multimodais, cujo uso \u00e9 cada vez mais frequente na internet e, portanto, devem estar no ensino e na avalia\u00e7\u00e3o da compreens\u00e3o leitora.<\/p>\n\n\n\n

Estas formula\u00e7\u00f5es s\u00e3o particularmente importantes para o debate sobre a reformula\u00e7\u00e3o do SAEB. Originalmente, ele preconizava o mesmo que \u00e9 praticado pelo PIRLS. Com o passar do tempo, isso se perdeu. Hoje, os testes do SAEB e seus similares cont\u00eam itens cujo suporte s\u00e3o recortes de textos, n\u00e3o textos aut\u00eanticos e, portanto, quase nunca representam situa\u00e7\u00f5es de comunica\u00e7\u00e3o relevantes. O uso apenas de itens de m\u00faltipla escolha e a \u00eanfase em habilidades espec\u00edficas n\u00e3o permitem aos testes do SAEB gerar evid\u00eancias adequadas sobre o desenvolvimento da compet\u00eancia leitora, j\u00e1 que a ideia de mobiliza\u00e7\u00e3o de aprendizados, essencial no conceito, n\u00e3o impacta adequadamente o planejamento do teste.<\/p>\n\n\n\n

A segunda inova\u00e7\u00e3o foi a disponibiliza\u00e7\u00e3o de testes semelhantes aos do SAEB<\/a> para todos os anos escolares, preparados para uso imediato pelas escolas e redes. Essa iniciativa facilita a pr\u00e1tica, j\u00e1 bastante frequente, de uso dos testes de avalia\u00e7\u00f5es externas na rotina das escolas. Ela cria a possibilidade os itens e as respectivas respostas dos estudantes serem usados na prepara\u00e7\u00e3o de devolutivas. Isso caracterizaria o uso formativo da avalia\u00e7\u00e3o externa, iniciativa muito necess\u00e1ria para torn\u00e1-las mais relevantes pedagogicamente.<\/p>\n\n\n\n

No entanto, as potencialidades positivas da iniciativa desaparecem quando se analisam as quest\u00f5es dos testes publicados. Detenho-me aqui apenas no teste do terceiro ano, que deve ser feito por estudantes de oito anos de idade, os quais, pelo Plano Nacional de Educa\u00e7\u00e3o, deveriam estar alfabetizados. Assim, esse teste pode ser visto como a express\u00e3o operacional, na vis\u00e3o do MEC, do que sabe e do que n\u00e3o sabe fazer um estudante que completou o ciclo do \u201caprender a ler\u201d e supostamente est\u00e1 pronto para iniciar a etapa do \u201cler para aprender\u201d.<\/p>\n\n\n\n

O teste analisado \u00e9 constitu\u00eddo de 22 quest\u00f5es, cujo percentual de acertos ser\u00e1 usado como medida do desempenho de cada estudante. As instru\u00e7\u00f5es de aplica\u00e7\u00e3o indicam que os enunciados de v\u00e1rias quest\u00f5es devem ser lidos pelo aplicador. Esse formato de aplica\u00e7\u00e3o \u00e9 completamente inadequado para se verificar os aprendizados de estudantes que est\u00e3o no fim do processo de alfabetiza\u00e7\u00e3o e devem, portanto, ler autonomamente. Sete das 22 quest\u00f5es verificam o desenvolvimento de habilidades de alfabetiza\u00e7\u00e3o, como as rela\u00e7\u00f5es fonema\/letra, em situa\u00e7\u00f5es de irregulares ortogr\u00e1ficas simples. Essas habilidades deveriam ter sido constru\u00eddas nos anos anteriores e, portanto, n\u00e3o \u00e9 razo\u00e1vel que um quarto da evid\u00eancia coletada pelo teste do terceiro ano venha desse tipo de item.<\/p>\n\n\n\n

Os textos inclu\u00eddos no teste, na realidade recortes de textos, s\u00e3o muito pequenos e n\u00e3o permitem a formula\u00e7\u00e3o de quest\u00f5es de interpreta\u00e7\u00e3o de texto. Por isso, muitas das quest\u00f5es que t\u00eam os textos como suporte no teste captam a capacidade de o estudante reconhecer o g\u00eanero discursivo e seus elementos constitutivos. Esse tipo de habilidade, embora uma express\u00e3o da compet\u00eancia leitora, informa pouco na aus\u00eancia de quest\u00f5es de interpreta\u00e7\u00e3o. A baixa complexidade das habilidades contempladas no teste pode ser verificada pelos verbos das habilidades associadas aos itens do teste: localizar, identificar e reconhecer, todos indicando processos cognitivos da ordem mais baixa. O teste n\u00e3o verifica as habilidades com demandas cognitivas mais altas e n\u00e3o inclui quest\u00f5es que verifiquem as habilidades de escrita, essenciais na alfabetiza\u00e7\u00e3o, que estavam presentes no teste da ANA, Avalia\u00e7\u00e3o Nacional da Alfabetiza\u00e7\u00e3o, o padr\u00e3o de desempenho usado anteriormente.<\/p>\n\n\n\n

Ou seja, esse teste n\u00e3o gera informa\u00e7\u00f5es s\u00f3lidas sobre a compreens\u00e3o leitora dos estudantes ao fim do ciclo de alfabetiza\u00e7\u00e3o. Al\u00e9m disso, tem um n\u00edvel de demanda muito baixo e, portanto, as escolas ter\u00e3o resultados altos que, em vez de indicarem excel\u00eancia, apenas legitimar\u00e3o um n\u00edvel de dom\u00ednio superficial e insuficiente da compreens\u00e3o leitora. Isso \u00e9 particularmente grave educacionalmente, pois crian\u00e7as que n\u00e3o aprendem a ler at\u00e9 o final do terceiro ano do ensino fundamental tendem a ter dificuldade de leitura pelo resto de suas vidas e, provavelmente, ter\u00e3o dificuldades de desenvolver outros conhecimentos, todos dependentes de profici\u00eancia na compreens\u00e3o leitora.<\/p>\n\n\n\n

Em s\u00edntese, o MEC envia mensagens contradit\u00f3rias com suas duas recentes iniciativas. Por um lado, coloca um padr\u00e3o muito baixo de aprendizado ao fim de ciclo de alfabetiza\u00e7\u00e3o. Por outro, divulga a defini\u00e7\u00e3o de compreens\u00e3o leitora latente nos melhores modelos conceituais existentes. N\u00e3o seria o caso de o MEC e construir um sistema para subsidiar as avalia\u00e7\u00f5es formativas nas escolas, atrav\u00e9s de plataforma com interface bem-feita, como a criada para os testes divulgados usando entretanto, o modelo conceitual do PIRLS?<\/p>\n","protected":false},"excerpt":{"rendered":"

No fim do ano passado, o MEC introduziu duas inova\u00e7\u00f5es no seu ecossistema de avalia\u00e7\u00e3o da educa\u00e7\u00e3o b\u00e1sica. Lan\u00e7ou um portal com testes de Leitura e Matem\u00e1tica para todos os anos do ensino fundamental e aplicou, em uma amostra de escolas, o Estudo Internacional de Progresso em Leitura (PIRLS), um teste de compreens\u00e3o leitora adequado … Continue reading “Francisco Soares: Duas inova\u00e7\u00f5es na avalia\u00e7\u00e3o da educa\u00e7\u00e3o b\u00e1sica”<\/span><\/a><\/p>\n","protected":false},"author":104,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_crdt_document":"","footnotes":""},"categories":[7],"tags":[],"class_list":["post-6910","post","type-post","status-publish","format-standard","hentry","category-educacao-basica"],"_links":{"self":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/6910","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/users\/104"}],"replies":[{"embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/comments?post=6910"}],"version-history":[{"count":2,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/6910\/revisions"}],"predecessor-version":[{"id":7232,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/6910\/revisions\/7232"}],"wp:attachment":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/media?parent=6910"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/categories?post=6910"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/tags?post=6910"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}