SISTEMAS DE AVALIAO DA EDUCAO NO BRASIL Se h uma poltica que avanou no Brasil, nos ltimos 15 anos, foi a implantao dos sistemas de avaliao educacional. Neste perodo, inmeras iniciativas deram forma a um robusto e eficiente sistema de avaliao em todos os nveis e modalidades de ensino, consolidando uma efetiva poltica de avaliao educacional. Considerada hoje uma das mais abrangentes e eficientes do mundo, a poltica de avaliao engloba diferentes programas, tais como o Sistema Nacional de Avaliao da Educao Bsica Saeb, o Exame Nacional do Ensino Mdio Enem, o Exame Nacional de Cursos ENC, conhecido como Provo e, posteriormente, substitudo pelo Exame Nacional de Desempenho do Ensino Superior Enade, o Exame Nacional de Certificao de Jovens e Adultos Enceja, o Sistema Nacional de Avaliao do Ensino Superior Sinaes, a Prova Brasil e o ndice de Desenvolvimento da Educao Bsica Ideb. Em conjunto, estes sistemas, ao lado da Avaliao da Ps-Graduao da Capes o mais antigo sistema de avaliao do pas no setor educao , configuram um macrossistema de avaliao da qualidade da educao brasileira.
No Brasil, o desenvolvimento de um sistema de avaliao da educao bsica bastante recente. At o incio dos anos 1990, com a exceo do sistema de avaliao da ps-graduao sob a responsabilidade da Capes, as polticas educacionais eram formuladas e implementadas sem qualquer avaliao sistemtica. No era possvel saber se as polticas implementadas produziam os resultados desejados ou no. Simplesmente, at meados da dcada de 1990, no havia medidas de avaliao da aprendizagem que produzissem evidncias slidas sobre a qualidade dos sistemas de ensino no pas. Costuma-se falar da velha escola pblica do passado como exemplo de qualidade. No entanto, a escola era outra, uma escola excludente e de qualidade para os poucos eleitos que a ela tinham acesso. O problema hoje mais complexo: construir e valorizar a boa escola pblica, agora democrtica e para todos. Em pouco mais de uma dcada foi construdo, no pas, um complexo e abrangente sistema de avaliao educacional, que cobre todos os nveis da educao e produz informaes que orientam as polticas educacionais em todos os nveis de ensino. Com esse objetivo geral comum, o Sistema Nacional de Avaliao da Educao Bsica Saeb, o Exame Nacional do Ensino Mdio Enem e mais recentemente a Prova Brasil apresentam distintas caractersticas e possibilidades de usos de seus resultados para que as informaes avaliativas sirvam tambm para o prprio processo de formulao, implementao e ajuste de polticas educacionais. O principal desafio definir estratgias de uso dos resultados para melhorar a sala de aula e a formao dos professores, de modo a atingir padres de qualidade compatveis com as novas exigncias da sociedade do conhecimento. OS SISTEMAS DE AVALIAES EDUCACIONAIS NO BRASIL
O Saeb uma avaliao de desempenho acadmico e de fatores associados ao rendimento escolar, realizada a cada dois anos, em larga escala, aplicada em amostras de escolas e alunos de 4 e 8 sries do ensino fundamental e de 3 srie do ensino mdio, representativas de todas as Unidades da Federao, redes de ensino e regies do pas. Trata-se de um importante subsdio para o monitoramento das polticas gerais de desenvolvimento educacional. Com base nas informaes coletadas por este sistema, o MEC e as secretarias estaduais e municipais de Educao devem definir aes voltadas para a correo das distores e debilidades identificadas, de modo a orientar seu apoio tcnico e financeiro para o crescimento das oportunidades educacionais, da eficincia e da qualidade do sistema educacional brasileiro, em seus diferentes nveis. A partir de 1995, iniciou-se o processo de construo das Escalas Comuns de Proficincia, ou definio de mtricas, que so interpretadas em termos do que os alunos conhecem, compreendem e so capazes de fazer, com base nos resultados do seu desempenho. A utilizao das escalas comuns permite a comparao de resultados entre diferentes sries, por disciplina e de ano para ano. Para tanto, so utilizadas provas elaboradas com um grande nmero de itens, abrangendo as competncias e habilidades requeridas ao final de cada ciclo de aprendizagem. Os itens so distribudos em diferentes cadernos de provas (169 itens por srie e disciplina), o que permite uma ampla cobertura dos contedos, competncias e habilidades (com seus diferentes graus de complexidade), em todas as sries avaliadas. Os itens das provas so elaborados com base na Matriz de Referncia Curricular do Saeb, que, a partir de uma ampla consulta nacional sobre os currculos estaduais, livros didticos usados pelos professores e contedos praticados nas escolas brasileiras dos ensinos fundamental e mdio, estabelece as competncias e habilidades que os alunos sabem e so capazes de fazer ao final das sries e ciclos avaliados. Essas matrizes incorporam as diretrizes dos Parmetros Curriculares Nacionais PCNs, a reflexo de professores, pesquisadores e especialistas sobre cada rea objeto da avaliao. Sistema Nacional de Avaliao da Educao Bsica Saeb Para coletar dados e produzir informaes sobre o desempenho do aluno e os fatores a ele associados, bem como a respeito das condies em que ocorre o processo ensino e aprendizagem, o Saeb utiliza procedimentos metodolgicos de pesquisa formais e cientficos, que garantem sua confiabilidade. A cada levantamento, alm das provas, so tambm utilizados questionrios contextuais que permitem conhecer as caractersticas da escola, do diretor, do professor, da turma e dos alunos que participam da avaliao. As informaes coletadas pelo Saeb so sigilosas. Assim, quando ocorre a divulgao dos resultados da avaliao, alunos, professores, diretores e escolas que integram a amostra no so identificados. Desde 1995, o Saeb aplicado regularmente a cada dois anos, seguindo a mesma mtrica ou escala de proficincia. Todos os Estados brasileiros participam da avaliao amostral, o que permite comparar resultados ao longo do tempo entre os Estados, entre escolas pblicas estaduais e municipais, entre escolas pblicas e particulares de cada unidade da federao. O principal objetivo do Saeb avaliar os sistemas de ensino e oferecer subsdios para o aprimoramento das polticas educacionais, sendo para tanto, fundamentais as anlises sobre os fatores associados aprendizagem, de modo a identificar o que os alunos Para coletar dados e produzir informaes sobre o desempenho do aluno e os fatores a ele associados, bem como a respeito das condies em que ocorre o processo ensino e aprendizagem, o Saeb utiliza procedimentos metodolgicos de pesquisa formais e cientficos, que garantem sua confiabilidade. A cada levantamento, alm das provas, so tambm utilizados questionrios contextuais que permitem conhecer as caractersticas da escola, do diretor, do professor, da turma e dos alunos que participam da avaliao. As informaes coletadas pelo Saeb so sigilosas. Assim, quando ocorre a divulgao dos resultados da avaliao, alunos, professores, diretores e escolas que integram a amostra no so identificados. Desde 1995, o Saeb aplicado regularmente a cada dois anos, seguindo a mesma mtrica ou escala de proficincia. Todos os Estados brasileiros participam da avaliao amostral, o que permite comparar resultados ao longo do tempo entre os Estados, entre escolas pblicas estaduais e municipais, entre escolas pblicas e particulares de cada unidade da federao. O principal objetivo do Saeb avaliar os sistemas de ensino e oferecer subsdios para o aprimoramento das polticas educacionais, sendo para tanto, fundamentais as anlises sobre os fatores associados aprendizagem, de modo a identificar o que os alunos so capazes de fazer e quais os fatores que dificultam a aprendizagem. Entre os fatores externos escola, destacam-se: grau de escolaridade dos pais; acesso a livros e bens culturais; situao socioeconmica familiar; carreira e formao inicial dos professores; etc. Entre os fatores internos escola e aos sistemas de ensino, ressaltam-se: gesto da escola e clima propcio aprendizagem; efeitos da repetncia; formao continuada e em servio dos professores; tempo de permanncia na escola; uso do tempo em sala de aula; acesso educao infantil; materiais didticos de qualidade; hbitos de estudo; lio de casa; participao dos pais; entre outros. Um dos principais resultados do Saeb, nestes 15 anos, foi demonstrar os efeitos perversos da repetncia e da distoro idade-srie no processo de aprendizagem. Alunos repetentes, com dois anos ou mais de atraso escolar, em geral apresentam desempenho mdio bem abaixo daquele observado para alunos que cursam a srie adequada sua idade. Com base nas evidncias apontadas, muitos Estados e municpios desencadearam programas de acelerao da aprendizagem, combate repetncia, implantao de ciclos de aprendizagem, uma srie de iniciativas que comeam a apresentar resultados concretos especialmente nas sries iniciais. Pesquisas sobre o Saeb mostraram tambm que o tempo de permanncia dos alunos na escola fator relevante para melhorar o desempenho dos alunos. Naercio Menezes (2005) mostra que uma hora a mais de aula por dia pode ampliar, em mdia, cerca de oito pontos no desempenho dos estudantes. Evidncias como essas ajudam a tomada de decises pelos gestores sem achismos e permitem que as escolhas de polticas orientem-se progressivamente para aes mais efetivas, embora nem sempre tenham a visibilidade poltica almejada pelos governantes. Um bom exemplo o uso de computadores nas escolas. Pesquisas nacionais e internacionais indicam que a simples existncia de computadores nas escolas no se traduz em melhoria de desempenho, embora o acesso a computadores e Internet sejam muito valorizados pela sociedade e tenham alto impacto poltico. Obviamente, dotar as escolas de computadores, melhorar o acesso Internet e capacitar professores e alunos para o uso da informtica so aes importantes para promover a incluso digital e democratizar informaes indispensveis para entender o mundo que nos cerca. Resta saber como o uso dos computadores poder de fato fazer diferena na aprendizagem.
O Enem um exame de carter voluntrio, implantado pelo MEC em 1998, que avalia o desempenho individual do aluno ao trmino do ensino mdio, visando aferir o desenvolvimento das competncias e habilidades necessrias ao exerccio pleno da cidadania. A prova, interdisciplinar e contextualizada, composta por uma redao e uma parte objetiva. A parte objetiva da prova, que contm 63 questes de mltipla escolha, avaliada numa escala de 0 a 100 pontos, gerando uma nota global que corresponde soma dos pontos referentes s questes acertadas. Alm disso, atribuda uma pontuao, tambm na mesma escala de valores, a cada uma das cinco competncias avaliadas. Na redao tambm h uma nota global de 0 a 100 e uma mdia para cada uma das cinco competncias aferidas. A nota resulta da mdia aritmtica das notas alcanadas em cada uma das competncias avaliadas, numa escala de 0 a 100 pontos. Cada participante do Enem recebe o Boletim Individual de Resultados, contendo duas notas: uma para a parte objetiva da prova e outra para a redao, alm de uma interpretao dos resultados obtidos para cada uma das cinco competncias avaliadas nas duas partes da prova. Os resultados individuais so sigilosos. As escolas que tiveram mais de 90% de seus alunos da terceira srie do ensino mdio presentes ao exame podem solicitar um boletim com a mdia do conjunto de seus estudantes. Este boletim informa, ainda, a nota mdia do pas, possibilitando uma comparao dos resultados. Tambm esto entre os objetivos do Enem: conferir ao cidado parmetro para autoavaliao, com vistas continuidade de sua formao e insero no mercado de trabalho; criar referncia nacional para os egressos de qualquer das modalidades do ensino mdio; fornecer subsdios s diferentes modalidades de acesso educao superior; constituir-se em modalidade de acesso a cursos profissionalizantes ps-mdio. Exame Nacional do Ensino Mdio Enem A forma de divulgao dos resultados gerou amplo debate em todos os meios de comunicao, por diferentes razes. Primeiro, no mnimo questionvel a forma de divulgao dos resultados, considerando as mdias obtidas por escola, uma vez que o Enem no tem a finalidade de avaliar escolas, mas sim o desempenho individual dos alunos. Em segundo lugar, a comparao das escolas pblicas com as particulares, no caso do Enem, provoca enorme polmica entre os especialistas em avaliao, pois trata-se de uma comparao frgil, do ponto de vista metodolgico, que no considera os fatores socioeconmicos associados ao desempenho individual dos alunos. Por razes bvias, as escolas particulares recebem os alunos que podem pagar, em geral oriundos de famlias de maior escolaridade e com acesso a bens culturais. Por fim, a explorao miditica dos pssimos resultados das escolas pblicas de ensino mdio em relao ao setor privado gera enorme desconforto para professores, alunos e seus pais, desvalorizando a escola pblica e desmotivando ainda mais a maioria dos jovens. Em suma, a divulgao dos resultados do Enem 2008, por escola, em vez de construir uma agenda positiva sobre aes alternativas de melhoria do ensino mdio, reforou um debate alarmista e desconstrutivo que em nada contribui para a melhoria da qualidade do ensino. Por outro lado, est em curso um debate nacional sobre as mudanas no Enem. A partir de 2010, o governo federal pretende transformar o Enem na forma de seleo de estudantes de todas as universidades federais. As propostas do MEC envolvem mudanas estruturais na organizao da prova, tais como utilizao da Teoria da Resposta ao Item/TRI, aumento do nmero de itens nas provas e construo de um escala nacional de desempenho que permita comparaes temporais. Ainda no esto disponveis documentos oficiais sobre as mudanas futuras do Enem.