32(2): 117-124 jul/dez 2007

RESENHA CRTICA

THOMAS, Gary; PRING, Richard. Educao Baseada em Evidncias: a utilizao dos achados cientficos para a qualificao da prtica pedaggica. Porto Alegre: ARTMED, 2007. 256p. ISBN: 978-85-363-0887-6.

O que Informam as Prticas e as Polticas Educacionais?

Maria Clara Bueno Fischer
As prateleiras das livrarias esto abarrotadas de livros de metodologia de pesquisa. Sem dvida, o crescimento quantitativo e qualitativo da pesquisa em nvel de ps-graduao no Brasil tem gerado uma grande demanda de publicaes neste campo de conhecimento e a Educao no foge regra. Acrescente-se a esse fato um discurso que afirma que a ps-graduao em educao, leia-se a pesquisa na rea, vai bem, mas a educao (bsica, especialmente) vai mal. Ironicamente, inmeras revistas vendidas para o grande pblico sugerem caminhos promissores para a resoluo dos problemas pedaggicos vividos por professores e outros profissionais direta ou indiretamente envolvidos com a rea da Educao. O pano de fundo: o que informa e embasa a prtica pedaggica e a elaborao das polticas educacionais?

117

As relaes entre pesquisa acadmica e prtica pedaggica so uma questo que tem preocupado tanto investigadores da rea como professores e gestores de polticas educacionais. Muitas e variadas experincias de pesquisa, teorizaes e proposies metodolgicas, razoavelmente conhecidas entre pesquisadores, tm sido usadas para enfrentar esta desafiante e histrica questo: pesquisaao, pesquisa-participante, pesquisa-formao, pesquisa etnogrfica, estratgias de formao e investigao da prtica com base na concepo do professor reflexivo apenas para citar algumas entre tantas alternativas. Isso sem falar nas conhecidas proposies de Freire, muito debatidas na rea a respeito da relao dialtica entre o ato de pesquisar e o ato de ensinar. Menos discutidas, no entanto, talvez sejam as cada vez mais necessrias metodologias de pesquisa que sistematizam achados de vrias pesquisas, tanto para subsidiar a elaborao de novos problemas de pesquisa como para informar polticas dirigidas rea. Neste caso, situam-se, por exemplo, os espaos de pesquisa dos observatrios que em parte se utilizam de base de dados de governos e da pesquisa em geral. Diretamente associada a esta ampla e permanente problemtica situa-se a obra inglesa intitulada Educao baseada em evidncias: a utilizao dos achados cientficos para a qualificao pedaggica, recentemente disponibilizada no Brasil, propondo ao leitor um conjunto de reflexes instigantes. Rene artigos, de diferentes autores, bem-articulados entre si, sobre o lugar das evidncias para o aperfeioamento da prtica educativa e elaborao de polticas da rea. A expresso baseada em evidncias est associada ao que os autores referem, em vrios momentos do livro, sobre o movimento pela prtica baseada em evidncias, que se iniciou na medicina no incio da dcada de 90 e que se expandiu para outras reas, incluindo a Educao. Sob a coordenao de Gary Thomas, Professor de Educao da Universidade Oxford Brookes, e de Richard Pring, Ex-professor de Estudos de Educao da Universidade de Oxford, o livro uma compilao de artigos escritos por pesquisadores da rea da Educao, das Cincias Sociais, da Sade e elaboradores de Polticas Pblicas, especialmente da rea da Educao, do Reino Unido. Longe de elaborarem um livro de defesa ou de receitas para o uso dos achados cientficos, os autores fazem uma discusso problematizadora do tema baseando-se em suas investigaes, experincias com a sistematizao de evidncias de pesquisa e prtica de ensino e de ao no mbito das polticas pblicas voltadas melhoria da educao. Os autores constroem sua argumentao a partir de diferentes lugares tericos e de insero profissional propiciando um tratamento do tema de forma abrangente, complementar e crtica. Todos partem do pressuposto de que so importantes as evidncias para conceituar e melhorar a prtica e as polticas, mas discutem sobre a natureza e o valor das mesmas. Neste contexto, refletem sobre a relao entre evidncia potncia e valor e as assunes que da emergem para dar sustentao prtica. A obra est organizada em trs partes assim intituladas: O que prtica baseada em evidncias; Exemplos da prtica baseada em evidncia e, por fim, Questes.

118

O contedo abordado na primeira parte do livro diz respeito explicitao do significado da prtica baseada em evidncias com base na experincia dos autores. Alm disso, discorrem sobre a necessidade de sistematizao daquilo que considerado eficiente para a prtica pedaggica. Argumentam sobre a relevncia do dilogo entre pesquisadores e profissionais da Educao e, ainda, analisam sobre o desafio para os investigadores da rea de ampliarem a importncia da pesquisa para professores e elaboradores de polticas. Revises sistemticas e a Campbell Collaboration como se intitula o artigo que abre essa parte da obra. Philip Davies, diretor de Avaliao de Polticas da Unidade de Estratgia do Primeiro Ministro Britnico e fundador da Campbell Collaboration, descreve e analisa a experincia dessa organizao. Conforme o autor, esta tem a funo de auxiliar na tomada de decises de profissionais e elaboradores de poltica atravs da disseminao de revises sistemticas do acmulo de evidncias resultantes de pesquisas experimentais ou quase experimentais e de estudos sobre intervenes em relao a um determinado tpico para contribuir com a eficcia de intervenes sociais e comportamentais na educao, em criminalidade e justia e bem-estar social (Thomas; Pring, 2007, p. 32). Tais revises tambm fornecem subsdios para o direcionamento da prpria pesquisa da rea em questo. Trata-se de uma experincia de profissionalizao de uma empresa em realizar o estado da arte a respeito de um tema. So detalhados os passos observados para fazer as revises: formulao adequada e clara da pergunta orientadora; a busca sistemtica de estudos primrios fundamentais; a avaliao crtica da importncia e da qualidade dos estudos a serem considerados na reviso; a criao de uma estrutura analtica para a realizao da mesma. Philip Davies apresenta, ainda, o que seria a metaanlise do processo de comparao de estudos com metodologias diferenciadas. No segundo artigo, Judy Sebba, Professora de Educao da Universidade de Sussex (Inglaterra), argumenta especialmente sobre o desenvolvimento de polticas com base em evidncias. Assume, de incio, a polissemia e a discordncia entre autores do conceito de evidncia e seu impacto. Imediatamente, esclarece que as evidncias podem ou no resultar da investigao sistemtica, da pesquisa. A seguir pondera sobre que evidncias, em geral, so consideradas pelos elaboradores de polticas para a sua formulao: dados quantitativos de pesquisas disponveis, dados de inspeo e evidncias de pesquisas encomendadas. Apresenta, posteriormente, reflexes mais detalhadas a respeito da problemtica terico-metodolgica da construo de base cumulativa de evidncias de pesquisa e de sua acessibilidade e uso. A autora conclui seu artigo indicando a necessidade de se mirar os potenciais usurios dos resultados de pesquisa profissionais e elaboradores de polticas para visualizar processos de produo, de sistematizao e de comunicao de tais resultados. David Gough, Professor e Pesquisador, Conferencista em Cincias Sociais e Vice-diretor do Social Science Research Unit no Instituto de Educao da Universidade de Londres, autor do artigo seguinte, defende o uso de sntese sistemtica de resultados de pesquisa considerando-a uma questo de

119

legitimidade e impacto pblico da prpria pesquisa. Alm de ponderar vrios aspectos relativos aos diferentes usurios da pesquisa, sistematiza elementos da crtica pesquisa educacional que vem se realizando nos Estados Unidos e na Gr-Bretanha em termos da qualidade metodolgica, da relevncia prtica, da dificuldade de acesso aos resultados (evidncias de pesquisa), indicando, conseqentemente, a necessidade de definio de agenda de prioridades de pesquisa, snteses e disseminao de produtos das investigaes. David, ao avaliar as evidncias na pesquisa educacional, discorre sobre um assunto bem conhecido dos pesquisadores brasileiros: a relevncia e complexidade da reviso da bibliografia, incluindo os procedimentos de como faz-la. Segundo ele, esta tem sido feita muito informalmente, sem procedimentos cientficos claros, trazendo conseqncias graves para as concluses de pesquisa a que se chega, reduzindo, entre outras coisas, a capacidade de se construir novo conhecimento a partir do que j se sabe. Discute, ainda, a respeito da confiabilidade da pesquisa, recuperando, a este respeito, uma discusso sobre critrios de confiabilidade. A partir dessa argumentao apresenta e analisa mtodos de abordagem de sntese sistemtica e descreve didaticamente as etapas que, em geral, so utilizadas para a realizao da mesma. Por fim apresenta alguns desafios que o tema traz respondendo a crticas que so feitas s snteses de evidncias de pesquisa. A segunda parte dedicada a apresentar e analisar experincias. Traz, no primeiro artigo, uma apresentao e a anlise da experincia do EPPI Evidence for Policy and Practice Information and Co-ordenating Center do Instituto de Educao da Universidade de Londres no processo e resultado de produo do estado da arte sobre o impacto das tecnologias de informao e comunicao na alfabetizao em ingls de pessoas dos cinco aos 16 anos. Judy Sebba descreve o processo de forma ampla, indicando principais desafios, solues e perspectivas enfrentadas pela equipe de pesquisa na realizao da reviso sistemtica de resultados de pesquisa. Um desses aspectos a necessidade de sintonia na equipe a respeito de como fazer a tarefa, considerando que as evidncias resultam de procedimentos construdos a partir de paradigmas distintos como o caso, por exemplo, das pesquisas qualitativas e das quantitativas. Outro se refere dificuldade de lidar com compreenses e base conceitual diferenciada das pesquisas. Indicam, por exemplo, o uso polissmico do termo impacto, conceito central para construir o estado da arte em questo. A seguir Philippa Hodkinson, do Center for the Use of Research and Evidence in Education (CUREE), num interessante artigo intitulado Professores usando evidncias: o que sabemos sobre ensino e aprendizagem para reconceituar a prtica baseada em evidncia traz uma reflexo sobre a ao do professor a partir de duas bases de evidncias: aquelas que resultam de sua experincia profissional e aquelas originadas no campo da pesquisa. Inicialmente faz uma boa sntese de aes que vm ocorrendo na Gr-Bretanha envolvendo centros de pesquisa, aes de governo e escolas no sentido de aproximar a pesquisa da experincia profissional. Argumenta sobre a importncia da prtica informada por evidncias tanto de pesquisa como da experincia profissional e tambm

120

discorre sobre o fato de que a sua realizao demanda conhecer e compreender a percepo que os profissionais tm do que funciona e no funciona na prtica pedaggica, alm de necessitar de apoio dos rgos competentes. Uma idia interessante defendida pela autora a de que a prtica informada por pesquisa ou evidncias tem o potencial de dar sustentao ao ensino e aprendizagem precisamente porque demanda que os professores se tornem novamente aprendizes (Thomas; Pring, 2007, p. 94). Dois artigos que se seguem analisam o tema no campo da medicina e reas afins. Um deles reflete sobre a construo do diagnstico mdico que, segundo o autor, teria como base a mediao entre resultados de pesquisa e a experincia individual do mdico; o saber tcito. Defende a necessidade de se tornar acessvel para um pblico amplo o conhecimento advindo da experincia individual. Seguese um texto que discute sobre a distino entre prtica baseada em evidncia e evidncia baseada na prtica, em que defendida a incorporao metdica das evidncias individuais no acmulo do conhecimento de uma rea de saber mais do que aquelas originrias de testes padronizados. O ltimo artigo desta parte do livro tem como objeto de reflexo as razes da resistncia dos professores em usar evidncias de pesquisa em sua prtica profissional. Toma como base uma anlise crtica do campo da Educao Especial nos Estados Unidos. A autora, Deborah J. Gallagher, parte da identificao dos problemas vividos pelos pesquisadores na rea no que diz respeito s dificuldades de divulgao e uso de resultados de suas pesquisas na rea. Analisa de forma densa e crtica a argumentao dos pesquisadores. A terceira e ltima parte do livro dedicada ao debate de questes fundamentais implicadas no tema. O artigo de Martyn Hammersley, da Open University (Inglaterra), abre esta seo contextualizando e problematizando o movimento e a noo da prtica baseada em evidncia. um artigo esclarecedor e crtico da temtica desenvolvida no livro. Diz respeito relevncia dada por este movimento para as evidncias originadas na pesquisa construda a partir de testes padronizados. Tal priorizao no valoriza, segundo o autor, as evidncias originrias da experincia individual, criando uma expectativa distorcida de que a melhor prtica resulta somente da aplicao de resultados de pesquisa e deste tipo de pesquisa. De forma instigante e crtica, menciona a relao entre este movimento e a nova gesto pblica (gerencialismo), que se baseia na transparncia responsvel da mesma, e quem tem sua origem numa mitologia do mercado, a qual secundariza o cuidado com as condies de trabalho dos profissionais. Phill Hodkinson e John K. Smith, no dcimo primeiro artigo, discutem a relao entre pesquisa, polticas e prtica. Apresentam e analisam uma experincia e fazem uma proposio alternativa prtica baseada em evidncia. Sua proposio tem como base o trabalho em conjunto entre professores, pesquisadores e elaboradores e implementadores de polticas. Com base em concluses de suas experincias e de outros estudos associados ao tema que se propem a debater, oferecem uma convincente argumentao sobre os

121

problemas, as ambigidades e desencontros para e no estabelecimento das relaes entre pesquisa, polticas e prticas. Analisam a questo das incertezas epistemolgicas presentes nas prticas e nos debates das comunidades cientficas, o avano do conhecimento disponvel no mundo virtual e, ainda, o fato de o movimento pela prtica baseada em evidncias ter o modelo reducionista de pesquisa empirista como prioritrio para a constituio da evidncia. Provocam o leitor ao trazerem reflexes a respeito de como so utilizados resultados de pesquisa na elaborao de polticas pblicas e no exerccio da prtica profissional. Concluem o artigo discorrendo sobre a importncia de uma relao conjunta e processual entre representantes de professores, pesquisadores e elaboradores de polticas pblicas para se construir uma melhor articulao entre estes espaos e tempos de produo de conhecimento e ao. Em artigo sugestivamente intitulado de Tornando educativa a prtica baseada em evidncias, John Elliott Professor-consultor do Hong Kong Institute of Education e Consultor do Governo de Hong Kong para o Desenvolvimento Estratgico das Propostas de Reforma de Currculo analisa, de forma consistente e crtica, idias de David Hargreaves sobre a prtica baseada em evidncias. Sua reflexo construda luz das teorizaes de Richard Peters sobre os objetivos da educao e de Lawrence Stenhouse sobre currculo e ensino baseado em pesquisa. So apresentados alguns aspectos importantes desses autores, que so utilizados como referncia para a construo da crtica. Entre eles, o potencial e as relaes entre produo de evidncias de pesquisas estatsticas e aquelas oriundas de estudos de caso; a inseparabilidade entre teoria da ao educativa e pesquisa educacional e os problemas que surgem na prtica educacional; a base segundo a qual os professores do resposta aos problemas enfrentados na prtica. Ao final, o autor levanta a hiptese de que a principal diferena entre Hargreaves e Stenhouse pode ser a de que aquele esteja preocupado principalmente em definir a pesquisa como base da prtica [e este esteja] basicamente preocupado com definir a prtica como base para a pesquisa (Thomas; Pring, 2007, p.199). Usando a pesquisa-ao para gerar conhecimento sobre a prtica educativa, de Harry Torrance, Professor de Educao e Diretor de Pesquisa no Instituto de Educao da Manchester Metropolitan University (Inglaterra), descreve e analisa uma experincia de pesquisa-ao tomando como base a assertiva de que as relaes entre produtores de pesquisa e usurios de pesquisa deveriam ser includas em qualquer definio da metodologia de pesquisa aplicada (Thomas; Pring, 2007, p. 203). A experincia em questo constituiu-se de uma pesquisa-ao para investigar e desenvolver abordagens formativas para a avaliao de alunos nas escolas fundamentais (Thomas; Pring, 2007, p. 203). A motivao para a realizao da pesquisa-ao resultou da frustrao, alis, muito comum entre ns, dos professores e dos pesquisadores de, ao tomarem conhecimento de resultados de pesquisa, perguntarem-se: Como podemos melhorar a nossa prtica?. Concluem que professores que investigam a prpria prtica contribuem para melhor-la, mas, por outro lado, que a

122

generalizao dos achados de pesquisa e conhecimento pblico , ainda, prerrogativa dos pesquisadores acadmicos. Corroboram a idia de que o professor precisa pesquisar para desenvolver a capacidade de utilizar resultados de estudos. Confirmam a necessidade de apoio logstico para a realizao da pesquisa-ao. Destacam tambm a vulnerabilidade que sofrem os professores com as mudanas de governo que, ao no darem continuidade s polticas, prejudicam o amadurecimento de experincias (como a relatada pelos autores no artigo). guisa de concluso, Richard Pin, Professor de Educao na Universidade de York e Coordenador do English Review Group no EPPI Center, resume as reflexes apresentadas nos diferentes artigos do livro. Contextualiza a emergncia da necessidade da discusso das evidncias no mbito das cincias da sade e, mais do que isso, da importncia que foi se estabelecendo na rea de sistematizar criticamente achados de pesquisa e os respectivos procedimentos metodolgicos para informar a prtica profissional e as polticas pblicas. Atravs de instituies que se especializaram nesses caminhos, houve expanso e credibilidade dos mesmos para outras reas, como a Educao. O autor argumenta criticamente a respeito do pressuposto, presente neste movimento, da possibilidade de previso da vida social. Discorre tambm sobre a dificuldade de estabelecer uma relao linear entre o discurso cientfico e a vida das pessoas e, ainda, sobre a separao entre meios e fins que est implicada na perspectiva deste movimento. Por fim, discute a respeito da necessidade de se refletir sobre noes de evidncia para alm da pesquisa experimental e sobre como se pode reunir e sistematizar evidncias nessa perspectiva. Essa obra pode dar uma contribuio significativa para a discusso sobre procedimentos metdicos de reviso da produo cientfica na rea da Educao, tanto para a definio de problemas relevantes de pesquisa como para a definio de polticas para a rea. No que diz respeito busca de caminhos para a realizao do estado da arte da pesquisa em Educao, interessante ponderar as idias apresentadas neste livro com uma anlise recente feita por Bernard Charlot (2006) a respeito das dificuldades da rea neste campo. Aes recentes do governo brasileiro parecem indicar um crescente interesse em articular a pesquisa acadmica s polticas de governo, como o caso, na CAPES, do Observatrio da Educao Bsica e do PROEJA (Programa de Apoio ao Ensino e Pesquisa Cientfica e Tecnolgica em Educao Profissional Integrada Educao de Jovens e Adultos). Em qualquer caso, faz-se necessria uma definio dos envolvidos sobre o uso de achados de pesquisa na prtica profissional, na elaborao e na realizao de polticas educacionais. As reflexes trazidas nesse livro podem servir para adensar e ampliar o embasamento terico-metodolgico de aes desta natureza.

123

Referncia CHARLOT, Bernard. A Pesquisa Educacional Entre Conhecimentos, Polticas e Prticas. Revista Brasileira de Educao, Rio de Janeiro, v.11, n. 31, p. 7-18, jan./abr. 2006. Maria Clara Bueno Fischer professora, doutora em Educao (pela Universidade de Nottingham, Reino Unido) e pesquisadora da Linha de Pesquisa Educao e Processos de Excluso Social do Programa de Ps-Graduao em Educao da Universidade do Vale do Rio dos Sinos (UNISINOS). Endereo para correspondncia: clara@unisinos.br

124