Documente Academic
Documente Profesional
Documente Cultură
FACULDADE DE ECONOMIA
MONOGRAFIA DE BACHARELADO
NITERI
MARO 2013
NITERI
MARO 2013
BANCA EXAMINADORA
__________________________________________________________________
Prof. Dr. Fbio Domingues Waltenberg - Orientador
Universidade Federal Fluminense
__________________________________________________________________
Prof. Dr. Jesus Alexei Luizar Obregon
Universidade Federal Fluminense
__________________________________________________________________
Prof. Dr. Aloysio de Carvalho
Universidade Federal Fluminense
NITERI
MARO 2013
AGRADECIMENTOS
Primeiramente, agradeo ao meu professor orientador, Fbio Waltenberg, que ao longo desses
ltimos trs anos foi parte mais do que essencial do meu desenvolvimento acadmico. Um
professor que sempre leva seu entusiasmo para a sala de aula, servindo de incentivo e
motivao para muitos, e que nunca deixou de acreditar no potencial de seus alunos. Pelo fato
de estar envolvido em praticamente todas as minhas atividades acadmicas, certamente posso
afirmar que o valor do seu tempo dedicado mim algo inestimvel.
Ao professor Jesus Alexei Obregon, primeiramente, por ter me introduzido ao mundo da
Econometria. Alm disso, por ser um grande incentivador na busca de conhecimento e, em
especial, pelas incontveis vezes em que bati na sua porta para ser prontamente atendido.
Estes dois professores contriburam de maneira extensa para a minha formao no s como
Economista, mas tambm como pessoa. Por isso, sempre carregarei os valores que me
passaram, seja na vida acadmica ou profissional.
Gostaria tambm de agradecer ao programa PIBIC/CNPq/UFF pelo apoio financeiro que, ao
longo de dois anos, possibilitou o meu aprofundamento nos estudos e participao em
pesquisas. Grande parte desta monografia foi baseada em resultados deste programa.
Ao Centro de Estudos sobre Desigualdade e Desenvolvimento (CEDE/UFF) por fornecer uma
sala de estudos mas, principalmente,
RESUMO
Esta monografia tem como objetivo entender a teoria econmica que serve como base
para a criao de programas de responsabilizao dos professores, que tm como intuito a
melhora da educao no Brasil, e tambm estudar alguns destes programas que foram
implementados e seus resultados. Para isso, o modelo Principal-Agente bsico exposto
formalmente e seus aspectos tericos bsicos discutidos. Em seguida, abordamos algumas
especificidades de sua aplicao ao setor pblico e, finalmente, na educao. Assim, procurase entender e esclarecer os limites e possibilidades de sua aplicao prtica. Aps a discusso
terica, os programas de responsabilizao, tanto internacionais quanto nacionais, o modus
operandi de cada um e seus resultados so apresentados e discutidos. Por tratar de ambos os
aspectos, terico e prtico, de uma maneira abrangente, este trabalho acaba servindo como
uma introduo ao estudo que envolve mecanismos de incentivos na educao.
Palavras-chave: Educao, Poltica educacional, Principal-Agente.
Sumrio
Introduo ................................................................................................................................. 8
Captulo 1 O Modelo Principal-Agente ................................................................................ 11
1.1 Modelo Principal-Agente com Ao Oculta ............................................................... 12
1.2 Relaes do Tipo Principal-Agente na Proviso de Servios Pblicos .................... 18
1.3 Relaes do Tipo Principal-Agente em Educao ..................................................... 20
1.4 Possibilidades e Limites do Modelo Principal-Agente Aplicado Educao ......... 21
1.4.1 Como Avaliar os Resultados? ............................................................................... 22
1.4.2 Mltiplos Objetivos ............................................................................................... 25
1.4.3 Trabalho em Equipe .............................................................................................. 26
Captulo 2 Responsabilizao de Professores: Experincias Internacionais .................... 28
2.1 Os Diferentes Casos e Seus Funcionamento ............................................................... 29
2.1.1 O Caso de Israel ..................................................................................................... 29
2.1.2 O Caso do Estado de Michigan, nos EUA ........................................................... 31
2.1.3 O Caso do Reino Unido ......................................................................................... 32
2.1.4 O Caso das Escolas Pblicas de Nova York ........................................................ 34
2.1.5 O Caso das Escolas do Estado de Andhra Pradesh, ndia ................................. 36
2.2 Resultados Apresentados Pelos Programas ............................................................... 38
2.2.1 Resultados de Israel ............................................................................................... 38
2.2.2 Resultados de Michigan ........................................................................................ 40
2.2.3 Resultados do Reino Unido ................................................................................... 41
2.2.4 Resultados das Escolas Pblicas de Nova York .................................................. 43
2.2.5 Resultados de Andhra Pradesh ............................................................................ 46
Captulo 3 Responsabilizao de Professores: Experincias Nacionais ............................ 49
3.1 Medidas de Qualidade do Ensino Brasileiro .............................................................. 49
3.2 Os Programas e seus Resultados ................................................................................. 51
3.2.1 O Programa Nova Escola ...................................................................................... 51
3.2.2 O Caso de Pernambuco ......................................................................................... 52
3.2.3 O Caso de So Paulo.............................................................................................. 54
Concluso ................................................................................................................................ 59
Referncias .............................................................................................................................. 62
Introduo
A literatura nacional que trata dos determinantes do desempenho de alunos, e de recomendaes de polticas
deles decorrentes, foi bastante farta na dcada de 2000. Entre tantos outros, podem-se citar os seguintes:
Albernaz et al. (2002), Franco et al. (2002), Waltenberg (2005), Soares e Collares (2006), Menezes-Filho (2007),
Biondi e Felcio (2008), alm de diversas contribuies em Veloso et al. (2009).
professores ao desempenho de seus alunos, desempenho este mensurado por alguma prova
padronizada externa, isto , no aplicada pela prpria escola.
Estas polticas de responsabilizao, na teoria econmica convencional, baseiam-se,
em geral, nos resultados e na lgica do modelo Principal-Agente, tema que estudado em
Teoria da Informao e Desenho de Mecanismos, duas subdisciplinas da Economia. O
modelo, basicamente, analisa as implicaes de situaes em que um agente contratado
por um principal para realizar alguma tarefa ou conjunto de tarefas que permitam produzir
um bem ou servio que interessa ao principal. Esta tarefa requer um esforo por parte do
agente que, por sua vez, no perfeitamente observvel pelo principal. Dada esta dificuldade
de se verificar a produtividade do agente, o problema do principal escolher um sistema de
remunerao adequado, que incentive o agente a agir conforme desejado pelo principal.2
A adaptao deste modelo educao simples; a autoridade competente, neste caso,
o secretrio de educao, seria o principal, e o agente seria representado pelo professor. O
produto seria o aprendizado, ou basicamente a nota da prova padronizada, e o esforo o
conjunto de atividades realizadas pelo professor. Assim, seria possvel implementar contratos
de incentivo seguindo diretrizes inspiradas na literatura de Desenho de Mecanismos, tais
como os programas de responsabilizao de professores.
Diante desse contexto, o objetivo deste trabalho consiste em analisar programas de
responsabilizao de professores, nacionais e internacionais, e estudar de maneira
aprofundada a teoria que serviu de base, para assim entender como foi feita sua adaptao
prtica. Desta maneira, o estudo visa no s descobrir se possvel tirar concluses sobre o
bom funcionamento, ou no, destes programas, mas tambm identificar quais so as
principais dificuldades que surgem na adaptao da teoria ao caso especfico da educao.
Primeiramente, aborda-se a teoria que formaliza o modelo Principal-Agente, passando
pelas suas caractersticas no seu formato mais simples. Em seguida, prossegue-se aos detalhes
que surgem quando de seu uso em ambientes do setor pblico, com a existncia de estruturas
hierrquicas mais complexas, por exemplo. A parte final do primeiro captulo trata das
particularidades que surgem de sua adaptao ao caso especfico da educao. Isto nos
permitir, de certa maneira, acompanhar as mudanas que houve ao longo do tempo neste
campo de estudo, assim como as dificuldades que existem em sua aplicao na prtica.
2
Os fundamentos dessas duas literaturas so apresentados em Varian (2006), Varian (1992) e, de maneira mais
abrangente, em Mas-Colell et al. (1995).
O segundo captulo est dividido em duas partes, sendo que na primeira so descritos,
com certo detalhamento, os diferentes programas de responsabilizao que foram
implementados internacionalmente. Na segunda parte os respectivos resultados so
apresentados. No terceiro captulo deste trabalho o mesmo feito para os programas
implementados nacionalmente.
Espera-se assim, no s compreender a teoria por trs destes programas e sua
adaptao a cada ambiente, mas tambm as especificidades de cada um deles e as diferenas
na aplicao destes programas em pases com nveis socioeconmicos diferentes.
evidenciada neste trabalho a importncia da informao para o funcionamento de
um programa de responsabilizao e as incertezas que ainda esto envolvidas na anlise dos
resultados destes programas. Estas incertezas aparecem, por exemplo, em dois casos; no de
So Paulo, onde foram estimados efeitos positivos para a 4a srie e negativos para a 8a srie e
no caso do Reino Unido, onde estima-se que o programa implementado levou a uma mudana
de comportamento por parte dos professores.
Alguns fatos curiosos como os que aconteceram no caso de Israel, onde os efeitos
destes programas foram maiores nas escolas religiosas, e como no caso da ndia, com
confirmao de fraudes, tambm sero apresentados.
10
livros
de
microeconomia
distinguem
tradicionalmente
dois
problemas
informacionais que podem ocorrer neste tipo de transao: aqueles oriundos de ao oculta e
os oriundos de informao oculta. A ao oculta, tambm conhecida como risco moral, pode
ser ilustrada como a inabilidade de o Principal observar as aes do Agente, por exemplo, o
quanto ele se esfora; j na situao que envolve informao oculta o Principal desconhece os
custos que o Agente enfrenta ao exercer uma ao, ou seja, o Principal no conhece de
maneira perfeita a dificuldade/facilidade que o Agente tem para determinadas aes. Um fator
comum entre estes dois problemas o de o contrato ser estabelecido em condies de
informao simtrica, com assimetria de informao surgindo posteriormente (Mas-Colell et
al., 1995).
Deve-se notar que, neste trabalho, como o foco o esforo do professor (e se este se
esfora mais ao receber certo bnus), iremos apenas expor a formalizao de maneira
simplificada do modelo Principal-Agente com ao oculta. Ignorando, de certa forma, os
problemas de informao oculta.
Assim, este primeiro captulo encontra-se dividido em quatro partes. Na primeira
parte, a teoria que serve de base para justificar a aplicao de polticas de responsabilizao
de professores formalizada e o problema de ao oculta apresentado. Como o modelo,
resultado da teoria, foi desenvolvido primeiramente para o setor privado, a segunda parte
deste captulo aborda as principais diferenas que surgem quando o modelo aplicado ao
setor pblico.
As duas ltimas partes deste captulo abordam as especificidades, e possveis
problemas, que podem surgir com o uso do modelo Principal-Agente no ambiente da
3
Estas definies, e as que sero utilizadas na seo seguinte para formalizar o modelo, encontram-se
explicitadas em Mas-Colell et al. (1995).
11
educao. Desta forma, tentamos abordar o modelo desde sua forma mais geral at o caso
bem especfico da educao.
problema de ao oculta.
Assim, o lucro estar relacionado com o esforo do Agente por meio de uma funo
distribuio de probabilidade,
pela ao tomada pelo Agente, porm no completamente determinada por ela. Alm disso,
seria natural considerar que um esforo mais alto,
de lucro, porm, um esforo mais alto representaria um custo maior para o Agente. Desta
forma, h um conflito de interesses entre os dois atores do modelo. Este aspecto do problema
pode ser ilustrado formalmente por5:
(1.1)
O que, consequentemente, implica em6:
(1.2)
Ou seja, o lucro esperado do Principal sempre ser maior quando o nvel de esforo
for alto.
Em relao ao Agente, tambm seria natural considerar que este prefira mais salrio a
4
Sendo que
e
, onde os subndices a e b representam, respectivamente, os nveis alto e
baixo.
5
Onde
e
representam a funo de distribuio acumulada e funo distribuio de probabilidades,
respectivamente.
6
Desconsiderando os limites de integrao.
12
menos, menos esforo a mais e que ele seja avesso ao risco. Assim, seguindo ainda MasColell et al. (1995), de maneira simplificada, podemos considerar uma funo utilidade de
Bernoulli com as propriedades descritas em seguida, de forma a formalizar os aspectos
descritos anteriormente.
(1.3)
Onde
, e, na segunda
13
, para cada nvel de lucro, deve satisfazer a condio de primeira ordem dada
por:
(1.9)
Onde, , representa o multiplicador de Lagrange e, consequentemente,
(1.10)
Isto significa que, se o Agente for estritamente avesso ao risco7, ento a equao
(1.10), implicar que o sistema timo de remunerao,
Ou seja, o Principal dever oferecer uma remunerao fixa para o Agente8. Desta forma, dado
o nvel de esforo explicitado no contrato, o Principal oferecer um salrio fixo de
, sendo
que o Agente receber ento exatamente o seu nvel de utilidade reserva, . Formalmente
teremos que:
(1.11)
Assim, qualquer sistema de remunerao que fornecer ao Agente
, ser uma
Ou seja,
.
Isto significa que o Principal, que neutro ao risco, ir assegurar o Agente, estritamente avesso ao risco, contra
qualquer tipo de risco ao no atrelar sua remunerao ao lucro observado que varivel.
9
Se , ou , representa o nvel timo de esforo ir depender do acrscimo ao lucro esperado de cada nvel de
esforo.
8
14
determinado risco.
Como demonstrado anteriormente, o sistema timo de remunerao, para implementar
um nvel especfico de esforo, minimiza os custos esperados do Principal e, no caso de
informao perfeita, a restrio dada somente pelo nvel de utilidade reserva. Entretanto, no
caso em que o Principal no consegue observar11 o nvel de esforo exercido pelo Agente
haver uma restrio a mais.
Neste caso, alm de garantir que o Agente receba o nvel de utilidade reserva, o
Principal deve, indiretamente, incentivar o Agente a exercer o esforo alto. Ou seja, o Agente
deve, de certa forma, desejar exercer o nvel de esforo alto, desta maneira, o Principal no
precisar observar diretamente o nvel de esforo.
Formalmente, podemos descrever o mecanismo timo de incentivo para implementar
um esforo alto,
, como a seguir.
s.a.
i.
ii.
(1.13)
(1.14)
(1.15)
ao Agente, enquanto que com a restrio (1.15) o Principal garante que exercer o
esforo alto fornea, em mdia, um nvel de utilidade maior ao Agente. Continuando com o
problema de otimizao, teremos ento que:
10
Outras combinaes envolvendo o comportamento dos dois atores do modelo frente ao risco so discutidas em
Mas-Colell et al. (1995).
11
Ou, pelo menos, envolva custos para sua observao.
12
Varian (2006).
15
(1.16)
Onde,
do que sob
, tal que,
, temos que:
(1.18)
(1.19)
Deve-se notar que a condio de
informacional dos diversos nveis de lucro, aspecto revelado pela razo das funes
distribuio de probabilidade, e por isso improvvel que se relacione de forma simples.
Observemos a importncia do elemento que chamamos de contedo informacional
dos diversos nveis de lucro para o funcionamento pleno da remunerao tima.
Basicamente, o modelo mostra que extremamente desejvel que o Principal saiba
exatamente como cada nvel de lucro afetado pelo esforo baixo e, tambm, pelo esforo
16
13
14
17
Com este resultado podemos concluir que, com a introduo de informao imperfeita
no modelo (ou seja, a inabilidade do Principal observar o esforo do Agente) haver um
aumento no custo esperado de implementao do nvel
O problema que surge ento , por exemplo, interpretar a causa de um nvel baixo de
lucro. Dado que o esforo no observvel, o Principal ter dificuldade em distinguir entre
uma simples m sorte do Agente e sua m vontade. O modelo Principal-Agente 15 e o
estabelecimento de um contrato timo, resumidamente, demonstram que o Principal gostaria
de impor um custo, ou uma penalidade, ao Agente caso um nvel baixo de lucro fosse
observado. Ou seja, haver um trade-off, entre o seguro a ser garantido ao Agente e o
incentivo a ser dado. Como foi demonstrado anteriormente, o estabelecimento deste contrato
ir depender significativamente do nvel de contedo informacional acerca de como o lucro
produzido.
A relao entre esforo e lucro, a habilidade do Agente, o estado de natureza e como o
esforo do Agente mensurado so todos aspectos informacionais de extrema importncia e
que iro afetar de maneira direta a eficincia do contrato. Alm disso, outro aspecto de
extrema relevncia o comportamento dos atores envolvidos no modelo frente ao risco, algo
que pode invalidar por completo um sistema de remunerao.
Vale ressaltar que o modelo analisado foi de carter simplificado e deve-se considerar algumas hipteses alm
destas demonstradas. Por exemplo, o fato de se tratar de um contrato que acontece s uma vez e, portanto, no
envolvendo aspectos como reputao, e que somente envolve a relao entre um Principal e um Agente.
18
Estes aspectos podem ser includos formalmente na anlise do modelo Principal-Agente, porm trata-se de
algo de extrema complexidade e muito alm do abordado a nvel de graduao.
17
Baixa qualidade e altos custos, por exemplo.
18
Embora alguns no possam ser privatizados, como a segurana pblica, por exemplo.
19
Por exemplo, objetivos como aprendizagem e consolidao do conhecimento das matrias, cidadania e
preparao para a vida adulta e o mercado de trabalho.
20
Prendergast (1999) define a avaliao objetiva como medidas que podem ser verificadas legalmente no
contrato estabelecido, enquanto a avaliao subjetiva no observvel por terceiros. As duas formas podem ser
utilizadas no mecanismo de incentivo sendo que o peso de cada uma seria dado de acordo com a preciso da
informao.
22
Frequentemente chamado, coloquialmente, de sucking-up. Termo que poderia ser traduzido para algo como
puxar o saco, em portugus.
22
O que poderia ter como resultado um estreitamento de currculo.
23
De acordo com o que foi exposto na primeira seo deste captulo, esta informao
seria a mais importante para o bom funcionamento do mecanismo de incentivo. Em termos do
modelo, seria necessrio saber associar o efeito do esforo alto e baixo do professor para cada
nvel de nota do aluno de modo a elaborar uma remunerao tima. Obviamente, pode-se
concluir que no se trata de uma tarefa trivial.
Alguns autores 23 do exemplos de potenciais consequncias do uso de testes
padronizados como indicadores, alm de uma anlise dos problemas estatsticos24 envolvidos.
Um exemplo o de desincentivar professores a trabalhar em reas onde os alunos so
considerados de menor capacidade, por representar uma barreira no alcance de melhores
avaliaes. Outra possvel consequncia a de subavaliar um professor ou um grupo de
professores por trabalharem em reas menos favorveis, cujos alunos tm uma dificuldade
maior de aprendizagem.
1.4.1.3 Avaliao Relativa
Neste caso os incentivos, e consequentemente a remunerao, so baseados no
desempenho relativo entre um professor e seus colegas de trabalho ou at mesmo entre um
determinado grupo de escolas. O intuito deste tipo de avaliao de eliminar os possveis
rudos dos indicadores, e consequentemente os riscos aos quais os Agentes esto expostos,
pois esto inseridos no mesmo ambiente e assim so afetados de forma igual por possveis
choques externos. Em situaes onde no h um consenso de padro de avaliao este
mecanismo pode ser uma boa alternativa por ter como base o prprio desempenho interno.
Esta forma de avaliao25 funciona como um incentivo ao melhor desempenho por
criar uma concorrncia dentro do grupo avaliado, mas poderia tambm ter consequncias
negativas, como um professor no querer ajudar ao outro, por estar diminuindo a sua
avaliao relativa.
1.4.1.4 Avaliao pela Demanda
Uma alternativa a criar um mecanismo de incentivos que no se baseie diretamente no
desempenho dos professores e/ou dos alunos passar para os usurios da educao, ou seja,
para os pais ou representantes dos alunos, o poder de escolher entre as diferentes escolas. Isto
23
24
feito atravs de sistemas de vouchers (ou cheques escolares), onde cada aluno recebe um
voucher para ento escolher onde estudar, ou um quase-mercado, onde as escolas so
remuneradas de acordo com algum ndice, em geral representado pelo nmero de alunos
inscritos ou rotatividade.
Este tipo de mecanismo baseia-se fortemente no princpio da livre escolha como
provedor de eficincia, considerando a mudana do aluno de uma escola para outra como um
processo pouco problemtico e que os pais tm acesso completo a informao sobre as
diferentes escolas. Neste caso o incentivo surge da concorrncia entre as escolas e a disputa
delas por alunos e manuteno destes. Porm, muitas vezes pode existir falha de informao,
especialmente em classes sociais menos favorecidas, alm de a transio de um aluno entre
escolas no ser sempre isenta de problemas.
considerados mais especficos como, por exemplo, os conhecimentos da matria ensinada por
ele (representados pela nota de prova, por exemplo), tem um peso mais alto do que os
objetivos mais gerais como, por exemplo, cidadania e valores culturais. Assim cada objetivo
seria remunerado de acordo com a dificuldade de ser observado (em alguns casos
representada pelo custo), evitando um desvio de ateno pelo professor.
Essa distribuio de peso para cada aspecto do objetivo do professor pode at fazer
sentido em termos tericos, porm na prtica mostra-se extremamente difcil, seno
impossvel de implementar. Portanto, a alternativa que se torna mais plausvel a de agregar
todas as tarefas e remuner-las de forma igualitria. Se so dados ao professor trs objetivos
distintos, por exemplo, aumentar as notas, a frequncia e a aprovao, cada um desses
objetivos tem o mesmo peso em sua remunerao. O intuito ento que os trs objetivos
recebam o mesmo nvel de ateno do professor em questo.
1.4.2.2 Especializao
Atravs da especializao dos educadores, ou seja, da diminuio de tarefas a serem
cumpridas por cada educador possvel amenizar os problemas causados pela quantidade de
objetivos a serem alcanados. Os esforos e a responsabilidade so diludos, de certa forma,
entre os educadores evitando assim um problema de falta de ateno a algum objetivo.
Um exemplo disto a troca de um professor responsvel por duas matrias por dois
professores, onde cada um responsvel por uma s matria. Assim, o professor se
especializa em ensinar uma s matria e, supostamente, tem a oportunidade de se tornar mais
eficiente.
Com a especializao tambm possvel separar o modo de remunerao de acordo
com as tarefas exercidas. Assim, os educadores especializados em tarefas com resultados
facilmente observveis recebem uma remunerao baseada em um mecanismo de incentivo,
j os especializados em tarefas no perfeitamente observveis recebem uma remunerao
mais estvel ou fixa, de modo a distribuir os riscos envolvidos devido baixa qualidade da
informao.
26
27
28
30
de dados referente aos alunos inclua informaes como sexo, educao dos pais e tamanho
da famlia. O autor tambm teve acesso a informaes referentes escola como tamanho e
nmero de professores, e aos seus professores como idade, experincia e educao.
32
31
aumentar a concorrncia33 entre as escolas na busca por alunos. Com esta reforma, o sistema
de ensino baseou-se no mecanismo de avaliao pela demanda, tendo como principais
avaliadores os pais dos alunos que tm liberdade de escolher entre as escolas. Para auxiliar os
pais foram criadas as League Tables, que so relatrios que contm as notas mdias obtidas
pelos alunos de cada escola nas provas que so aplicadas nacionalmente no final do que
chamado de Key Stage (KS).
Existem quatro KS (KS1-KS4) e, portanto, so aplicadas quatro provas
nacionalmente. As provas aplicadas das etapas KS1 at KS3 abrangem somente disciplinas
consideradas obrigatrias (lngua, matemtica e cincias), enquanto que na ltima etapa
(KS4) a prova consiste de duas partes, uma de disciplinas obrigatrias (tambm conhecida
como prova GCSE34) e outra, que depende da vocao do aluno, de habilidades especficas
(conhecida como GNVQ35). As respectivas idades dos alunos que fazem as provas so de 7,
11, 14 e 16 anos, representando assim todas as etapas do ensino bsico. Somente os resultados
em provas de disciplinas obrigatrias do KS3 e KS4 foram utilizados pelos autores para a
anlise. Os autores consideram os impactos dos professores nos valores absolutos das notas
do KS4 e no valor agregado entre as etapas KS3 e KS4.
Os dados coletados pelos autores seguem os professores ao longo de quatro anos
letivos, incluindo informaes referentes aos dois anos letivos anteriores e posteriores
introduo do programa. Com esse tipo de dados foi possvel atrelar as notas de cada aluno
em cada disciplina aos seus respectivos professores, no dependendo das mdias das
respectivas escolas36.
A estrutura salarial dos professores anterior ao programa consistia em uma escala
bsica de nove nveis diferentes, com o salrio anual mais baixo representado por 15.414 e o
mais alto por 23.958. A colocao de cada professor ao longo dessa escala salarial era
funo da qualificao e da experincia de cada um, sendo que em grande parte dos casos
havia um progresso anual na escala. No ano letivo de 1999/2000 estima-se que
aproximadamente 75% dos professores situavam-se no nvel mais alto dessa escala salarial.
Aps a introduo do programa de incentivos foram criados mais dois mecanismos
33
O aumento da concorrncia entre as escolas, segundo os responsveis por essa reforma, teria como
consequncia um melhor desempenho escolar dos alunos.
34
General Certificate of Secondary Education.
35
General National Vocational Qualification (deixou de existir no final de 2007).
36
Isto era necessrio, pois o programa era baseado no desempenho especfico dos professores e no no das
escolas.
33
Que poderiam ser traduzidos por uma linha limite de desempenho e um nvel superior de remunerao,
respectivamente.
38
Vale notar que o valor no sofreria reviso e entraria para os clculos de aposentadoria.
39
A solicitao consistia em mostrar evidncias, basicamente em termos de notas em provas aplicadas
nacionalmente, de que houve progresso no desempenho dos alunos pelos quais o professor era responsvel.
40
O que sugere, ex-post, que esta primeira rodada do programa representou basicamente um aumento salarial
geral.
41
No primeiro ano existiam cinco nveis, mas foi em seguida reduzido para trs.
42
Sindicato dos professores de escolas pblicas da cidade de Nova York.
43
Departamento de Educao da cidade de Nova York.
34
A escolha das escolas elegveis ao programa foi feita de maneira no-aleatria, dado
que o intuito era direcionar-se s 400 escolas com pior desempenho. A elegibilidade da escola
dependia de fatores como: notas da 4 e 8 srie, taxa de pobreza, percentagem de alunos
estrangeiros e alunos de educao especial. Na primeira triagem foram identificadas como
elegveis 438 escolas, porm 34 foram impedidas pelo UFT de participar por razes
desconhecidas e 8 eram escolas para crianas especiais. Das 396 escolas restantes, 212 foram
escolhidas aleatoriamente e em seguida convidadas pelo autor para participar do programa.
Para aceitar o pedido formalmente, pelo menos 55% dos funcionrios de tempo
integral representados pelo UFT teriam que votar a favor da proposta. No final, 179 das 212
escolas aceitaram receber o tratamento e 19 outras escolas foram convocadas posteriormente,
atravs do mesmo processo, para completar o nmero de 198 escolas. Assim, no primeiro ano
de experimento o autor teve acesso aos dados de 198 escolas com tratamento e 163 de
controle; no segundo e terceiro ano o nmero de escolas que receberam o tratamento foi de
191 e 189, respectivamente. Entre os motivos de declinar da proposta tinha-se o receio44 de
que o programa resultasse em mais trabalho para os professores.
Cada escola participante poderia ganhar at $3.000 por cada professor pertencente ao
UFT, sendo que o dinheiro seria distribudo dentro da escola de acordo com a vontade das
prprias escolas45, tendo que obedecer apenas a trs condies. A primeira condio era de
no usar a idade dos professores como critrio, a segunda seria a obrigao de criar uma
comisso 46 responsvel pelas decises da distribuio das gratificaes e em terceiro, a
condio de unanimidade das decises.
A maioria das escolas optou por incentivos coletivos que variavam levemente de
acordo com o cargo ocupado pelos profissionais na escola. Segundo o autor isso poderia ser
uma tentativa de contornar a primeira restrio imposta pelo programa, que seria basear a
distribuio de gratificaes por idade.
Para receber o bnus as escolas deveriam atingir algumas metas estabelecidas pelo
DOE, que estariam atreladas evoluo de um boletim contendo indicadores de desempenho
44
Esse exemplificado por um dos professores dizendo que dinheiro no vem de graa.. Outro grupo de
professores achou estranho algum crer que um professor seria motivado por dinheiro.
45
O autor justifica esta liberdade de escolher o mecanismo de incentivo pelo fato de a escola conhecer melhor a
funo de produo de educao.
46
Que deveria consistir do diretor da escola, um representante do diretor e dois funcionrios pertencentes ao
UFT.
35
de cada escola. O bnus inteiro s seria distribudo para escolas que alcanassem 100% da
meta; para as escolas que alcanassem no mnimo 75% da meta o bnus seria cortado pela
metade. Assim, as escolas estariam concorrendo a gratificaes entre $1.500 e $3.000 por
funcionrio pertencente ao UFT. Considerando que em mdia uma escola pblica em Nova
York teria cerca de 60 professores, isso implicaria em um aumento de recursos entre $90.000
e $180.000 por ano.
O boletim, que serviu como base para a avaliao, consistia em uma mdia ponderada
dos seguintes indicadores: desempenho (25%), evoluo (60%) 47, notas dos alunos referentes
ao Regent Exam 48 , taxa de concluso do ensino mdio, mdia da frequncia diria
(totalizando 5%) e resultados de formulrios aplicados aos professores, pais de alunos e
alunos sobre o ambiente escolar (10%).
Desempenho refere-se s notas em si, e a evoluo refere-se ao desempenho relativo ao ano anterior dos
alunos ao longo do ensino primrio e secundrio.
48
Prova obrigatria em Nova York para os alunos que querem concluir o ensino mdio.
49
Pratham (2013).
50
ndice de Desenvolvimento Humano.
36
51
37
O bnus consiste em uma funo linear com coeficiente angular igual a Rs. 500, sendo
a varivel independente representada pelo aumento das notas de teste dos alunos 53 nas
disciplinas de lngua e matemtica, com a condio de um aumento mnimo de 5%54, caso
contrrio no haveria o bnus. A escolha dessa forma linear do bnus foi feita, no s com o
objetivo de facilitar a sua implementao e comunicao, mas tambm por ser considerada
mais difcil de dar margem a fraudes, pois usaria os nveis das notas no final do ano como
base para o ano seguinte. O coeficiente angular foi escolhido de modo a coincidir,
aproximadamente, com o custo marginal dos outros tipos de interveno55.
As provas que serviriam de base para o experimento foram criadas por uma empresa
de testes educacionais de acordo com as especificaes exigidas pelos autores, incluindo
questes chamadas de mecnicas e conceituais. Desta forma, as questes mecnicas
testariam os alunos com exerccios parecidos aos dos livros didticos, enquanto que as
questes conceituais abordariam o mesmo tema s que de uma maneira no to familiar aos
alunos.
O estabelecimento dos patamares para as notas foi feito atravs de provas aplicadas no
incio do ano letivo de 2005/2006 e se referia a conhecimentos do ano letivo atual e anterior.
No final do ano letivo tinham-se mais duas rodadas de provas em cada disciplina com um
intervalo de duas semanas, a primeira rodada sendo referente a conhecimentos do semestre
anterior enquanto a segunda referente aos conhecimentos do semestre corrente. Esse
procedimento foi usado para diminuir possveis erros de medida.
53
Em escolas com incentivos coletivos a nota de referncia era a mdia da escola, com todos os professores
recebendo o mesmo bnus. Nas escolas com incentivos individuais a nota usada era a especfica dos alunos do
professor em questo.
54
Este limite inferior, segundo os autores, levaria em considerao o risco de esquecimento, por parte dos
alunos, das disciplinas durante as frias mais longas de vero.
55
Assim os avaliadores poderiam fazer futuras comparaes de custo benefcio.
38
39
entre os alunos de baixo nvel socioeconmico, mesmo que na mdia o impacto tenha sido
no significativo.
O fato de o programa, aparentemente, causar efeitos positivos maiores nos alunos com
baixo desempenho escolar pode ser um resultado extremamente positivo, dependendo do
ponto de vista. De certa maneira, este resultado poderia indicar que os professores realmente
estariam se esforando mais e, principalmente, canalizando o esforo para o grupo de alunos
que mais necessitam. Porm, dependendo da intensidade desse desvio de ateno, os alunos
com desempenho acima destes poderiam ser afetados negativamente. Isto, num caso extremo,
levaria ao aumento da nota dos piores alunos e a diminuio das notas dos melhores alunos.
Apesar de ter estimado muitos efeitos positivos, o autor nos lembra de algumas
dvidas, por exemplo, se os efeitos desse mecanismo so permanentes, quais seriam as
consequncias da remoo dos incentivos e como seria o comportamento dos resultados com
uma possvel expanso do programa.
autores de que o programa resultou numa maior reteno de alunos de baixo desempenho, ou
seja, alunos que seriam mais propensos a desistir do curso.
No ltimo aspecto analisado pelos autores, a proporo de alunos aprovados em todas
as disciplinas dada a concluso do curso, a escola com tratamento obteve uma queda de 17,68
p.p., comparado com uma queda de 11,26 p.p. da escola sem tratamento. Mais uma vez os
autores consideram tais resultados consistentes com a hiptese de que a escola est, em
mdia, retendo mais alunos de baixo desempenho.
Este caso de Michigan demonstra de forma bastante clara o problema do
estabelecimento de objetivos compatveis com o mecanismo de incentivo. Ao incorporar um
peso grande taxa de reteno no mtodo de avaliao um outro objetivo, aumentar as notas
dos alunos, foi basicamente ignorado pelos professores. interessante notar que, como o
mtodo de avaliao foi elaborado de maneira simples, com os seus respectivos pesos
claramente expostos, os professores sabiam exatamente como agir. Para os formuladores do
programa uma taxa maior de reteno iria resultar num aumento das notas dos alunos, o
resultado, porm, acabou mostrando o contrrio.
que os professores inelegveis estariam ajudando mais os alunos com pior desempenho (e
consequentemente perdendo mais tempo). Desta forma, os professores elegveis estariam
focando nos alunos que teriam, teoricamente, mais facilidade para aprender e aumentar suas
respectivas notas. Ou seja, no primeiro caso teramos um aumento na mdia das notas devido
ao progresso dos melhores alunos, enquanto que no segundo caso seria observado um
aumento no nmero de alunos aprovados.
Para os professores elegveis foi estimado que houve um aumento significativo de
0,20 ponto na mdia dos testes GCSE, passando de 4,84 para 5,04. Analisando as disciplinas
que constituem o teste separadamente foram constatados aumentos nas trs mdias, com o
maior aumento em cincias, porm, nenhum deles foi estatisticamente significante. No caso
dos professores inelegveis foi observado um aumento de todas as mdias das notas, sendo o
maior aumento em matemtica, exceto no caso de cincias, porm, neste caso nenhuma dessas
alteraes entre os dois anos de observao foram estatisticamente significantes.
Observando os resultados do valor agregado, nota-se um aumento significativo de
0,13 na mdia do valor agregado referente aos professores elegveis e tambm um aumento
significativo de 0,25 em cincias. No caso dos professores inelegveis houve aumento na
mdia total e nas disciplinas separadamente, porm nenhuma alterao foi estatisticamente
diferente de zero. As estimativas de diferenas-em-diferenas no mostram nenhuma
diferena estatstica entre os dois grupos de professores, no sendo, portanto, captado um
impacto significativo dos incentivos.
Os autores chamam a ateno ao fato de que as estimativas de diferenas-emdiferenas podem subestimar os efeitos dos incentivos se for considerado que os professores
tm um progresso no linear de seu desempenho, e que os resultados indicam uma mudana
positiva nas notas de teste e no valor agregado. Isto evidencia que os incentivos levaram ao
aumento do esforo por parte dos professores, mesmo no sendo captado pelas estimativas de
diferenas-em-diferenas.
Na anlise de regresso, com o intuito de testar se o progresso dos professores uma
funo linear ou no, os autores mostram estimativas indicando que as variveis referentes
elegibilidade e pouca experincia57 tiveram efeitos significativos nas notas do teste GCSE e
no valor agregado. Este resultado indica que no incio da carreira o professor seria mais
eficiente, podendo assim responder melhor aos incentivos.
57
42
43
Vale notar que o alto nmero de participantes que receberam o bnus integralmente, e
seu grande aumento entre os dois anos, poderia ser interpretado de duas maneiras distintas. De
um lado seria um ponto bastante positivo para o programa, pois mostra que plenamente
factvel atingir as metas estabelecidas por ele. Pela teoria isto tambm poderia ser uma
evidncia de que todos os agentes envolvidos entenderam os objetivos a serem alcanados e,
portanto, que todos tm acesso informao necessria. Infelizmente, por outro lado isto
poderia indicar que as metas assumidas eram fceis demais.
Fryer (2011) avalia os efeitos do programa de duas maneiras, primeiramente, ele
estima os efeitos de receber a oportunidade de participar do programa de incentivos e, em
seguida, estima os efeitos de efetivamente participar do programa. No primeiro caso o autor
usa a diferena mdia dos resultados das escolas que iriam participar do programa e as escolas
que serviriam de controle. Isto foi feito atravs de uma regresso que utiliza como varivel
dependente as notas e, alm de variveis de controle das caractersticas59 dos alunos, uma
varivel dummy indicando se a escola iria participar do programa. No segundo caso, a
varivel dummy que indica a participao no programa foi substituda por uma varivel que
estima os efeitos do programa no desempenho dos alunos ao longo do perodo.
Os efeitos estimados no ensino bsico
60
59
Caractersticas controladas eram, por exemplo, percentagem de alunos de cada raa, existncia de merenda
gratuita e sexo dos alunos.
60
Os resultados do ensino bsico foram divididos entre os grupos que incluem da 3 a 5 srie e o que inclui a 6
a 8 srie.
44
ou seja, mesmo em escolas grandes possvel encontrar efeitos positivos dos incentivos.
Segundo a teoria, como mencionado anteriormente, em grupos menores o problema de
free-rider seria menos custoso de se evitar, devido ao fato de ser mais fcil para os agentes
observar o esforo exercido por cada um. Ou seja, quanto menor o grupo, maior seria o custobenefcio dos incentivos.
Os outros dois problemas, a complexidade do programa e a ausncia de
conhecimento 61 dos professores, referem-se a um mesmo tpico terico, o da informao.
Talvez a complexidade do mtodo de medio de esforo impossibilitou os prprios
professores a avaliarem o quanto seu esforo afetaria cada componente da medida. Como a
avaliao consistia em uma ponderao de diversos indicadores, inclusive o desempenho dos
alunos, os professores talvez estivessem afetando muito mais os outros componentes. Se
somarmos isto com a ausncia de conhecimento, os incentivos seriam completamente
ineficientes.
Se esta ausncia de conhecimento realmente for um fator significante, ento o
principal objetivo dos programas de responsabilizao no estaria de acordo com o problema
a ser atingido. Neste caso o problema seria como exercer o esforo para aumentar o
desempenho dos alunos e no simplesmente como aumentar o esforo exercido pelos
professores. Os professores estariam ento de mos atadas por no saberem como incentivar
mais os alunos a desempenharem um esforo maior nos estudos.
46
programa as diferenas nas disciplinas de matemtica e lngua aumentam para 0,273 e 0,166.
Como consequncia, os alunos em escolas com incentivos tm notas em mdia 0,224 maiores.
Os autores chamam a ateno para o fato de as provas serem todas aplicadas por
pessoas externas ao processo de educao e que por isso no se preocuparam com a possvel
presena de fraude no primeiro ano, porm, no segundo ano foram constatados dois casos. As
escolas e professores envolvidos foram retirados do programa e os resultados foram
descartados para no enviesar as estimativas.
Vale ressaltar que houve uma preocupao maior por parte dos autores com outros
fatores alm dos referentes evoluo das notas. Por exemplo, descobrir se o aumento das
notas nas escolas com incentivos foi consequncia de um maior foco pelos professores em
testes passados ou a realizao de mais testes como treino para prova, comumente chamado
de gaming. Para isso, primeiramente foi feito um levantamento para ver quantas perguntas
foram repetidas de provas anteriores e quantas no foram. Em seguida as notas dos alunos dos
dois tipos de escolas foram mapeadas em relao s questes repetidas e s no repetidas.
Este mesmo procedimento foi feito diferenciando questes de mltipla escolha, questes
mecnicas e, finalmente, questes conceituais. Os resultados de todos estes testes
indicaram que no houve nenhum tipo de treino especfico para as provas, indicando que o
aumento das notas foi proveniente de um esforo maior dos professores.
Como abordado no captulo 1, problemas como estes dois descritos acima, envolvendo
gaming e fraudes, esto relacionados informao assimtrica que existe nesta relao.
importante saber que os formuladores do programa acompanharam estes problemas e tambm
tentaram solucion-los, porm devemos tambm levar em considerao os custos e as
dificuldades envolvidas neste processo. Possivelmente mesmo com todo o cuidado tomado,
usando testes e controles, alguns casos podem passar despercebidos.
Na tentativa de descobrir o que diferenciava o trabalho dos professores nas escolas
com incentivos dos professores das outras escolas, uma entrevista era feita ao final de cada
ano letivo antes da divulgao dos resultados finais do desempenho escolar. As entrevistas
mostraram que professores nas escolas com incentivos distribuam mais deveres de casa e
trabalhos em sala de aula, ministravam aulas aps o horrio escolar regular, aplicavam mais
testes e davam mais ateno aos alunos mais fracos.
Outro mtodo para captar essas diferenas entre professores foi utilizado, consistindo
47
48
Claudio Ferraz, em palestra organizada na faculdade IBMEC-RJ no dia 17/08/2011, tambm enfatizou os
problemas criados pela corrupo existente em muitos estados que, segundo ele, alm de piorarem a qualidade
da educao, tornam programas de responsabilizao menos eficientes. Este fato reforado em Ferraz et al.
(2012).
49
50
(3.1)
66
Como a divulgao do IDEB poderia ser vista como um incentivo para as escolas, o MEC, com a criao do
Plano de Desenvolvimento da Educao, incorporou o IDEB como um de seus principais objetivos no programa
Todos pela Educao. Assim, foram estabelecidas metas de aumento do IDEB a serem atingidas por cada
escola.
51
e 0,31, respectivamente. Outro fato interessante, apontado pelos autores, que as escolas que
no conseguiram atingir 50% da meta no primeiro ano tiveram um progresso melhor no
segundo ano, em relao s escolas que receberam o bnus no primeiro ano. Ou seja, o fato de
no ter atingido a meta, supostamente, funcionou como um estmulo a mais.
Como este programa de Pernambuco est sendo aplicado simultaneamente no estado
inteiro, o progresso dos alunos esto sendo comparados com regies que, segundo os autores,
tm caractersticas parecidas com o prprio estado. Sabemos que difcil garantir que uma
comparao entre amostras seja completamente homognea, especialmente quando no se
tratam da mesma populao, porm muitas vezes estas hipteses so vlidas.
67
O IDESP, criado pela Secretria de Educao do Estado de So Paulo, um ndice baseado no IDEB utilizado
no acompanhamento da qualidade da educao no estado de So Paulo.
68
Sistema de Avaliao de Rendimento Escolar do Estado de So Paulo, criado em 1996, teve a partir de 2007
seus resultados de portugus e matemtica convertidos para a mesma escala do SAEB. Esta converso acabou
permitindo a comparao de seus resultados para as diferentes sries e anos. O exame avalia os alunos de acordo
com as exigncias do SAEB.
69
Ambos ndices encontram-se detalhados em Oshiro (2012).
54
Segundo Ferraz (2009), estas metas que foram estipuladas pela Secretaria70 seguem a
mesma metodologia utilizada para calcular as metas municipais do IDEB, como no caso de
Pernambuco. Isto significa que as escolas com pior desempenho inicialmente receberam
metas mais brandas em termos absolutos, porm mais estritas se consideradas em termos
percentuais. Os elaboradores do programa, provavelmente, adotaram este mtodo assumindo
que para escolas com baixo nvel de desempenho fosse necessrio um esforo menor para
aumentar suas notas.
Por se tratar de incentivos em grupo, o programa foi elaborado de forma a evitar ao
mximo o problema de free-riders, isto foi feito impondo-se uma regra para receber o bnus.
Para que um funcionrio da escola estivesse apto a receber o bnus, ele teria que ter um
nmero de faltas inferior a um tero dos dias letivos, assim, um absentesmo alto seria punido.
Com uso do mtodo de diferenas em diferenas e dados dos anos de 2007 e 2009 da
Prova Brasil71, um estudo sobre os resultados desse programa feito em Oshiro (2012). No
total, aps tratamento da base de dados, foram obtidos dados referentes quarta srie de,
aproximadamente, 1.75072 escolas. Para a oitava srie este nmero foi de aproximadamente
3.300, de um total de 3.490 escolas.
O primeiro resultado73 de Oshiro (2012), para a quarta srie, aponta para um efeito
positivo em matemtica de 0,42 desvio padro, o que representa 6,4 pontos na prova.
Enquanto que, para portugus o efeito estimado de 0,3 desvio padro, representando cerca
de 3,7 pontos na prova. Porm, para a oitava srie nenhum dos efeitos mostraram-se
estatisticamente significativos.
De forma a verificar o comportamento dos efeitos estimados, a autora realizou uma
srie de anlises de robustez, que consistem, basicamente, em alterar o grupo de controle
utilizado. Os diferentes grupos foram construdos com dados da Prova Brasil, de escolas de
outros estados e de escolas das redes municipais de So Paulo que no participaram do
70
As metas foram fixadas para o longo prazo (levando em considerao a distribuio inicial das notas de cada
srie), de forma que, em 2030 os ndices de So Paulo se equiparassem aos dos pases da OCDE.
71
Apesar do programa ser atrelado s notas do SARESP, para fins de anlise de seus efeitos seria impossvel
encontrar um grupo de controle utilizando esta mesma prova como base. Logo, a escolha de usar dados da Prova
Brasil justificada pelo fato de seus resultados serem comparveis com os de outros estados e que, segundo a
autora, seria factvel acreditar que um programa que pretende melhorar o ensino teria efeito nas notas dos dois
exames.
72
De um total de 1987 escolas estaduais.
73
Este primeiro resultado foi estimado utilizando como grupo de controle as prprias escolas estaduais antes da
existncia do programa.
55
programa. Alm disso, com o intuito de controlar as caractersticas dos alunos e das escolas,
informaes dos questionrios da Prova Brasil foram consideradas74.
Aproveitando o fato de se situarem no mesmo estado e, portanto, estarem expostos aos
mesmos fatores socioeconmicos, a autora utiliza como primeiro grupo de controle as escolas
das redes municipais de So Paulo, que poca tinham 6.372 escolas. Neste, os efeitos
estimados, em termos de desvio padro, para a quarta srie de matemtica e portugus foram
de 0,46 e 0,25, respectivamente. Os efeitos estimados para a oitava srie foram negativos e
estatisticamente no significativos, ou seja, os resultados da primeira anlise de robustez
mostraram-se de acordo com os resultados iniciais.
Em seguida, so utilizados como controles todas as escolas restantes do Brasil e
somente as escolas estaduais restantes do Brasil. Novamente os efeitos para a quarta srie so
positivos e significativos, para ambos os grupos de controle. Na nota de portugus, o efeito
mdio estimado ficou em 0,2 desvio padro (aproximadamente 3 pontos da prova), enquanto
que para matemtica o efeito mdio foi de 0,49 desvio padro (aproximadamente 7,4 pontos
da prova). Como no resultado inicial, os efeitos estimados para a oitava srie foram negativos,
porm, neste caso estatisticamente significativos. Sendo que, para portugus o efeito mdio
foi de 0,15 desvio padro, ou seja, -2,23 pontos na prova, e para matemtica 0,1 desvio
padro.
A ltima anlise foi feita utilizando a regio Sudeste, excluindo o estado de So Paulo,
e criando quatro grupos distintos. O Grupo 1 e o Grupo 2 consistem, respectivamente, de
todas as escolas pblicas (federais, estaduais e municipais) dos trs estados (RJ, ES e MG) e
de somente as escolas estaduais dos trs estados. O Grupo 3 representa todas as escolas
pblicas dos estados do Rio de Janeiro e do Espirito Santo, enquanto o Grupo 4 rene todas as
escolas estaduais destes mesmos dois estados.
Nos grupos 1 e 2, os efeitos estimados para a quarta srie contradizem todos os
anteriores. Para portugus os efeitos mdios so negativos, estatisticamente significativos e
iguais a aproximadamente 0,16 desvio padro, enquanto que para matemtica os efeitos no
foram estatisticamente significativos. Para a oitava srie os efeitos, negativos e significativos,
foram em mdia de 0,6 desvio padro para portugus e 0,26 desvio padro para matemtica.
74
O mtodo utilizado para construir estes grupos foi o de Propensity Score Matching. A metodologia, suas
caractersticas e possveis problemas so estudados em, por exemplo, Peikes et al. (2008) e Caliendo et al.
(2008).
56
Segundo a autora, esta discordncia de resultados fruto das notas do estado de Minas
Gerais que eram bastante divergentes. Ainda segundo a autora, as notas deste estado no
teriam efeito nos resultados anteriores, que englobavam o Brasil inteiro, devido ao seu peso.
Nestes grupos, o peso do estado era de aproximadamente 70%. Por este motivo, os grupos 3 e
4, que desconsideram o estado, foram construdos. Excluindo-se o estado de Minas Gerais as
estimativas voltam a mostrar resultados que esto de acordo com os iniciais, mostrando que
os resultados iniciais, segundo esta abordagem, so robustos.
Logo, com os grupos 3 e 4 os efeitos mdios para portugus e matemtica de quarta
srie, ambos positivos e estatisticamente significativos, foram de 0,3 e 0,6 desvio padro,
respectivamente. Em termos de pontos da prova estes resultados representam um aumento em
mdia de 4,4 pontos em portugus e de 8,6 em matemtica. Para a oitava srie ambos os
efeitos so significativos, negativos e em mdia iguais a 0,2 desvio padro para portugus e,
para matemtica, 0,31 desvio padro. Em suma, o trabalho de Oshiro (2012) mostra indcios
de que o programa obteve resultados positivos para a quarta srie, porm, para a oitava srie
estes efeitos foram negativos.
Ao expor estes resultados pode-se notar dois aspectos; o fato de os efeitos serem em
mdia maiores para a disciplina de matemtica e a inverso de sinal dos efeitos entre as duas
sries. Em suas concluses a autora aponta hipteses que possivelmente explicam estes fatos.
Para o primeiro aspecto, uma hipteses a de que o esforo do professor mais
eficiente para o aprendizado de matemtica do que para o aprendizado de portugus. Isto
ocorreria uma vez que o esforo do aluno para aprender portugus, que envolve muita leitura
fora da sala de aula, um fator de grande importncia. Outra hiptese a existncia de uma
potencializao do aprendizado de matemtica pela melhoria do portugus, dado que para a
soluo do problema de matemtica, requerida interpretao.
Em relao inverso do sinal, a autora chama ateno para o fato de que pode haver
um acmulo de dficit de aprendizado, ou seja, muitos alunos estariam passando de ano sem
ter alcanado um nvel desejado de aprendizado para sua srie. Assim, mesmo com o aumento
de esforo pelo professor, atingir uma melhoria nas notas desses alunos mais difcil,
principalmente devido maior complexidade das matrias em sries mais avanadas.
Outro fator, que teria contribudo para uma melhoria mais significativa na quarta srie,
57
seria o processo de descentralizao que ocorre desde meados de 1990. Segundo a autora,
muitas escolas estaduais do primeiro ciclo do ensino fundamental passaram ento a ser
municipais, o que explica o nmero menor de escolas tratadas para a quarta srie. Assim, por
ser uma rede menor de escolas, o programa teria funcionado com maior facilidade.
58
Concluso
Por se tratar de um trabalho de economia, deve-se sempre ter em mente o modelo
terico que justifica o que se quer aplicar na prtica, para ento analisar sua eficincia. A
teoria exposta neste trabalho mostrou que o ponto mais importante, para o funcionamento de
um mecanismo de incentivo, o contedo informacional, seja relativo aos agentes envolvidos
na produo, seja em relao prpria produo do bem em questo. Bem este representado,
neste caso, pela melhoria da educao ou, em termos bem mais simplificados, pelo aumento
de uma determinada nota de prova.
Em especial, trs concluses podem ser tiradas a partir do modelo exposto.
Primeiramente, pode-se concluir que o sistema de remunerao timo ir depender em grande
parte dos agentes envolvidos e de seu comportamento frente ao risco, sendo que, quanto mais
avessos ao risco mais este sistema ir tender para uma remunerao fixa. Em segundo lugar,
vimos que essencial saber comparar a probabilidade de aumentar uma nota dado um esforo
alto com a probabilidade de aumentar uma nota dado um esforo baixo, para ento identificar
qual nvel de esforo remunerar mais. Por ltimo, pode-se concluir que, quanto menor for o
efeito de um esforo alto vis--vis um esforo baixo do professor nas notas dos alunos, mais o
sistema timo de remunerao tender para uma remunerao fixa.
Aparentemente, os programas so desenvolvidos e aplicados sem o principal
componente do modelo, que o conhecimento de como produzir melhores notas. A
responsabilidade deste conjunto informacional ento repassada por completo para os
professores, que muitas vezes no sabem exatamente como agir. Este o caso do programa de
Nova York, onde a falha do programa, segundo o avaliador, poderia ser devida
possibilidade de os professores no saberem como aumentar o desempenho dos alunos.
Desta forma, o motivo da suposta falta de esforo dos professores talvez no seja a
ausncia de uma remunerao varivel, ou bnus atrelados ao desempenho de seus alunos,
mas simplesmente a falta de conhecimento que se tem da chamada funo de produo da
educao, matria que poderia ser alvo de futuros estudos.
Ao passar pelos diferentes casos e seus resultados fica claro que, apesar de ser
importante comparar e estudar cada um deles, preciso sempre ter em mente o fato de, em
59
geral, se tratar de pases com cultura e valores muito diferentes. Talvez esta seja uma razo
para que alguns casos apresentem sucesso e outros no, ou seja, a comparao de grupos
muito heterogneos deve ser feita de forma cautelosa para no se tirar concluses enviesadas.
Inmeras caractersticas podem fazer uma enorme diferena, significando a eficincia ou no
do programa. O salrio mdio de um professor comparado com o de outras profisses, a
forma como a carreira de professor vista no pas e o fato de somente existirem escolas
pblicas, por exemplo. Em geral, as diferenas entre os pases no so levadas em
considerao e os resultados dos programas so comparados simplesmente pelos resultados
obtidos.
Como apontado por Lavy (2002) e Atkinson et al. (2009), importante saber de que
modo os efeitos percebidos j no curto prazo se comportam no longo prazo e quais so as
consequncias da retirada ou expanso de um programa. Mudanas no comportamento dos
professores, focando mais ou menos em determinados grupos de alunos ou adotando
metodologias alternativas de ensino, como visto no caso do Reino Unido, assim como
incertezas sobre a existncia ou no de um possvel amortecimento futuro dos efeitos dos
incentivos, so exemplos de consequncias que possivelmente s mostram seus efeitos num
prazo mais longo. Alm disso, a projeo de resultados obtidos em experimentos de pequena
escala para programas de grande escala ainda pouco conhecida e pouco estudada.
Portanto, pode-se afirmar que a falta de programas de longa durao75 dificulta a
avaliao do desencadeamento dos efeitos percebidos j no curto prazo, sejam eles negativos
ou positivos. Desta forma, h ainda uma grande incerteza em relao ao desenvolvimento, no
tempo e tamanho, dos programas de responsabilizao, o que caracteriza um ponto vital para
sua aplicao na melhoria de um sistema de educao como um todo.
No caso do Brasil, pode-se notar a defasagem no s em relao anlise de
programas de responsabilizao, mas principalmente em relao ao quesito de diagnstico da
educao. A inexistncia ou dificuldade de acesso aos dados relacionados educao, assim
como a implementao de programas sem o devido acompanhamento, so fatores
extremamente preocupantes.
Desta forma, a principal concluso que se pode tirar deste trabalho que, a utilizao
75
Muitas vezes os programas podem ter uma durao relativamente longa, porm, com variaes de seu
funcionamento ao longo do tempo, trocando o mtodo de avaliao, por exemplo. Estas variaes impossibilitam
a comparao entre os diferentes perodos.
60
educao.
76
Note-se que, pelo modelo bsico, mesmo se conhecermos perfeitamente a funo de produo da educao e o
comportamento de todos os agentes econmicos envolvidos, ainda assim estaramos ignorando os aspectos
relacionados multidimensionalidade. Ou seja, mesmo assim no poderamos garantir resultados positivos.
61
Referncias
Jacob, B.A.; S.D. Levitt Rotten apples: an investigation of the prevalence and
predictors of teacher cheating, Quarterly Journal of Economics, vol. 118, pp. 843-77, 2003
Kandel, L.;Lazear,E. Peer Pressure and Partnerships, Journal of Political Economy,
vol. 100, No. 4, pp. 801-817, Aug. 1992
Kane, T.J.; Staiger, D.O. The Promise and Pitfalls of Using Imprecise School
Accountability Measures The Journal of Economic Perspectives, vol. 16, no. 4, p. 91-114,
Fall 2002
Larr, F.; Plassard, J-M. Quelle place pour les incitations dans la gestion du
personnel enseignant ? Recherches conomiques de Louvain, vol. 74, p.359-403, 2008/3
Lavy, V. Evaluating the effect of teachers group performance incentives on pupil
achievement, Journal of Political Economy, vol. 110, no.6, 2002
Lima, R. Programas de responsabilizao de professores: anlise crtica dos
fundamentos terico-conceituais, Texto para Discusso, no.42, CEDE/UFF, maio 2011
Mas-Colell, A; Whinston, M.; Green, J. Microeconomic Theory. Oxford: Oxford
University Press, 1995
Menezes-Filho, N.A. Os determinantes do desempenho escolar do Brasil, mimeo,
Instituto Futuro Brasil, 2007
Milgrom, P.; Roberts, J. Economics, Organization and Management, Eaglewood
Cliffs, NJ: Prentice-Hall, 1992
Muralidharan, K.; Sundararaman, V. Teacher performance pay: Experimental
evidence from India, Journal of Political Economy, vol. 119, no. 1, p. 39-77, 2011
Oshiro, C.H.; Efeito do pagamento de bnus aos professores sobre a proficincia
escolar,
Dissertao
de
Mestrado,
recuperado
em
18/10/2012,
http://www.teses.usp.br/teses/disponiveis/96/96131/tde-17042012-161016/,
disponvel
em
FEA-USP/RP,
2012
Peikes, D.N.; Moreno, L.; Orzol, S.M. Propensity Score Matching: A Note of
Caution for Evaluators of Social Programs, The American Statistician, vol. 62, no.3, 2008
64
disponvel
em
http://img.asercentre.org/docs/Publications/ASER%20Reports/ASER_2012/fullaser2012repor
t.pdf, 2013
Prendergast, C. The Provision of Incentives in Firms, Journal of Economic
Literature, vol. 37, No.1, p.7-63, Mar.1999
Sampaio, L.M.B. Modelo Principal-Agente para contratos entre pequenos produtores
e empresa exportadora de manga no Rio Grande do Norte, Revista de Economia e Sociologia
Rural, Rio de Janeiro, vol. 45, No. 04, p. 879-898, Out/Dez 2007
Soares, J.F.; Collares, A.C.M. Recursos Familiares e o Desempenho Cognitivo dos
Alunos do Ensino Bsico Brasileiro, DADOS Revista Brasileira de Cincias Sociais, Rio
de Janeiro, vol. 49, no. 3, p. 615-681, 2006
Tirole, J. The Internal Organization of Government, Oxford Economic Papers, vol.
46, n.1, p. 1-29, Janeiro/1994
Varian, H.R. Microeconomia. Princpios bsicos. Uma abordagem moderna.
(Traduo da 7 edio americana), Rio de Janeiro: Campus, 2006
Varian, H.R. Microeconomic Analisys. 3rd Ed. New York: Norton, 1992
Veloso, F.; Giambiagi, F.; Henriques, R. (orgs.), Educao bsica no Brasil:
construindo o pas do futuro, Rio de Janeiro: Campus/Elsevier, 2009
Waltenberg, F.; Vanderberghe, V. Mobilidade de alunos em um quase-mercado
escolar: Anlise economica da situao na comunidade francesa da Blgica, Pesquisa &
Debate (PUCSP), vol. 17, p. 173-201, 2006
Waltenberg, F. Iniquidade educacional no Brasil. Uma avaliao com dados do PISA
2000, Revista Economia (ANPEC), vol. 6 (1), p. 67-118, 2005
Waltenberg, F. Teorias econmicas de oferta de educao: evoluo histrica, estado
atual e perspectivas Educao e Pesquisa, v.32, no.1, p.117-136, jan./abr., 2006
Wragg, T.; Haynes, G.; Chamberlin,R.; Wragg, C. Performance-related pay: the
65
views and experiences of 1,000 primary and secondary head teachers, Research Papers in
Education, vol. 18, no. 1, p. 3-23, 2003
66