FACULDADE PITGORAS - POOS DE

CALDAS
Curso de Psicologia 2osem/2015

ANLISE EXPERIMENTAL DO
COMPORTAMENTO

Profa Francine Mrcia de Castro Coura

3. O COMPORTAMENTO OPERANTE E O
SEGUNDO NVEL DE SELEO POR
CONSEQUNCIAS: O PAPEL DOS ANTECEDENTES
E DAS CONSEQUNCIAS

3. 3. Esquemas de reforamento: a programao de

operaes de consequenciao e o controle do
comportamento.
Grande parte de nossas respostas no so
reforadas em 100% das vezes em que so
emitidas.
Exemplo: no so todas as vezes em que voc liga a
sua televiso que voc encontra alguma coisa
interessante para assistir o comportamento ligar
a televiso, neste caso, no reforado todas as
vezes -, mas mesmo assim voc volta a lig-la em
outra ocasio.
Se um comportamento mantido por reforo, como
explicar o fato de que ele volta a ocorrer mesmo
no sendo reforado em todas s vezes?

Os analistas do comportamento chamam de

Esquemas de reforamento o conceito que traz
consigo a ideia de que no s a apresentao de
uma consequncia vai alterar a frequncia de
ocorrncia de uma resposta, mas tambm, o modo
ou esquema em que esta consequncia apresentada
ir exercer controle sobre ela.
Na natureza existem diversos esquemas de reforo.

importante conhecer tais esquemas, pois estes

produzem efeitos diferentes no comportamento
dos indivduos, como por exemplo, diferentes
esquemas podem fazer com que os indivduos
sejam muito perseverantes ou que desistam
facilmente, ou que sejam muito trabalhadores ou
mais preguiosos. Tambm importante para
entendermos um pouco melhor porque alguns
comportamentos pessoas so mais persistentes,
ou perseverantes, e outros menos.

Esquema de Reforo Contnuo (CRF)

No Esquema de Reforo Contnuo (CRF), todas as

respostas sem exceo -, so reforadas.

Para compreender melhor, pense naquele

namorado apaixonado que realiza todos os
pedidos de sua namorada. Ele simplesmente no
nega nada a ela. Todas as vezes que o
comportamento da namorada pedir algo
emitido, ele reforado.
Este o esquema de reforo mais adequado para
que um determinado comportamento seja
modelado.

Uma crtica muito comum feita anlise do

comportamento diz respeito a comportamentos
que ocorrem com frequncia, mas no se observa
o seu reforamento.

O fato ignorado refere-se intermitncia do

reforamento, ou seja, muitos comportamentos
so reforados apenas algumas vezes em que
ocorrem.

Este talvez seja um dos aspectos mais

importantes sobre a aprendizagem dos
organismos, pois os diferentes tipos de esquemas
de reforamento fazem com que os indivduos
aprendam muito mais do que simplesmente emitir
uma resposta.
Esquemas de Reforo Intermitente

Imagine outro casal de namorados em que, nem

todos os pedidos da namorada so atendidos pelo
rapaz.
Ele atender ou no, obedece a alguns critrios,
dentre os quais podem estar a quantidade de
vezes (insistncia) em que a namorada pede, ou
o tempo (espera) entre um pedido e o outro.

A este esquema, os analistas do comportamento

chamam de Esquema de Reforo Intermitente.

O esquema de reforo intermitente tido como

o mais eficaz na manuteno de respostas j
modeladas.
Uma de suas principais caractersticas tornar
a resposta mais resistente extino.

Isto , podem ser emitidas mais vezes sem que

necessariamente o reforador tenha de ser
apresentado.

Os Esquemas de Reforo Intermitente dividem-

se em: Esquemas de Razo e Esquemas de
Intervalo.
 Nos esquemas de razo, a apresentao do
reforador depende da quantidade de vezes em
que uma resposta emitida.

 Nos esquemas de intervalo, a apresentao do
reforador depende do tempo decorrido entre
uma e outra apresentao do reforador.

Esquemas de Razo

Os Esquemas de Razo dividem-se em Esquemas

de Razo Fixa (FR) e Esquemas de Razo
Variada (VR).
Nos Esquemas de Razo Fixa (FR), o organismo
deve emitir uma quantidade fixa e invarivel de
respostas para que o reforador seja
apresentado.
A quantidade de respostas no varia entre um
reforador e outro.

Exemplo: pense naquele vendedor de botas de

couro que s recebe o seu salrio a cada 30
botas vendidas. Antes que ele consiga vender as
30 botas, o seu patro no lhe paga.

Neste caso, temos um esquema de reforo de

Razo Fixa (FR = 30), no qual a cada 30 (essa
quantidade no varia) botas vendidas o
reforador apresentado.
Este esquema caracterizado pela alta taxa de
respostas produzidas, uma vez que, como o
reforo depende nica e exclusivamente do
responder do organismo, se ele responder com
rapidez, ir produzir reforo tambm com maior
rapidez.
Logo aps o reforo, o organismo demora um
pouco para voltar a responder.

Este tempo chamado pausa aps reforo. Esta

pausa atribuda ao fato de que no h
produo de reforo imediatamente aps um
reforamento anterior, permitindo discriminar de
maneira clara que o prximo reforador no
estar disponvel imediatamente aps a primeira
resposta emitida.
No Esquema de Razo Varivel (VR), a
quantidade de respostas exigida para a
apresentao do reforador no fixa. Ela
varia.
Exemplo: um cabeleireiro corta cabelos neste
esquema. Se ele recebe uma quantia de oito
reais por corte, o reforo ser contingente ao
nmero de tesouradas que ele dar no cabelo de
cada pessoa.
No entanto, o nmero de tesouradas necessrias
para cortar o cabelo de cada pessoa varia, o que
significa que a razo (quantidade de tesouradas)
varivel (VR).
Este esquema caracterizado por pausas curtas,
ou mesmo ausncia de pausa aps reforo. Isso
ocorre porque no h como discriminar se o
nmero de respostas para o prximo reforo
grande ou pequeno, uma vez que varivel.
Este esquema o que produz maiores taxas de
respostas, j que exigem um nmero
indeterminado de respostas para a
disponibilizao do prximo reforo, e por no
apresentarem pausas aps reforo.
Para fazer algum trabalhar muito e ganhar
pouco, este o esquema mais indicado.

Portanto...

Os esquemas de reforamento intermitente de

razo, ou seja, baseados no nmero de respostas
emitidas, podem ser feitos de duas maneiras: razo
fixa e razo varivel. Na razo fixa exige-se
sempre o mesmo nmero de respostas para que o
comportamento seja reforado; na razo varivel o
nmero de respostas necessrias para que o
comportamento seja reforado muda a cada novo
reforamento, sendo que este nmero de respostas
gira em torno de uma mdia:
Como funcionam os esquemas de razo fixa e razo varivel

Razo Fixa 5 (FR:5) Razo Varivel 5 (VR:5)

No. de respostas Reforo No. de respostas Reforo

5 presses barra apresentao de gua 2 presses barra apresentao de gua

5 presses barra apresentao de gua 7 presses barra apresentao de gua

5 presses barra apresentao de gua 5 presses barra apresentao de gua

5 presses barra apresentao de gua 4 presses barra apresentao de gua

5 presses barra apresentao de gua 6 presses barra apresentao de gua

5 presses barra apresentao de gua 6 presses barra " apresentao de gua

Esquemas de Intervalo

Nos Esquemas de Intervalo, a quantidade de

respostas emitidas entre a apresentao de um
reforador e outro irrelevante.
Basta que alguma resposta seja emitida, de
acordo com o intervalo.

O que de fato determina se o reforador ser

ou no apresentado, o tempo decorrido desde
a ltima apresentao de reforo.

Este esquema tambm se subdivide em Fixo e

Varivel.
No Esquema de Intervalo Fixo (FI), o perodo
exigido entre a apresentao do ltimo
reforador e a disponibilidade do prximo
reforador sempre o mesmo.
Exemplo: um atleta em treinamento recebe um
beijo de sua namorada a cada 20 minutos de
treino. Antes que ele complete os 20 minutos,
sob hiptese alguma a sua namorada o beijar.

Neste caso, temos um esquema de reforamento

de Intervalo Fixo (FI = 20).
Este o esquema que produz as menores taxas
de respostas. Os motivos pelos quais isso
acontece, so:
01) no exigido um nmero mnimo de
respostas para que o reforo seja
disponibilizado; ou seja, tanto faz se o
organismo responde muito ou pouco. O que
importa para que o reforador seja apresentado,
a resposta ser emitida no momento certo.
02) o esquema que produz as maiores pausas
aps reforo. A discriminao temporal entre o
reforamento e o no reforamento facilitada
pela regularidade dos intervalos.
O Esquema de Intervalo Variado (VI) tem o
mesmo raciocnio que o de intervalo fixo, com a
diferena de que, no esquema em questo, os
intervalos (tempo) entre o ltimo reforador e a
prxima disponibilidade no so os mesmos, ou
seja, so variveis.
Exemplo: achar uma msica agradvel no rdio
est sob controle deste esquema.
De tempos em tempos possvel encontrar, mas
nunca se sabe quanto tempo exatamente
preciso ficar procurando pra achar.

Este esquema, apesar de ser um esquema de

intervalo, produz um padro com uma taxa
relativamente alta de respostas.
No h como prever quando o prximo
reforador estar disponvel.

O organismo responder quase o tempo todo.

Caso ele fique muito tempo sem responder,

perder reforos; deste modo, permanecer
respondendo moderadamente o tempo todo.
 Portanto...
Nos esquemas de intervalo o reforo ocorre em
funo da passagem do tempo. Da mesma forma que
os esquemas de razo, os esquemas de intervalo
tambm se dividem em esquemas de intervalo fixo
(FI) e esquemas de intervalo varivel (VI). Nos
esquemas de intervalo fixo, aps a passagem de um
intervalo especificado, a primeira resposta que o
organismo emite reforada. Os esquemas de
intervalo varivel seguem o mesmo raciocnio, a nica
diferena reside no fato de que os intervalos de
tempo so variveis, girando em torno de uma mdia:
Como funcionam os esquemas de intervalo fixo e de intervalo varivel

Intervalo Fixo (FI-5) Intervalo Varivel (VI-5)

Aps 5s, 1 Resposta " SR Aps 3s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 5s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 1s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 7s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 6s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 5s, 1 Resposta " SR

Aps 5s, 1 Resposta " SR Aps 4s, 1 Resposta " SR

 Aps 5s, 1 Resposta " SR Aps 9s, 1 Resposta " SR

A Lei da Igualao

A lei da igualao afirma que diante de dois

esquemas de reforamento distintos a
quantidade de respostas emitidas pelo organismo
em cada um deles ser proporcional a quantidade
de reforos disponveis em cada um dos
esquemas.Exemplo: Se ficar no PC produz mais
reforos que assistir TV, voc passar mais
tempo no computador e menos tempo assistindo
televiso.
Sentimentos Produzidos pelos Esquemas de
Reforamento

O reforo positivo produz (causa) uma sensao

de bem estar e prazer ao organismo. Mas ser
que se apresentarmos um reforo positivo de
formas diferentes, (de acordo com um esquema
de reforamento) o reforo positivo poder
produzir (causar) outras sensaes no organismo.

Todos os exemplos estaro expostos em termos

de uma relao de dependncia entre eventos,
isto : Se... um determinado esquema de
reforamento ocorre (causa), Ento... uma
determinada sensao sentida (efeito).

Qual das sensaes ser sentida ir depender do

contexto (estmulo discriminativo) do organismo.
Se um ato sempre reforado (esquema de
reforamento contnuo), Ento a pessoa sente
confiana, certeza, interesse, engajamento,
liberdade, bem estar, etc.

Se um ato reforado em um esquema de

reforamento em Razo Varivel favorvel ao
organismo (mais reforos que respostas), Ento
a pessoa sente zelo, diligncia, ambio,
esperana, determinao, obstinao,
persistncia, teimosia, dedicao, etc.
Se ao contrrio, o esquema de razo varivel
for desfavorvel ao organismo (mais respostas
que reforos), Ento a pessoa pode se sentir
explorada.

Se um ato reforado em um esquema de

reforamento em Razo Fixa (como um escritor
que ganha a vida escrevendo livros um atrs do
outro), Ento a pessoa sente exausto e falta
de vontade (de comear a escrever outro livro
logo aps terminar um).
Se um ato reforado positivamente em um
esquema de reforamento em Intervalo Varivel,
Ento a pessoa sente expectativa, interesse, etc.
Mas se o reforo for negativo, ela sente ansiedade.

Se um ato reforado em um esquema de

reforamento em Intervalo Fixo, se o reforo for
positivo, Ento a pessoa pode sentir que no v a
hora de determinada coisa acontecer (de ser
reforada),
mas se o reforo for negativo ela sente que est
presa em alguma coisa o dia todo.
Condicionamento operante

O conceito-chave do pensamento de Skinner o

de condicionamento operante, que ele
acrescentou noo de reflexo condicionado,
formulada pelo cientista russo Ivan Pavlov.
Os dois conceitos esto essencialmente ligados
fisiologia do organismo, seja animal ou humano.
O reflexo condicionado uma reao a um
estmulo causal. O condicionamento operante
um mecanismo que premia uma determinada
resposta de um indivduo at ele ficar
condicionado a associar a necessidade ao.

o caso do rato faminto que, numa experincia,

percebe que o acionar de uma alavanca levar ao
recebimento de comida.
Ele tender a repetir o movimento cada vez que
quiser saciar sua fome.

A diferena entre o reflexo condicionado e o

condicionamento operante que o primeiro uma
resposta a um estmulo puramente externo; e o
segundo, o hbito gerado por uma ao do
indivduo.
No comportamento respondente (de Watson), a
um estmulo segue-se uma resposta.

S-R
No comportamento operante (de Skinner), o
ambiente modificado e produz consequncias
que agem de novo sobre ele, alterando a
probabilidade de ocorrncia futura semelhante.
O R - CONSEQUNCIA
O condicionamento operante um mecanismo de
aprendizagem de novo comportamento - um
processo que Skinner chamou de Modelagem.

O instrumento fundamental de modelagem o

reforo - a consequncia de uma ao quando
percebida por quem a pratica.

Para o behaviorismo, o reforo pode ser positivo

(uma recompensa) ou negativo (ao que evita
uma consequncia indesejada/aversiva).
No condicionamento operante, um mecanismo
fortalecido no sentido de tornar uma resposta
mais provvel, ou melhor, mais frequente.

A modelagem consiste em reforar as

aproximaes sucessivas tendo por fim um
comportamento desejado, sendo por isso a
modelagem tambm chama da mtodo das
aproximaes sucessivas.
 o mtodo pelo qual atravs do reforamento
positivo instalam-se novas respostas por meio de
um processo gradativo de aprendizagem tendo
como objetivo um comportamento terminal.

A modelagem um procedimento de
reforamento diferencial por aproximaes
sucessivas de um comportamento.
Este reforamento diferencial consiste em
reforar algumas respostas que obedecem a
alguns critrios e em no reforar outras
respostas que esto fora do desse critrio. Uma
nica resposta pode receber numerosos
reforamentos, enquanto outras respostas no
recebem nenhum.

Dessa forma selecionamos um padro de

resposta.
De acordo com SKINNER (2003, p.103):
assim, o comportamento fracionado para
facilitar a anlise. Estas partes so as unidades
que consideramos e cujas frequncias
desempenham um importante papel na busca das
leis do comportamento.

Atravs do uso adequado do procedimento de

modelagem, respostas e sequncias
comportamentais inteiramente novas podem ser
ensinadas.
Segundo WHALEY e MALOTT (1980, p.96):
atravs de um processo gradual, as respostas
que se assemelham cada vez mais ao
comportamento terminal so, sucessivamente,
condicionadas at que o prprio comportamento
terminal seja condicionado.

Sendo que o resultado final de um novo

comportamento surge de comportamentos
anteriores.
Assim na modelagem h o comportamento inicial,
h o(s) comportamento(s) intermedirio(s) que
so modelados pelo reforamento positivo e h o
comportamento terminal que o estabelecido
pelo experimentador e, segundo WHALEY e
MALOTT (1980, p.97) estes comportamentos
pertencem a uma mesma classe de respostas.
A continuidade do comportamento feita na
fase da modelagem, onde o pesquisador modela o
sujeito, de acordo com as respostas que deseja
obter do sujeito e durante a modelagem, o
reforo alm de fortalecer uma resposta
particular, tambm aumenta a probabilidade de
ocorrncia de resposta em situaes
aproximadas.
Citando SKINNER (2003, p.101):
o condicionamento operante modela o
comportamento como o escultor modela a argila.
[...] No mesmo sentido, um operante no algo
que surja totalmente desenvolvido no
comportamento do organismo. o resultado de
um contnuo processo de modelagens.
Um exemplo desse procedimento a
aprendizagem da fala.

No aprendemos a falar de um dia para outro.

Os comportamentos novos que apreendemos
surgem a partir de comportamentos que j
existem em nosso repertrio comportamental. A
maioria dos bebs humanos j nasce emitindo
diversos sons (fonemas) diferentes (gu, da,
b, e, etc.).
Um beb ao nascer, capaz de emitir todos os
fonemas encontrados em todas as lnguas do
mundo, passando considervel perodo de tempo
emitindo-os aleatoriamente. Suponha que em um
desses momentos me do beb esteja
presente, ao lado do bero, repetindo para seu
filho: mame, mame..., e o beb olhando
para sua me, diz: gu, da, b, e...
Em um dado momento o beb emite um som
parecido com m. Quando isso ocorre me
acaricia seu filho na barriga e sorri. A me esta
consequnciando esse comportamento.
Essa consequncia reforadora aumentar a
probabilidade de que o beb volte a dizer m
na presena da me e ela continuar a lhe dar
carinho e ateno quando ele o fizer. Logo, o
beb dir m sempre que sua me estiver por
perto. Mas ele ainda no fala mame.
Posteriormente, a me para de dar tanta
ateno e carinho quando o beb disser apenas
m.Isso produzir variao de comportamento,
ele dir: mb, mb, mg, etc. Em algumas
das tentativas dir mam ou algo muito
parecido com isso, e l estar sua me para
reforar esse comportamento, tornando a
probabilidade do beb voltar a emiti-lo mais
alta, e o processo contnua at o beb dizer
mame.
A probabilidade original da resposta em sua
forma final muito pequena, sendo que em
alguns casos pode mesmo ser zero. Assim
podemos elaborar operantes complicados que
nunca apareceriam no repertrio do organismo
por outros meios, reforando uma srie de
aproximaes sucessivas conseguimos uma alta
probabilidade para uma resposta muito rara.
Este procedimento eficaz por reconhecer e
utilizar a natureza contnua de um ato complexo.
Referncias Bibliogrficas:

MOREIRA, M. B.; MEDEIROS, C. A. Princpios bsicos

de anlise do comportamento. Porto Alegre, Artmed,
2007.

SKINNER, B. F. Cincia e comportamento humano.

Captulo VI Modelagem e manuteno do
comportamento operante, p.101-118