Condicionamento operante
Um carro apita até você colocar o cinto. O fim do apito é um tipo de recompensa que os psicólogos chamam de reforço negativo.
O condicionamento clássico explica reações que acontecem com você, como salivar ou sentir medo. Não explica por que uma criança aprende a andar de bicicleta ou por que você verifica o celular tantas vezes. Para comportamentos que você escolhe realizar, o importante é o que acontece depois. Isso é condicionamento operante: comportamentos seguidos de boas consequências se tornam mais prováveis; os seguidos de más consequências, menos prováveis.
Edward Thorndike colocava gatos em caixas-problema, com um trinco dentro e comida fora. No início, escapavam por acaso; após muitas tentativas, saíam cada vez mais rápido. Thorndike resumiu isso na lei do efeito: respostas seguidas de consequências satisfatórias se repetem; as seguidas de consequências desagradáveis, não. B. F. Skinner desenvolveu a ideia na década de 1930 com a câmara operante, hoje chamada de caixa de Skinner. Nela, um rato apertava uma alavanca ou um pombo bicava um disco para receber comida, enquanto um registrador contava cada resposta.
Mais e menos não significam bom e ruim
Nesse vocabulário, reforço sempre aumenta um comportamento, e punição sempre o reduz. Positivo significa acrescentar algo; negativo, retirar algo. Assim, há quatro combinações. Reforço positivo: acrescentar algo agradável (um petisco por um truque). Reforço negativo: retirar algo desagradável (o apito do cinto para). Punição positiva: acrescentar algo desagradável (uma bronca). Punição negativa: retirar algo agradável (perder tempo de uso do celular). O reforço negativo é o mais confundido com punição; lembre que ele aumenta a probabilidade do comportamento.
Modelagem e esquemas de reforço
Um pombo não joga pingue-pongue por conta própria, então Skinner usou modelagem por aproximações sucessivas: recompensar uma aproximação inicial e exigir algo um pouco mais próximo a cada vez. Recompensas podem ser primárias, como comida, ou secundárias, como elogios, dinheiro ou fichas que ganham valor pela associação às primárias. A frequência também importa. Razão fixa reforça após um número definido de respostas (trabalho por peça). Razão variável reforça após um número imprevisível (jogos de azar), produzindo respostas frequentes e constantes, difíceis de extinguir. Intervalo fixo reforça a primeira resposta após um tempo definido; intervalo variável, após um tempo imprevisível (verificar novas mensagens).
Skinner afirmava que poderia transformar um pombo em jogador patológico com um esquema de razão variável. A OpenStax observa que um estudo de 2019 com ratos (Laskowski e colegas) não sustentou a ideia de que esses esquemas sozinhos causam problemas com jogos. Skinner também tratava a mente como caixa-preta, mas Edward Tolman mostrou que ratos que exploraram um labirinto sem comida por 10 sessões encontraram o caminho rapidamente quando ela apareceu. Tinham criado um mapa cognitivo sem recompensa, o que ele chamou de aprendizagem latente. Aprender não se resume ao que o reforço fixa.
| Lei do efeito | Thorndike: resultados satisfatórios tornam uma resposta mais provável |
| Reforço negativo | Retirar algo desagradável, o comportamento aumenta |
| Punição negativa | Retirar algo agradável, o comportamento diminui |
| Modelagem por aproximações sucessivas | Recompensar aproximações sucessivas ao comportamento desejado |
| Razão variável | Recompensa após um número imprevisível de respostas; difícil de extinguir |
| Aprendizagem latente | Tolman: aprendizagem sem recompensa, demonstrada depois |
- As consequências mudam a frequência de um comportamento.
- O reforço aumenta o comportamento; a punição o reduz. Positivo acrescenta, negativo retira.
- A modelagem constrói comportamentos complexos passo a passo.
- Esquemas de razão variável produzem respostas frequentes e persistentes.
- Um cão recebe um petisco ao sentar e passa a sentar mais vezes.
- Reforço positivo
- Reforço negativo
- Punição positiva
- Punição negativa
- Você coloca o cinto para parar o apito e o coloca mais cedo da próxima vez.
- Reforço positivo
- Reforço negativo
- Punição positiva
- Punição negativa
- Um adolescente perde tempo de celular por chegar após o horário combinado e passa a desrespeitá-lo menos.
- Reforço positivo
- Reforço negativo
- Punição positiva
- Punição negativa
- Um estudante leva bronca por mandar mensagens na aula e passa a mandar menos.
- Reforço positivo
- Reforço negativo
- Punição positiva
- Punição negativa
- Qual esquema corresponde a uma máquina caça-níqueis?
- Razão fixa
- Razão variável
- Intervalo fixo
- Intervalo variável
- Um operário pago a cada 10 itens produzidos está em qual esquema?
- Razão fixa
- Razão variável
- Intervalo fixo
- Intervalo variável
- Dinheiro é um exemplo de...
- Reforçador primário
- Reforçador secundário
- Estímulo incondicionado
- Punição
- Ensinar um pombo a girar recompensando um quarto de volta, depois meia volta e depois uma volta inteira é...
- Modelagem por aproximações sucessivas
- Extinção
- Generalização
- Aprendizagem latente
- Um estudo de 2019 com ratos citado pela OpenStax confirmou que esquemas de razão variável sozinhos causam jogo patológico.
- Sim
- Não
- Os ratos sem recompensa de Tolman acharam a comida rapidamente quando ela apareceu. O que isso mostrou?
- A aprendizagem pode ocorrer sem reforço
- Ratos não aprendem labirintos
- A punição funciona melhor
- Só reflexos são aprendidos
Fontes deste curso (15)
- OpenStax Psychology 2e (openstax.org/books/psychology-2e)
- sections 6.2 Classical Conditioning (Pavlov 1927; Garcia and Koelling 1966; Rescorla and Wagner 1972; Watson and Rayner 1920)
- 6.3 Operant Conditioning (Thorndike 1911 law of effect; Skinner 1938; reinforcement and punishment; shaping; primary and secondary reinforcers; schedules; Skinner 1953 on gambling; Laskowski et al. 2019; Tolman latent learning)
- 6.4 Observational Learning (Bandura, Ross and Ross 1961; attention, retention, reproduction, motivation; Yamamoto, Humle and Tanaka 2013; Anderson et al. and Ferguson on media violence)
- 10.1 Motivation (Deci, Koestner and Ryan 1999; Yerkes and Dodson 1908; Bandura 1994 self-efficacy; Maslow 1943 and its criticism; drive theory and habits)
- 8.4 Ways to Enhance Memory. Lally, van Jaarsveld, Potts and Wardle (2010) European Journal of Social Psychology 40, 998-1009, doi 10.1002/ejsp.674 (96 volunteers, 12 weeks, 82 with enough data, 39 good model fits, median 66 days to 95% of plateau, range 18 to 254 days, missing one opportunity did not materially affect habit formation)
- Hagger et al. (2016) Perspectives on Psychological Science 11, 546-573, PubMed 27474142 (23 labs, N = 2,141, d = 0.04, 95% CI -0.07 to 0.15)
- Dang et al. multilab replication, PMC8186735 (12 labs, N = 1,775, d = 0.10)
- Dunlosky et al. (2013) Psychological Science in the Public Interest 14(1)
- PubMed 26173288 (10 techniques; high utility: practice testing, distributed practice; moderate: elaborative interrogation, self-explanation, interleaved practice; low: summarization, highlighting, keyword mnemonic, imagery for text, rereading)
- Pashler, McDaniel, Rohrer and Bjork (2008) PSPI 9(3) 105-119, PubMed 26162104. Mueller and Oppenheimer (2014) Psychological Science, PubMed 24760141
- Morehead, Dunlosky and Rawson (2019) Educational Psychology Review replication
- Urry et al. (2021) Psychological Science direct replication of Study 1. Roediger and Karpicke (2006) Psychological Science 17(3)
- Card intervals come from this site's own flashcard code (0, 1, 3, 7, 14, 30 days)
- Everyday scenes are made up for teaching. General information only.
Data de verificação: 2026-10-17