edubun
Português

Condicionamento operante

Um carro apita até você colocar o cinto. O fim do apito é um tipo de recompensa que os psicólogos chamam de reforço negativo.

As situações cotidianas desta unidade são fictícias e servem para ensinar. Os resultados de pesquisa vêm dos estudos citados no texto. Apenas informações gerais.

O condicionamento clássico explica reações que acontecem com você, como salivar ou sentir medo. Não explica por que uma criança aprende a andar de bicicleta ou por que você verifica o celular tantas vezes. Para comportamentos que você escolhe realizar, o importante é o que acontece depois. Isso é condicionamento operante: comportamentos seguidos de boas consequências se tornam mais prováveis; os seguidos de más consequências, menos prováveis.

Edward Thorndike colocava gatos em caixas-problema, com um trinco dentro e comida fora. No início, escapavam por acaso; após muitas tentativas, saíam cada vez mais rápido. Thorndike resumiu isso na lei do efeito: respostas seguidas de consequências satisfatórias se repetem; as seguidas de consequências desagradáveis, não. B. F. Skinner desenvolveu a ideia na década de 1930 com a câmara operante, hoje chamada de caixa de Skinner. Nela, um rato apertava uma alavanca ou um pombo bicava um disco para receber comida, enquanto um registrador contava cada resposta.

Mais e menos não significam bom e ruim

Nesse vocabulário, reforço sempre aumenta um comportamento, e punição sempre o reduz. Positivo significa acrescentar algo; negativo, retirar algo. Assim, há quatro combinações. Reforço positivo: acrescentar algo agradável (um petisco por um truque). Reforço negativo: retirar algo desagradável (o apito do cinto para). Punição positiva: acrescentar algo desagradável (uma bronca). Punição negativa: retirar algo agradável (perder tempo de uso do celular). O reforço negativo é o mais confundido com punição; lembre que ele aumenta a probabilidade do comportamento.

Colunas: algo acrescentado (+) ou retirado (−). Linhas: o comportamento aumenta (↑) ou diminui (↓). R+ reforço positivo, R− reforço negativo, P+ punição positiva, P− punição negativa.

Modelagem e esquemas de reforço

Um pombo não joga pingue-pongue por conta própria, então Skinner usou modelagem por aproximações sucessivas: recompensar uma aproximação inicial e exigir algo um pouco mais próximo a cada vez. Recompensas podem ser primárias, como comida, ou secundárias, como elogios, dinheiro ou fichas que ganham valor pela associação às primárias. A frequência também importa. Razão fixa reforça após um número definido de respostas (trabalho por peça). Razão variável reforça após um número imprevisível (jogos de azar), produzindo respostas frequentes e constantes, difíceis de extinguir. Intervalo fixo reforça a primeira resposta após um tempo definido; intervalo variável, após um tempo imprevisível (verificar novas mensagens).

Skinner afirmava que poderia transformar um pombo em jogador patológico com um esquema de razão variável. A OpenStax observa que um estudo de 2019 com ratos (Laskowski e colegas) não sustentou a ideia de que esses esquemas sozinhos causam problemas com jogos. Skinner também tratava a mente como caixa-preta, mas Edward Tolman mostrou que ratos que exploraram um labirinto sem comida por 10 sessões encontraram o caminho rapidamente quando ela apareceu. Tinham criado um mapa cognitivo sem recompensa, o que ele chamou de aprendizagem latente. Aprender não se resume ao que o reforço fixa.

Lei do efeitoThorndike: resultados satisfatórios tornam uma resposta mais provável
Reforço negativoRetirar algo desagradável, o comportamento aumenta
Punição negativaRetirar algo agradável, o comportamento diminui
Modelagem por aproximações sucessivasRecompensar aproximações sucessivas ao comportamento desejado
Razão variávelRecompensa após um número imprevisível de respostas; difícil de extinguir
Aprendizagem latenteTolman: aprendizagem sem recompensa, demonstrada depois
Pontos-chave
  • As consequências mudam a frequência de um comportamento.
  • O reforço aumenta o comportamento; a punição o reduz. Positivo acrescenta, negativo retira.
  • A modelagem constrói comportamentos complexos passo a passo.
  • Esquemas de razão variável produzem respostas frequentes e persistentes.
  1. Um cão recebe um petisco ao sentar e passa a sentar mais vezes.
    • Reforço positivo
    • Reforço negativo
    • Punição positiva
    • Punição negativa
  2. Você coloca o cinto para parar o apito e o coloca mais cedo da próxima vez.
    • Reforço positivo
    • Reforço negativo
    • Punição positiva
    • Punição negativa
  3. Um adolescente perde tempo de celular por chegar após o horário combinado e passa a desrespeitá-lo menos.
    • Reforço positivo
    • Reforço negativo
    • Punição positiva
    • Punição negativa
  4. Um estudante leva bronca por mandar mensagens na aula e passa a mandar menos.
    • Reforço positivo
    • Reforço negativo
    • Punição positiva
    • Punição negativa
  5. Qual esquema corresponde a uma máquina caça-níqueis?
    • Razão fixa
    • Razão variável
    • Intervalo fixo
    • Intervalo variável
  6. Um operário pago a cada 10 itens produzidos está em qual esquema?
    • Razão fixa
    • Razão variável
    • Intervalo fixo
    • Intervalo variável
  7. Dinheiro é um exemplo de...
    • Reforçador primário
    • Reforçador secundário
    • Estímulo incondicionado
    • Punição
  8. Ensinar um pombo a girar recompensando um quarto de volta, depois meia volta e depois uma volta inteira é...
    • Modelagem por aproximações sucessivas
    • Extinção
    • Generalização
    • Aprendizagem latente
  9. Um estudo de 2019 com ratos citado pela OpenStax confirmou que esquemas de razão variável sozinhos causam jogo patológico.
    • Sim
    • Não
  10. Os ratos sem recompensa de Tolman acharam a comida rapidamente quando ela apareceu. O que isso mostrou?
    • A aprendizagem pode ocorrer sem reforço
    • Ratos não aprendem labirintos
    • A punição funciona melhor
    • Só reflexos são aprendidos
Fontes deste curso (15)
  • OpenStax Psychology 2e (openstax.org/books/psychology-2e)
  • sections 6.2 Classical Conditioning (Pavlov 1927; Garcia and Koelling 1966; Rescorla and Wagner 1972; Watson and Rayner 1920)
  • 6.3 Operant Conditioning (Thorndike 1911 law of effect; Skinner 1938; reinforcement and punishment; shaping; primary and secondary reinforcers; schedules; Skinner 1953 on gambling; Laskowski et al. 2019; Tolman latent learning)
  • 6.4 Observational Learning (Bandura, Ross and Ross 1961; attention, retention, reproduction, motivation; Yamamoto, Humle and Tanaka 2013; Anderson et al. and Ferguson on media violence)
  • 10.1 Motivation (Deci, Koestner and Ryan 1999; Yerkes and Dodson 1908; Bandura 1994 self-efficacy; Maslow 1943 and its criticism; drive theory and habits)
  • 8.4 Ways to Enhance Memory. Lally, van Jaarsveld, Potts and Wardle (2010) European Journal of Social Psychology 40, 998-1009, doi 10.1002/ejsp.674 (96 volunteers, 12 weeks, 82 with enough data, 39 good model fits, median 66 days to 95% of plateau, range 18 to 254 days, missing one opportunity did not materially affect habit formation)
  • Hagger et al. (2016) Perspectives on Psychological Science 11, 546-573, PubMed 27474142 (23 labs, N = 2,141, d = 0.04, 95% CI -0.07 to 0.15)
  • Dang et al. multilab replication, PMC8186735 (12 labs, N = 1,775, d = 0.10)
  • Dunlosky et al. (2013) Psychological Science in the Public Interest 14(1)
  • PubMed 26173288 (10 techniques; high utility: practice testing, distributed practice; moderate: elaborative interrogation, self-explanation, interleaved practice; low: summarization, highlighting, keyword mnemonic, imagery for text, rereading)
  • Pashler, McDaniel, Rohrer and Bjork (2008) PSPI 9(3) 105-119, PubMed 26162104. Mueller and Oppenheimer (2014) Psychological Science, PubMed 24760141
  • Morehead, Dunlosky and Rawson (2019) Educational Psychology Review replication
  • Urry et al. (2021) Psychological Science direct replication of Study 1. Roediger and Karpicke (2006) Psychological Science 17(3)
  • Card intervals come from this site's own flashcard code (0, 1, 3, 7, 14, 30 days)
  • Everyday scenes are made up for teaching. General information only.

Data de verificação: 2026-10-17