b'\n_START_ARTICLE_\nCondicionamento operante\n_START_SECTION_\nLei do Efeito de Thorndike\n_START_PARAGRAPH_\nO condicionamento operante, tamb\xc3\xa9m chamado de condicionamento instrumental ou aprendizagem instrumental foi primeiramente estudado por Edward L. Thorndike (1874-1949), que observou o comportamento de gatos tentando escapar de "caixas problemas". Na primeira vez que os gatos eram colocados nas caixas, eles demoravam bastante tempo para escapar delas. Mas, com o passar do tempo, as respostas ineficientes foram diminuindo de frequ\xc3\xaancia, e as respostas mais efetivas aumentavam de frequ\xc3\xaancia, e os gatos agora conseguiam escapar em menos tempo e com menos tentativas. Em sua Lei do Efeito, Thorndike teorizou que as respostas que produziam consequ\xc3\xaancias mais satisfat\xc3\xb3rias, foram "escolhidas" pela experi\xc3\xaancia e portanto, aumentaram de frequ\xc3\xaancia. Algumas consequ\xc3\xaancias refor\xc3\xa7avam o comportamento, outras enfraqueciam-no". Thorndike produziu a primeira curva de aprendizagem com este procedimento. B. F. Skinner (1904-1990)formulou uma an\xc3\xa1lise mais detalhada do condicionamento operante utilizando de conceitos como refor\xc3\xa7amento, puni\xc3\xa7\xc3\xa3o e extin\xc3\xa7\xc3\xa3o. Seguindo as id\xc3\xa9ias de Ernst Mach, Skinner rejeitou as estruturas mediadores de Thorndike requeridas pela "satisfa\xc3\xa7\xc3\xa3o" e construiu um novo conceito de comportamento sem a utiliza\xc3\xa7\xc3\xa3o de tais refer\xc3\xaancias.\n_START_SECTION_\nPrinc\xc3\xadpios do Refor\xc3\xa7o\n_START_PARAGRAPH_\n\xc3\x89 importante ressaltar que refor\xc3\xa7o, ao contr\xc3\xa1rio do que pode pensar o senso comum, n\xc3\xa3o \xc3\xa9 uma simples recompensa. Para B. F. Skinner, refor\xc3\xa7o, pode ser qualquer evento que aumenta a frequ\xc3\xaancia de uma rea\xc3\xa7\xc3\xa3o precedente. Um refor\xc3\xa7o pode ser uma recompensa tang\xc3\xadvel. Pode ser um elogio ou uma aten\xc3\xa7\xc3\xa3o. Ou pode ser uma atividade, como poder usar o carro depois que a lou\xc3\xa7a estiver lavada, ou ter uma folga depois de uma hora de estudo.\n_START_SECTION_\nRefor\xc3\xa7os Prim\xc3\xa1rios e Secund\xc3\xa1rios\n_START_PARAGRAPH_\nOs refor\xc3\xa7os prim\xc3\xa1rios - como receber alimento ou ser aliviado de um choque el\xc3\xa9trico - s\xc3\xa3o intrinsecamente satisfat\xc3\xb3rios. Os refor\xc3\xa7os secund\xc3\xa1rios s\xc3\xa3o aprendidos. Se um rato numa caixa de Skinner aprende que uma luz sinaliza de maneira confi\xc3\xa1vel que a comida est\xc3\xa1 chegando, ele vai se empenhar em acender a luz. Dinheiro, boas notas, s\xc3\xa3o exemplos de refor\xc3\xa7os secund\xc3\xa1rios, cada um das quais est\xc3\xa1 ligado a recompensas mais b\xc3\xa1sicas.\n_START_SECTION_\nRefor\xc3\xa7os Imediatos e Retardados\n_START_PARAGRAPH_\nPara ilustrar bem como funcionam esses dois tipos de refor\xc3\xa7os, pode-se usar como exemplo um experimento de moldagem em que se condiciona um rato a apertar uma barra. Antes de efetuar esse comportamento "desejado", o rato faminto se empenhar\xc3\xa1 numa sequ\xc3\xaancia de comportamentos "indesejados" - arranhar, farejar, andar de um lado para o outro. qualquer desses comportamentos que preceda imediatamente o refor\xc3\xa7o de comida tem mais probabilidade de ocorrer de novo. Se voc\xc3\xaa retarda o refor\xc3\xa7o da press\xc3\xa3o da barra por mais 30 segundos, permitindo que outros comportamentos interfiram e sejam recompensados, n\xc3\xa3o ocorrer\xc3\xa1 praticamente qualquer aprendizagem de apertar a barra._NEWLINE_Humanos, ao contr\xc3\xa1rio de ratos, reagem a refor\xc3\xa7os bem mais retardados: o pagamento do sal\xc3\xa1rio no fim do m\xc3\xaas, a nota no fim do semestre, o trof\xc3\xa9u no campeonato._NEWLINE_Por\xc3\xa9m, refor\xc3\xa7os pequenos, mas imediatos, s\xc3\xa3o \xc3\xa0s vezes mais atraentes do que refor\xc3\xa7os grandes, mas retardados. Fumantes, alco\xc3\xb3latras e outros usu\xc3\xa1rios de drogas podem saber que seu prazer imediato \xc3\xa9 mais do que contrabalan\xc3\xa7ado pelos futuros efeitos perniciosos, mas  nem  por  isso  abandonam  seu v\xc3\xadcio.\n_START_SECTION_\nRefor\xc3\xa7o Positivo, Refor\xc3\xa7o Negativo e Puni\xc3\xa7\xc3\xa3o\n_START_PARAGRAPH_\nExistem duas formas de refor\xc3\xa7o: o positivo e o negativo. Ambas t\xc3\xaam como escopo ensinar e refor\xc3\xa7ar um determinado comportamento. O indiv\xc3\xadduo aprende qual o comportamento desej\xc3\xa1vel para alcan\xc3\xa7ar determinado objetivo. J\xc3\xa1 a puni\xc3\xa7\xc3\xa3o refor\xc3\xa7a qual o comportamento indesej\xc3\xa1vel, ou seja, que n\xc3\xa3o deve ser manifestado, para evit\xc3\xa1-la._NEWLINE_No refor\xc3\xa7o positivo, quando o comportamento desejado \xc3\xa9 alcan\xc3\xa7ado, um elemento de recompensa \xc3\xa9 adicionado. Para exemplificar o refor\xc3\xa7o positivo consideremos um experimento onde um rato \xc3\xa9 privado de comida. Quando este puxa determinada alavanca (comportamento desejado) \xc3\xa9 disponibilizado o alimento (elemento de recompensa). Com o passar do tempo o rato ao sentir fome ir\xc3\xa1 puxar a alavanca para receber o alimento. Desta forma o ser exposto ao refor\xc3\xa7o positivo aprende o comportamento correspondente._NEWLINE_J\xc3\xa1 no caso do refor\xc3\xa7o negativo, um elemento aversivo ao ser \xc3\xa9 retirado do ambiente como refor\xc3\xa7o para a continua\xc3\xa7\xc3\xa3o do comportamento. Como, por exemplo, uma m\xc3\xa3e que diz ao filho que ele n\xc3\xa3o precisar\xc3\xa1 lavar a lou\xc3\xa7a enquanto estiver mantendo seu quarto limpo. Ela retira um elemento aversivo para o filho (Lavar a lou\xc3\xa7a) para que ele continue com o comportamento de manter o quarto limpo._NEWLINE_A puni\xc3\xa7\xc3\xa3o, ao contr\xc3\xa1rio do refor\xc3\xa7amento negativo, (que visa a continua\xc3\xa7\xc3\xa3o do comportamento) tem como objetivo a extin\xc3\xa7\xc3\xa3o do comportamento, ou seja, com o passar do tempo, a probabilidade de ele ocorrer novamente diminui. O refor\xc3\xa7amento negativo n\xc3\xa3o \xc3\xa9 um evento punitivo. \xc3\x89 a remo\xc3\xa7\xc3\xa3o de um evento punitivo. Ambos utilizam de est\xc3\xadmulos aversivos._NEWLINE_As puni\xc3\xa7\xc3\xb5es podem ser de dois tipos: por adi\xc3\xa7\xc3\xa3o (puni\xc3\xa7\xc3\xa3o positiva), quando experi\xc3\xaancias aversivas s\xc3\xa3o adicionadas, ou por subtra\xc3\xa7\xc3\xa3o (puni\xc3\xa7\xc3\xa3o negativa), quando facilitadores do comportamento s\xc3\xa3o subtra\xc3\xaddos. Ambas as t\xc3\xa9cnicas levam a aquilo que chamamos de extin\xc3\xa7\xc3\xa3o._NEWLINE_A puni\xc3\xa7\xc3\xa3o pode acarretar uma s\xc3\xa9rie de problemas: esse tipo de estimula\xc3\xa7\xc3\xa3o aversiva, acarreta respostas do sistema nervoso, entendidas como ansiedade, depress\xc3\xa3o, baixa auto-estima. Al\xc3\xa9m do mais, o comportamento punido n\xc3\xa3o \xc3\xa9 esquecido, ele \xc3\xa9 suprimido. Pode ser que, ap\xc3\xb3s a estimula\xc3\xa7\xc3\xa3o aversiva ter sido eliminada, o comportamento volte a ocorrer. A crian\xc3\xa7a pode simplesmente aprender a n\xc3\xa3o dizer palavr\xc3\xb5es em casa, mas continuar a us\xc3\xa1-los em outros lugares._NEWLINE_Ela tamb\xc3\xa9m suprime o comportamento indesejado, mas n\xc3\xa3o guia a pessoa para um comportamento mais desej\xc3\xa1vel. A puni\xc3\xa7\xc3\xa3o diz o que n\xc3\xa3o fazer, o refor\xc3\xa7o diz o que fazer. Uma puni\xc3\xa7\xc3\xa3o combinada com um refor\xc3\xa7amento positivo de comportamentos desej\xc3\xa1veis \xc3\xa9 mais eficiente._NEWLINE_Em suma, a puni\xc3\xa7\xc3\xa3o r\xc3\xa1pida e segura pode ser eficaz, e pode de vez em quando causar menos dor do que o comportamento autodestrutivo que suprime. Mas ele pode reaparecer, se for poss\xc3\xadvel evitar a puni\xc3\xa7\xc3\xa3o. Esse est\xc3\xadmulo aversivo tamb\xc3\xa9m pode provocar efeitos colaterais indesej\xc3\xa1veis, como ansiedade e ensinar agressividade. Os psic\xc3\xb3logos preferem dar mais \xc3\xaanfase ao refor\xc3\xa7o positivo do que \xc3\xa0 puni\xc3\xa7\xc3\xa3o.\n_START_SECTION_\nPrograma\xc3\xa7\xc3\xb5es de Refor\xc3\xa7o\n_START_PARAGRAPH_\nUtilizando de esquemas de refor\xc3\xa7o cont\xc3\xadnuo, a aprendizagem ocorre rapidamente, mas, sem o refor\xc3\xa7o, a extin\xc3\xa7\xc3\xa3o do aprendido tamb\xc3\xa9m ocorre rapidamente. Na vida real, esquemas cont\xc3\xadnuos de refor\xc3\xa7o s\xc3\xa3o raros._NEWLINE_Nevin, em 1988, estudou que as rea\xc3\xa7\xc3\xb5es \xc3\xa0s vezes s\xc3\xa3o refor\xc3\xa7adas, \xc3\xa0s vezes n\xc3\xa3o. \xc3\x89 o que se chama de refor\xc3\xa7o parcial. A aprendizagem demora mais, no come\xc3\xa7o, mas ela \xc3\xa9 mais "resistente" \xc3\xa0 extin\xc3\xa7\xc3\xa3o. Imagine um pombo que aprendeu a bicar uma tecla para obter comida. quando o pesquisador vai suspendendo gradativamente a entrega de alimento, at\xc3\xa9 que ela ocorra s\xc3\xb3 de maneira rara e imprevis\xc3\xadvel, os pombos podem bicar 150.000 vezes sem recompensa. Com o refor\xc3\xa7o parcial, a esperan\xc3\xa7a flui eterna (esse \xc3\xa9 o princ\xc3\xadpio do "pombo supersticioso" de Skinner). \xc3\x89 o que ocorre por exemplo, em jogadores compulsivos, que continuam a jogar, mesmo sem nunca ganharem.\n_START_SECTION_\nEsquemas de Raz\xc3\xa3o Fixa\n_START_PARAGRAPH_\nRefor\xc3\xa7am o comportamento depois de um determinado n\xc3\xbamero de respostas. Empregados que trabalham em f\xc3\xa1bricas que recebem por produ\xc3\xa7\xc3\xa3o, s\xc3\xa3o refor\xc3\xa7ados de tal maneira quando s\xc3\xa3o recompensados.\n_START_SECTION_\nEsquemas de Raz\xc3\xa3o Vari\xc3\xa1vel\n_START_PARAGRAPH_\nRefor\xc3\xa7am a primeira resposta depois de uma quantidade imprevis\xc3\xadvel de respostas. \xc3\x89 o que ocorre com os jogadores e pescadores. A dificuldade de se extinguir tais comportamentos \xc3\xa9 de que o refor\xc3\xa7o aumenta \xc3\xa0 medida que aumentam as respostas._NEWLINE_As programa\xc3\xa7\xc3\xb5es de ritmo vari\xc3\xa1vel s\xc3\xa3o constantes. Dependem muito de certos factores.\n_START_SECTION_\nEsquemas de Intervalos Fixos\n_START_PARAGRAPH_\nRefor\xc3\xa7a a primeira resposta depois de um per\xc3\xadodo determinado. Como pessoas que verificam a caixa de correspond\xc3\xaancia quando a hora do carteiro passar se aproxima, os pombos bicam uma tecla com mais frequ\xc3\xaancia \xc3\xa0 medida que fica mais pr\xc3\xb3xima a hora esperada de recompensa, produzindo um padr\xc3\xa3o inconstante de "para-come\xc3\xa7a".\n_START_SECTION_\nEsquemas de Intervalo Vari\xc3\xa1vel\n_START_PARAGRAPH_\nRefor\xc3\xa7a a primeira resposta depois de intervalos de tempo vari\xc3\xa1veis. Como o question\xc3\xa1rio imprevis\xc3\xadvel que refor\xc3\xa7a o estudo, as programa\xc3\xa7\xc3\xb5es de intervalo vari\xc3\xa1vel tendem a ciliar respostas lentas e firmes. Caso os question\xc3\xa1rios tornem-se previs\xc3\xadveis, os estudantes come\xc3\xa7ar\xc3\xa3o a seguir o padr\xc3\xa3o de p\xc3\xa1ra-come\xc3\xa7a que caracteriza as programa\xc3\xa7\xc3\xb5es de intervalo fixo (em outras palavras, estudar\xc3\xa3o apenas na v\xc3\xa9spera).\n_START_SECTION_\nO Uso dos modelos Animais\n_START_PARAGRAPH_\nUm behaviorista utiliza o comportamento dos animais n\xc3\xa3o como forma de poder estudar as particularidades que os animais possuem quanto ao seus comportamentos, mas para procurar leis universais que regem o comportamento dos organismos. Para Skinner (1956), os esquemas de refor\xc3\xa7o do condicionamento operante s\xc3\xa3o universais. Importa pouco, disse ele, que rea\xc3\xa7\xc3\xa3o, que refor\xc3\xa7o ou que esp\xc3\xa9cie voc\xc3\xaa usa. O efeito de determinada programa\xc3\xa7\xc3\xa3o de refor\xc3\xa7o \xc3\xa9 quase o mesmo: "Pombo, rato, macaco, o que \xc3\xa9 o qu\xc3\xaa? N\xc3\xa3o importa\xe2\x80\xa6 O comportamento apresenta caracter\xc3\xadsticas espantosamente similares."'