PREE: Partial Reinforcement Extinction Effect

[Gjest]

Inspirert av Tabris: (Hentet fra Store Norske Leksikon):
I klassisk betinging etableres den betingede refleksen ved at stimulus etterfølges av ubetinget stimulus. Gis senere den betingede stimulusen alene, vil den betingede responsen gradvis avta (utslokkes). I operant eller instrumentell betinging foregår ekstinksjon ved at responser som tidligere er blitt etterfulgt av belønning, ikke lenger får slik belønning. Ekstinksjon skyldes ikke glemsel, men representerer snarere ny læring.

Forskning har vist at ekstinksjon foregår langsommere hvis innlæringen har vært preget av «usikre» læringsbetingelser. For eksempel vil belønning av og til under innlæringen av en operant respons føre til at denne responsen blir vanskeligere å ekstingvere enn om responsen hadde vært belønnet hver gang i innlæringsfasen. Dette fenomenet omtales som PRE ("partial reinforcement extinction effect"; partiell forsterkning ekstinksjonseffekt).

Med andre ord: Hvis man i innlæringen av en adferd belønner HVER gang den gjøres korrekt, vil denne adferden kunne utslukkes lettere/raskere enn hvis adferden er innlært med varierende belønningsfrekvens. (Litt mer om fenomenet)

(Ganske interessant fenomen syns jeg )

Uenig i at det er slik? Hvorfor?
Praktisk konsekvens for deg i inntreningen av hund? Er dette noe du som fører er bevisst på?

[Tabris]

Jeg har også alltid ment at det er slik. For meg virker det logisk da en hund som får variabel belønning vil være vant med at belønning av og til uteblir. Det vil dermed ta lenger tid før den forstår at den ikke lenger kommer til å få noen belønning.

Jeg bruker ekstinksjon ved shaping og når jeg øker kriteriene. Har Ozu klart å rygge fire skritt flere ganger på rad, så får han nå ikke belønning før han rygger fem skritt.

Masse spennende tråder her om dagen!

[Helianthus]

Inspirert av Tabris: (Hentet fra Store Norske Leksikon):

I klassisk betinging etableres den betingede refleksen ved at stimulus etterfølges av ubetinget stimulus. Gis senere den betingede stimulusen alene, vil den betingede responsen gradvis avta (utslokkes). I operant eller instrumentell betinging foregår ekstinksjon ved at responser som tidligere er blitt etterfulgt av belønning, ikke lenger får slik belønning. Ekstinksjon skyldes ikke glemsel, men representerer snarere ny læring.

Forskning har vist at ekstinksjon foregår langsommere hvis innlæringen har vært preget av «usikre» læringsbetingelser. For eksempel vil belønning av og til under innlæringen av en operant respons føre til at denne responsen blir vanskeligere å ekstingvere enn om responsen hadde vært belønnet hver gang i innlæringsfasen. Dette fenomenet omtales som PRE ("partial reinforcement extinction effect"; partiell forsterkning ekstinksjonseffekt).

Med andre ord: Hvis man i innlæringen av en adferd belønner HVER gang den gjøres korrekt, vil denne adferden kunne utslukkes lettere/raskere enn hvis adferden er innlært med varierende belønningsfrekvens. (Litt mer om fenomenet)

(Ganske interessant fenomen syns jeg )

Uenig i at det er slik? Hvorfor?

Praktisk konsekvens for deg i inntreningen av hund? Er dette noe du som fører er bevisst på?

På stående fot ser jeg flere læringssituasjoner hvor det er viktig å ha ekstinksjon i bakhodet:

1) At utslukningen skjer saktere dersom atferden er på variabelt forsterkningsskjema (blir vel korrekt å si) har en stor konsekvens for om feks hunden vil slutte å tigge ved bordet og hvor fort det eventuelt går. Mange glemmer seg å gir hunden mat ved bordet innimellom (variabelt forsterkningsskjema) noe som faktisk lærer hunden å bli flinkere til å tigge. Så, dette betyr to ting for meg:

a) dersom jeg vil bruke ekstinksjon så må jeg først belønne hunden masse for å gjøre en ting og så plutselig slutte å belønne og aldri belønne atferden igen.

b) variabelt forsterkningsskjema er veldig viktig for å lære hunden å utføre atferder over tid eller økt intensitet eller avstand.

2) Ekstingsjons-bursten brukes aktivt til å få hunden til å prøve hardere/bedre/lengre/nye atferder

[Tabris]

a) dersom jeg vil bruke ekstinksjon så må jeg først belønne hunden masse for å gjøre en ting og så plutselig slutte å belønne og aldri belønne atferden igen.

Nå superkverulerer jeg fordi jeg synes dette er kjempeinteressant:

Dette punktet er med litt forbehold. For hvis du øker kriteriene og hunden faller ut og ikke forstår hva du vil, så må du senke kriteriet igjen. Dvs du må være villig til å belønne atferd du har sluttet å belønne for en kort periode hvis hunden ikke forstår hva du vil, evt hvis det er nye forstyrrelser eller lenge siden du har trent på nettopp den atferden.

[Guest vivere]

Variabel forsterkning og utslukking er da kjent og kjært i hundetrening

[Gjest]

Variabel forsterkning og utslukking er da kjent og kjært i hundetrening

Ja, men jeg tror ikke der er veldig mye kunnskap/bevissthet rundt de læringsmekanistiske prinsippene som styrer EKSTINKSJON.

Vi lærer at man skal etterstrebe en variabel belønnigsfrekvens fordi det styrker sannsynligheten for at hunden opprettholder adferden. Samtidig advares det jo ikke mot det mtp muligheten for senere ekstinksjon, om DET er ønskelig av en eller annen grunn.

Med andre ord: man risikerer da "i verste fall"(om så...) at hunden lærer for livet, og senere ikke kan avlæres. (ifølge dette prinsippet). Eller hur?

[Guest vivere]

Tja? Hva er formålet med variabel forsterkning og hva er formålet med ekstinksjon lurer nå jeg på i mitt stille sinn

[Helianthus]

Tja? Hva er formålet med variabel forsterkning og hva er formålet med ekstinksjon lurer nå jeg på i mitt stille sinn

Nå må du utdype hva du mener med disse spørsmålene som kanskje ikke er spørsmål i det hele tatt? Det er vel ikke nødvendigvis noe "formål" i det hele tatt, bare en beskrivelse av hva som skjer. Eller hva mener du de har som formål?

Faktum er at mange atferder er på variable forsterkningskjema helt uten at vi er klar over det, og ekstinksjon skjer også uten at vi er klar over det i mange tilfeller. Hvis man har som mål å ha litt kontroll på hva man lar hunden lære og ikke lære, så er det absolutt en fordel å ha en viss oversikt over hva disse begrepene innebærer.

[Guest vivere]

Nå må du utdype hva du mener med disse spørsmålene som kanskje ikke er spørsmål i det hele tatt? Det er vel ikke nødvendigvis noe "formål" i det hele tatt, bare en beskrivelse av hva som skjer. Eller hva mener du de har som formål?

Faktum er at mange atferder er på variable forsterkningskjema helt uten at vi er klar over det, og ekstinksjon skjer også uten at vi er klar over det i mange tilfeller. Hvis man har som mål å ha litt kontroll på hva man lar hunden lære og ikke lære, så er det absolutt en fordel å ha en viss oversikt over hva disse begrepene innebærer.

I utgangspunktet mener jeg - og det kan selvfølgelig være helt feil - at variabel forsterkning benyttes når man ønsker å oppnå noe positivt evt øke progresjonen i treningen. Ekstinksjon når man ønsker å fjerne en tillært atferd ved at hunden ikke oppnår det gode den forventer. Eksempel på det siste som vel vi begge har brukt er kjøkkenbenken, indrefileten og hundens ønske om å hoppe opp for å nå fileten. Dersom det ikke er noe på benken vil atferden med å sjekke benken avta og kanskje helt forsvinne. Samtidig kan ekstinksjon være en felle - om man glemmer å fjerne fileten en eneste gang brytes atferden dersom hunden oppdager at det ligger en filet på benken. Er vi enige?