第７章 LEARNING AND CONDITIONING 学習と条件づけ
1 learning Learning may be defined as a relatively permanent change in behavior that occurs as the result of experience. Behavior changes that are due to maturation or to temporary conditions of the organism (such as fatigue or drug-induced states) are not included. Not all cases of learning are the same, though. There are two basic kinds of learning: non-associative learning and associative learning. 学習 学習（learning）は遂行の結果として生じる比較的永続的な行動変化と定義さ れる。すなわち。成熟や生体の一時的な条件（疲労や薬物摂取状態のような） による行動変化は含まれない。もっとも，学習についてのすべての例が同じ というわけではなく，２種類の基礎的な学習形態，つまり非連合学習と連合 学習がある。
2 nonassociative learning and associative learning Nonassociative learning involves learning about a single stimulus, and it includes habituation and sensitization. Associative learning is much more complicated than nonassociative learning, because it involves learning relationships among events. It includes classical conditioning, instrumental conditioning, and complex learning, among others. 非連合学習と連合学習 非連合学習(non-associative learning)には単一の刺激に関する学習がかかわ っており，馴化と鋭敏化がある。連合学習(associative learning)さまざまな事 象間の関係を学習することにかかわることから，非連合学習よりはるかに複 雑である。連合学習としてはとくに古典的条件づけ，道具的条件づけ，およ び複合学習があげられる。
3 habituation and sensitization 1/2 Habituation is a type of non-associative learning that is characterized by a decreased behavioral response to an innocuous stimulus. For example, the sound of a horn might startle you when you first hear it. But if the horn toots repeatedly in a short time, the amount that you startle to each sound progressively decreases. In contrast, sensitization is a type of nonassociative learning whereby there is an increase in a behavioral response to an intense stimulus. Sensitization typically occurs when noxious or fearful stimuli are presented to an organism. 馴化と鋭敏化 1/2 馴化(habituation)とは，非連合学習の種類の一つで。無害の刺激に対する行 動反応の低下が特徴である。たとえば，警笛の音を最初に耳にしたときには ぎょっとすると思われる。しかし，短期間のうちにその警笛が繰り返し鳴れ ば，その音が聞こえるたびにぎょっとする程度は次第に小さくなる。これに 対して鋭敏化(sensitization)とは，強烈な刺激に対して行動反応が増大する様 式の非連合学習である。通常。鋭敏化は生体に有害であるか恐ろしい刺激を 与えた場合に生じる。
4 habituation and sensitization 2/2 For example, the acoustic startle response to a horn is greatly enhanced if you enter a dark alley right before the loud sound. Both habituation and sensitization are relatively short-lived, lasting for minutes to hours. However, providing many spaced presentations of stimuli can yield longerlasting learning. 馴化と鋭敏化 2/2 たとえば，暗い路地に入った直後に大きな音で鳴る警笛を耳にすれば，警笛 に対する聴覚の驚愕反応は大幅に増強される。馴化および鋭敏化はいずれも 比較的一時的なもので，数分間から数時間持続するに留まる。しかし，間隔 をあけて何度も刺激を提示した場合には，長時間持続する学習が生じる。
associative learning: classical and instrumental conditioning, and complex learning 1/2 Associative learning is much more complicated than nonassociative learning, because it involves learning relationships among events. It includes classical conditioning, instrumental conditioning, and complex learning, among others. Classical and instrumental conditioning both involve forming associations—that is, learning that certain events go together. 5 連合学習：古典的条件づけ，道具的条件づけ，複合学習 1/2 連合学習（associative learning）は，さまざまな事象間の関係を学習するこ とにかかわることから，非連合学習よりはるかに複雑である。連合学習とし てはとくに古典的条件づけ，道具的条件づけ，および複合学習があげられる。 古典的条件づけと道具的条件づけは両者とも連合形成，すなわち，一定の諸 事象が相伴うような学習を必要とする。
associative learning: classical and instrumental conditioning, and complex learning 2/2 6 In classical conditioning, an organism learns that one event follows another: for example, a baby learns that the sight of a breast will be followed by the taste of milk. In instrumental conditioning, an organism learns that a response it makes will be followed by a particular consequence: for example, a young child learns that striking a sibling will be followed by disapproval from his or her parents. Complex learning involves something in addition to forming associations—for example, learning the route from your dorm room to the campus movie theater. Of course, there cannot be learning without memory. 連合学習：古典的条件づけ，道具的条件づけ，複合学習 2/2 古典的条件づけでは，たとえば，赤ちゃんが乳房を見ておっぱいの味が伴うことを学習 するというように，生体はある事象にもう一つの事象が伴うことを学習する。道具的条 件づけでは．たとえば，幼い子どもがきょうだいをたたくと両親から非難されることを 学習するというように．生体はある特定の結果が伴うことになる反応を学習する。複合 学習は，たとえば．自分の寮の部屋から大学構内の映画館までの道筋を学習するという ように，逮合形成以外にも何かを必要としている。もちろん，記憶することなしに学習 することはあり得ない。
classical conditioning 7 Classical conditioning is a learning process m which a previously neutral stimulus becomes associated with another stimulus through repeated pairing with that stimulus. The study of classical conditioning began in the early years of the 20 th century, when Ivan Pavlov, a Russian physiologist, turned his attention to learning. Pavlov noticed that a dog began to salivate at the mere sight of a food dish. Although any dog will salivate when food is placed in its mouth, this dog had learned to associate the sight of the dish with the taste of food. Pavlov had happened upon a case of associative learning, in which relationships between events are learned, and he decided to see whether a dog could be taught to associate food with other things, such as a light or a tone. 古典的条件づけ(classical conditioning)は，もともとは中性刺激であったものが別の剌 激とー対で繰り返し提示されることによって，その刺激と連合されるようになる学習過 程である。ロシアの心理学者イワン・パブロフ(Ivan Pavlov)が学習に注意を向けた 20世 紀初頭に始まった。パブロフは，イヌが食器皿を見ただけで，よだれを垂らし始めるこ とに気がついた。どんなイヌでも食物が口の中に入れられるとよだれを垂らすが，この イヌは食器皿を見て食物の味に連合させることを学習していた。パブロフは，思いがけ なく連合学習の実例を見つけ，イヌに食物を光や音のようなほかのものに連合させられ るように教えられるかどうかを，調べようと決心した。
unconditioned response and unconditioned stimulus 8 A researcher turns on a light in a window in front of the dog (or, in some forms of the experiment, rings a bell or turns on a metronome). After a few seconds, some meat powder is delivered to the pan and the light is turned off. The dog is hungry, and the recording device registers copious salivation. This salivation is an unconditioned response (UCR, an innate or unlearned response elicited by the UCS), for no learning is involved in order for meat to evoke salivation. By the same token, the meat powder is an unconditioned stimulus (UCS, a stimulus that automatically elicits a response without prior conditioning). After a few presentations of the light followed by meat powder, the dog will salivate in response to the light, even if no meat powder is delivered. 無条件反応と無条件刺激 研究者はイヌの眼前の窓に光を当てる（実験によってはベルを鳴らしたり，メトロノー ムを鳴らしたりする）。数秒後，肉粉が食器皿に与えられ，そして光が消される。イヌ は空腹であり，そして記録装置によって唾液分泌が自動的に記録される。肉が唾液分泌 を引き起こすのにかかわっている学習はないため，この唾液分泌は無条件反応 (unconditioned response: UCR, UCSによって誘発される，生得的ないしは学習しない で元からある反応）である。この唾液分泌は学習を必要としないということで無条件反 応（UCR）である。また，肉粉は無条件刺激(unconditioned stimulus: UCS, 事前に条 件づけしなくとも自動的に反応を誘発する刺激）である。光を当てた後に肉粉を与える ということを数回繰り返すと，イヌは，肉粉が与えられなくとも光に反応して唾液を分 泌する。
9 conditioned response After a few presentations of the light followed by meat powder, the dog will salivate in response to the light, even if no meat powder is delivered. This anticipatory salivation is a conditioned response (CR, learned response), and the light is a conditioned stimulus (CS, learned stimulus). In other words, the CR is a learned response evoked by a CS that has come to predict the occurrence of the UCS. 条件反応 光を当てた後に肉粉を与えるということを数回繰り返すと，イヌは，肉粉が 与えられなくとも光に反応して唾液を分泌する。この予期的唾液分泌は条件 反応(conditioned response, CR, 学習された反応）で，光は条件刺激 (conditioned stimulus, CS， 学習された剌激）である。別の言い方をすれば， CRとはUCSの出現を予測するようになるCSによって引き起こされる学習さ れた反応ということである。
10 extinction and spontaneous recovery If the UCS is subsequently omitted, the CR will gradually diminish, and extinction occurs. Extinction represents learning that the CS no longer predicts the UCS. Extinction is not the "unlearning" of the original CS-UCS association; in fact, extinction involves the formation of a new CS-"no UCS" memory that inhibits expression of the CS-UCS association. The preservation of the original CS-UCS association after extinction training is reflected by spontaneous recovery. The original CR returns as time passes following extinction. 消去と自発的回復 無条件刺激(unconditioned stimulus: UCS)が繰り返し省略されると，その反 応は徐々に減少することになる。これは消去(extinction)と呼ばれ，CS がもは やUCSを予測させるものでないことを学習することである。消去は，元のCSUCS連合の「学習解消」ではない。むしろ消去にはCS-UCS連合の表出を抑 制する新たなCS-no UCS記憶の形成を要する。消去訓練後も，元のCS-UCS 連合が保持されていることは，自発的回復(spontaneous recovery) によって示 される。すなわち，消去後時間が経過しても，元のCRが復活する。
11 second-order conditioning 1/2 Recall the example of a dog exposed to a light (conditioned stimulus: CS) followed by food (unconditioned stimulus: UCS), where the light comes to elicit a conditioned response. Once the dog is conditioned, the light itself acquires the power of a UCS. If the dog is now put in a situation in which it is exposed to a tone (CS 2) followed by the light (but no food) 01 each trial, the tone alone will eventually elicit a CR, even though it has never been paired with food. (There must also be other trials in which the light is again paired with food; otherwise, the originally conditioned relation between light and food will be extinguished. ) 二次条件づけ 1/2 光（conditioned stimulus: CS）の後に続いて食物（unconditioned stimulus: UCS）に さらされることで，その光が条件反応を誘発するようになったイヌの例を思い起こして みよう。イヌが一度条件づけられると，その光そのものがUCSの効力を獲得する。そう いうわけで今度は，もしそのイヌが各試行のたびに．ある音(CS 2)の後に続いて，その 光（しかし食物はない）にさらされる状況に置かれると，その音はたとえ食物とまった く組み合わせられなくても，ついにはその音だけで条件反応を誘発するようになる（そ れに別の試行において，光は再び食物と組み合わせられなければならない。そうでない と，最初に条件づけられた光と食物との結合が失われてしまう）。
12 second-order conditioning 2/2 The ability of the tone to produce a CR after being paired with the light, which itself predicts the UCS, is called second-order conditioning. In secondorder conditioning, a CS comes to produce a CR, despite never having been paired with an UCS. The existence of second-order conditioning greatly increases the scope of classical conditioning, especially in humans, for whom biologically significant UCSs occur relatively infrequently. 二次条件づけ 2/2 音とそれ自体がUCSを予測させる光とを対にした後，その音によってCRを引 き起こすことができることを二次条件づけ（second-order conditioning）と呼 ぶ。二次条件づけでは，CSがUCSと対になっていなくともCRを引き起こす ようになる。このような二次条件づけの存在は，とくに人間に対する古典的 条件づけの機会を大いに増やすことになる。というのは，人間の場合，生物 学的に重要なUCSがかなり頻繁に生じるからである．
13 generalization and discrimination 1/2 The more similar the new stimuli are to the original CS, the more likely they are to evoke the conditioned response. This principle, called generalization, accounts in part for an individual's ability to react to novel stimuli that are similar to familiar ones. A process that is complementary to generalization is discrimination. Generalization is a reaction to similarities, and discrimination is a reaction to differences. 般化と弁別 1/2 新たな刺激が最初のCSに類似していればいるほど，それらは条件反応を引き 起こすようになる。この法則は般化(generalization)と呼ばれ，部分的になじ み深い刺激と類似の新奇刺激に反応する個体の能力とみなされている。般化 と補い合う過程が弁別である。般化は類似性に対する反応であるが，弁別 (discrimination)は相違性に対する反応である。
14 generalization and discrimination 2/2 Generalization and discrimination occur frequently in everyday life. A young child who has learned to associate the sight of her pet dog with playfulness may initially approach all dogs. Eventually, through discrimination, the child may expect playfulness only from dogs that look like hers. The sight of a threatening dog has come to inhibit the child's response to approaching dogs. 般化と弁別 2/2 般化と弁別は日常生活においても生じる。家で飼っているペットのイヌの姿 とじゃれ合いの連合を学習した幼児は，最初のうちはどんなイヌにも接近す るかもしれない。しかし，いつかは弁別によって，ペットのイヌに似たイヌ からだけじゃれ合いを期待するようになるだろう。怖そうなイヌの姿は，イ ヌに接近するその子の反応を抑制するようになるわけである。
15 excitatory conditioning is called the ability of a CS to increase the probability or magnitude of a given behavior. Another important form of learning in classical conditioning is inhibitory conditioning, the ability of a CS to decrease the probability or magnitude of a behavioral response. Inhibitory conditioning is conceptually important because it indicates that associative learning is bidirectional and can cause either increases or decreases in behavior. 興奮条件づけ ある行動の発現可能性や強度を増大させるCSの力を興奮条件づけ(excitatory conditioning）と呼ぶ。古典的条件づけでもう一つ重要な学習形態は，行動的 反応の発現可能性や強度を低滅させるCSの力で，制止条件づけ（inhibitory conditioning)である。制止条件づけは，連合学習が双方向性であり，行動の 増加も減少もさせられることを示していることから，概念的に重要なもので ある。
16 instrumental conditioning In instrumental conditioning, curtain responses are learned because they operate on, or affect, the environment. An organism does not just react to stimuli, as in classical conditioning, but also behaves in ways designed to produce certain changes in its environment. That is, the organism's behavior is instrumental in obtaining desired outcomes. 道具的条件づけ ある反応が環境に作用し影響を及ぼすので、それらの反応は学習される。す なわち生体は，古典的条件づけのように，ただ単に刺激に対して反応するの ではなく，環境にある変化を生じさせるやり方で振る舞うのである。すなわ ち，生体の行動は，望み通りの結果を得るための手段になるということである。
17 law of effect As seen so-called a Skinner box or operant chamber used by researchers conceptualizing instrumental conditioning, the cat's performance improves gradually over a series of trials. The cat appears to be engaging in trial-anderror behavior, and when a reward immediately follows one of those behaviors, the learning of the action is strengthened. Thorndike referred to this strengthening as the law of effect. He argued that in instrumental learning, the law of effect selects from a set of random responses only those that are followed by positive consequences. 効果の法則 道具的条件づけを概念化する研究に用いられた「スキナー箱」でみられるよ うに，ネコの行動は試行の度に徐々に改善される。洞察というよりもむしろ 試行錯誤の行動に従事しているようであり，ある行動の直後に報酬が伴うと， その行動の学習が強められる。ソーンダイクは。行動を強めるこの作用を称 して効果の法則(law of effect)と呼んだ｡彼は，道具的学習における効果の法則 とは，任意の一群の行動の中から肯定的な後続結果を伴うような反応だけを 選択することであると主張した。
18 reinforcement 1/2 Reinforcement refers to the process whereby the delivery of an appetitive stimulus or the removal of an aversive stimulus increases the probability of a behavior. Note that there may be either a positive contingency between the behavior and reinforcement (for example, bar pressing is followed by food) or a negative contingency (for example, bar pressing terminates or prevents shock). Positive reinforcement describes a behavior that produces an appetitive stimulus, and negative reinforcement occurs when behavior prevents an aversive stimulus. 強化 1/2 強化（reinforcement）とは，欲求刺激を入手するか嫌悪刺激を取り除くこと によってある行動の生起確率が増加する過程を意味する。行動と強化との間 には正の随伴性（たとえば，てこを押すと食べ物が出てくること）が認めら れることもあれば，負の随伴性（たとえば，てこを押すことによって電撃を 終わらせるか起こらないようにすること）が認められることもある。正の強 化(positive reinforcement)とは欲求刺激を引き起こす行動であり，負の強化 (negative reinforcement)とは行動によって嫌悪刺激が生じないようにする場 合に生じる。
19 reinforcement 2/2 For example, the likelihood that you will remember to bring your sweetheart flowers on Valentine's Day will increase if your boyfriend or girlfriend is especially affectionate when you remember to give him or her flowers. 強化 2/2 たとえば，バレンタインデーに恋人に花を贈ろうと思った際に，その相手が とくに優しく接してくれていると，当日忘れずに花を持っていく可能性が高 くなる。
20 punishment and omission training 1/2 Punishment is the converse of reinforcement. It is the process by which delivery of an aversive stimulus or the removal of an appetitive stimulus decreases the probability of a behavior. Again, note that there may be either a positive contingency between the behavior and punishment (such as bar pressing is followed by shock) or a negative contingency (such as bar pressing terminates or prevents food delivery). In the first case, behavior produces an aversive stimulus, and in the second case, which is also called omission training, behavior prevents an appetitive stimulus. 罰と除外訓練 1/2 罰（punishment）は強化の逆のものである。罰とは，嫌悪刺激を与えるか欲 求刺激を取り除くことによってある行動の生起確率が減少する過程のことで ある。この場合も，行動と罰には正の随伴性（たとえば，てこを押すと電撃 が生じるというようなこと）が認められることもあれば，負の随伴性（たと えば，てこを押すと食べ物の供給が打ち切られたり妨げられたりというよう なこと）が認められることもある。最初の例の場合には，行動が嫌悪刺激を 引き起こし，そして 2番目の例の場合には，行動が欲求刺激を妨げる。これは 除外訓練（omission training）と呼ばれる。
21 punishment and omission training 2/2 For example, the likelihood that you bring your date chocolate on Valentine's Day will de crease if he or she gets mad at you for offering the caloric gift. Likewise, the probability that you argue with your parents will decrease if they ground you for the evening when you do. In the former example, an aversive stimulus (anger) decreases behavior (chocolate giving), and in the latter example the removal of an appetitive stimulus (going out at night) also decreases behavior (arguing with parents). Reinforcement produces "good" outcomes, and punishment produces "bad" outcomes. 罰と除外訓練 2/2 たとえば，もし彼ないしは彼女がカロリーの高い食べ物をごちそうしたと言 ってあなたに腹を立てたとすると，バレンタインデーにその相手にチョコ レートを贈る可能性は低くなる。同じように，両親と口論していて夜間の外 出を禁止された場合には，両親と口論する確率は低くなる。前者の例では， 嫌悪刺激（怒り）が行動（チョコレートを贈ること）を低下させ，後者の例 では欲求刺激（夜間に外出すること）の除去が行動（両親と口諭すること） を低下させている。強化は「良い」結果をもたらし，罰は「悪い」結果をも たらす。
22 shaping To train a dog to get the mail, you can give the animal a food reinforcer each time it approaches the door, requiring it to move closer and closer to the mail for each reinforcer until finally the dog mouths and grabs the mail. This technique, called shaping, is reinforcing only variations in response that deviate in the direction desired by the experimenter. シェーピング 郵便物を取ってくるようにイヌを訓練するためには，イヌが玄関のドアに近 づくたびに食物強化子を与え，ついにはイヌが郵便物を口にくわえるように なるまで，郵便物への接近に対して強化子を与えるようにすることが必要で ある。この技法はシェーピング(shaping)と呼ばれ，実験者の望んだ方向に沿 う反応の変異だけを強化することである。
conditioned reinforcer 23 If instrumental conditioning occurred only with primary reinforcers, it would not occur very often because primary reinforcers are not that common. However, virtually any stimulus can become a secondary or conditioned reinforcer, which is a stimulus that has been consistently paired with a primary reinforcer. Our lives abound with conditioned reinforcers. Two of the most prevalent are money and praise. Presumably, money is a powerful reinforcer because it has been paired so frequently with so many primary reinforcers— we can buy food, drink, and comfort, to mention just a few of the obvious things. And mere praise can sustain many activities without even the promise of a primary reinforcer. 条件性強化子 もし，道具的条件づけが一次性強化子だけでしか起こらないなら，一次性強化子はそん なにいつでもどこでも随伴することはないので，条件づけは非常に少なくなる。しかし ながら，ほぼどんな刺激も『二次性強化子』ないしは条件性強化子(conditioned reinforcer)になることができ，それは一次性強化子と一貫して対提示される刺激である。 私たちの生活には条件性強化子が豊富にある。最も優勢な二つは貨幣と称賛である。貨 幣は非常に多くの一次性強化子とかなり頻繁に組み合わせられるので，おそらく強力な 強化子になる。具体的な物をいくつかあげるとすれば，貨幣で食べ物，飲み物，生活を 快適にする物を買うことができる。そして，たとえ一次性強化子が伴う見込みがなくて も，称賛だけで多くの行動を維持することもできる。
24 ratio schedules 1/2 When reinforcement occurs only some of the time, we need to know exactly how it is scheduled—after every third response? After every 5 seconds? It turns out that the schedule of reinforcement determines the pattern of responding. There are four basic schedules of reinforcement schedules are called ratio schedules, because reinforcement depends on the number of responses the organism makes. It's like being a factory worker who gets paid for piecework. 比率スケジュール 1/2 強化がもっぱらある時点で行われるなら，それはどのように予定されている のか，すなわち，3回目の反応ごとなのか，5秒ごとなのか，私たちは正確に 知る必要がある。強化スケジュールは，反応様式を決定することになる。強 化が生体のなす反応数に基づくことから，比率スケジュール（ratio schedules ）と呼ばれるものもある。それは，出来高払いで支払いを受ける労働者の場 合に似ている。
25 ratio schedules 2/2 The ratio can be either fixed or variable. On a fixed ratio schedule (called an FR schedule), the number of responses that have to be made is fixed at a particular value. If the number is 5 (FR 5), 5 responses are required for reinforcement; if it is 50 (FR 50), 50 responses are required; and so on. 比率スケジュール 2/2 比率は固定でも変動で構わない。定比率スケジュール(fixed ratio schedules： 「FRスケジュール」）では，強化がなされるまでの反応数が一定の値に固定 される。もし，その値が5(FR 5）なら，強化までに 5反応が必要になり， 50(FR 50）なら50反応が必要になるという具合である。
26 pause in responding In general, the higher the ratio, the higher the rate at which the organism responds, particularly when the organism is initially trained on a relatively low ratio (say, FR 5) and then is continuously shifted to progressively higher ratios, culminating, say, in FR 100. It is as if our factory worker initially got $5 for every 5 hems sewn, but then times got tough and he needed to do 100 hems to get $5. But perhaps the most distinctive aspect about behavior under an FR schedule is the pause in responding right after the reinforcement occurs. In sum, it is hard for the factory worker to start on a new set of hems right after he has just finished enough to obtain a reward. 反応休止 一般に，生体は最初のうちはかなり低い比率（FR 5のような）で訓練され， それから次第に高い比率へ段階的に変えられ，ついにはFR 100というように より高い比率にすれば，その生体の反応率はますます高くなる。それはあた かも， 場の従業員が最初のうちは，へりを 5枚縫うたびに 5ドル受け取って いたのに，景気が悪くなって，5ドル稼ぐのにへりを 100枚縫わなければなら ないようなものである。しかし，FRスケジュール下での行動の最も際立つ特 徴は，強化が行われた直後に，反応休止(pause in responding)があることで ある。つまり，報酬を得るのに十分な量を縫い終えたすぐ後に，新しいへり 一組を縫い始めるのは，従業員にとっては縫しいことである。
27 variable ratio schedule 1/2 On a variable ratio schedule (a VR schedule), the organism is still reinforced only after making a certain number of responses, but that number varies unpredictably. In a VR 5 schedule, the number of responses needed for reinforcement may sometimes be 1, at other times 10, with an average of 5. Unlike the behavior that occurs under FR schedules, there are no pauses when the organism is operating under a VR schedule, presumably because the organism has no way of detecting how far it is from a reinforcement. 変比率スケジュール 1/2 変比率スケジュール（variable ratio schedule : VRスケジュール）は，生体が 一定の反応数に達した後にだけ強化されるが，その数は予測できないように 変動する。VR 5スケジュールでは，強化に必要な反応数があるときは１，別 のときには 10，そして平均5ということになる。FRスケジュールのもとで生 じる行動と異なり，VRスケジュール下での生体の行動には反応休止がない。 なぜなら生体は強化のないときを見破る術を持っていないからである。
28 variable ratio schedule 2/2 A good example of a VR schedule in everyday life is the operation of a slot machine. The number of responses (plays) needed for reinforcement (payoff) keeps varying, and the operator has no way of predicting when reinforcement will occur. VR schedules can generate very high rates of responding. 変比率スケジュール 2/2 日常生活での好例は，スロットマシンの操作である。強化（儲け）に必要な 反応数（試行）は変化し続け，スロットマシンをやっている人は強化がいつ 起こるか予測する術を持っていない。それゆえ，VRスケジュールは，非常に 高率の反応を引き起こす。
29 interval schedule 1/3 Except for fixed and variable ratio schedules, another two schedules of reinforcement are called interval schedules, because under these schedules reinforcement is available only after a certain time interval has elapsed. Again, the schedule can be either fixed or variable. On a fixed interval schedule (an FI schedule), the organism is reinforced for its first response after a certain amount of time has passed since its last reinforcement. On an FI 2 (minutes) schedule, for example, reinforcement is available only when 2 minutes have elapsed since the last reinforced response; responses made during that 2 -minute interval have no effect. 間隔スケジュール 1/3 強化の比率・変比率スケジュール以外に，２タイプの間隔スケジュールが存 在し，一定の時間間隔が経過した後にだけ強化されるため，間隔スケジュー ル（interval schedule）と呼ばれる。このスケジュールもまた固定と変動が ある。定間隔スケジュール（fixed interval schedule : FI スケジュール）では， 生体は最後の強化から一定時間が経過した後の最初の反応が強化される。た とえば，FI 2（分）スケジュールでは，最後に強化された反応から2分経過し たときだけ強化される。したがって，その 2分間の間に生じた反応に影響がな い。
30 interval schedule 2/3 One distinctive aspect of responding on an FI schedule is a pause that occurs immediately after reinforcement. (This post-reinforcement pause can be even longer than the one that occurs under FR schedules. ) Another distinctive aspect of responding on an FI schedule is an increase in the rate of responding as the end of the interval approaches, producing a pattern often described as a scallop. 間隔スケジュール 2/3 FIスケジュールに基づく反応の際立つ特徴の一つは，強化のすぐ後に生じる 反応休止である（この強化後の反応休止は，FRスケジュールで生じるものよ りもさらに長い傾向にある）。FIスケジュール反応のもう一つ際立つ特徴は， その時間間隔の終盤に近づくと反応率が増加することで，しばしばスキャラ ップと言われる反応様式を生じる。
31 interval schedule 3/3 A good example of an FI schedule in everyday life is mail delivery, which comes just once a day (FI 24 hours) or in some places twice a day (FI 12 hours). Right after your mail is delivered, you would not check it again, but as the end of the mail-delivery interval approaches, you will start checking again. 間隔スケジュール 3/3 日常生活における良い例が，1日にちょうど１回（FI 24 時間）．時には 1日に 2回（FI 12時間）やって来る郵便配達である。あなたは郵便物を受け取った すぐ後に．また郵便物を見に行くことはしないだろうが，郵便配達の間隔の 終わりに近づくにつれて，また見に行き始めたりする。
32 variable interval schedule 1/2 On a variable interval schedule (a VI schedule), reinforcement still depends on a certain interval having elapsed, but the intervals duration varies unpredictably. In a VI 10 (minute) schedule, for example, sometimes the critical interval is 2 minutes, sometimes 20 minutes, and so on, with an average of 10 minutes. Unlike the variations in responding under an FI schedule, organisms tend to respond at a uniform high rate when the schedule is a VI 1. 変間隔スケジュール 1/2 変間隔スケジュール（variable interval schedule : VI スケジュール）では， 強化は一定の時間が経過していることに基づくが．その間隔の憂きは予測で きないように変動する。たとえば，VI 10（分）スケジュールでは，強化に必 要な時間間隔があるときには 2分，またあるときには 20分など，そして平均10 分という具合になる。FIスケジュールの下で見られる反応の変化と異なり， スケジュールがVI 1の場合，生体は一様に高率な反応を表す傾向がある。
33 variable interval schedule 2/2 For an example of a VI schedule in everyday life, consider redialing a phone number after hearing a busy signal. To receive reinforcement (getting your call through), you have to wait some time interval after your last response (dialing), but the length of that interval is unpredictable. 変間隔スケジュール 1/2 日常生活の例として，通話中の信号音を聞いた後に電話をかけ直すことが考 えられる。強化（かけた電話がつながる）を得るため，あなたの最後の反応 （電話をかける）の後しばらくの間待つ必要があるが，その間隔の長さは予 測できない。
34 escape and avoidance Aversive events can also be used in the learning of new responses. Organisms can learn to make a response to terminate an ongoing aversive event, as a child learns to turn off a faucet to stop hot water from flowing into the bathtub. This is escape learning. Organisms can also learn to make a response to prevent an aversive event from even starting, as we learn to stop at red lights to prevent accidents (and traffic tickets). This is avoidance learning. Also, escape learning often precedes avoidance learning. 逃避と回避 嫌悪事象は，新たな反応の学習にも用いることができる。入浴中の子どもが， 浴槽に注がれているお湯を止めるために蛇口の栓をひねることを学習すると いうように，生体は進行中の嫌悪事態を終結させるための反応を学習するこ とができる。これは『逃避学習』と呼ばれる。私たちが事故（および違反切 符）を防ぐために赤信号で停止することを学習するというように，生体はま さにことの始まりから嫌悪事態を防ぐように反応することも学習できる。こ れは『回避学習』と呼ばれる。また，逃避学習はしばしば，回避学習よりも 先に起きることがある。
35 cognitive map An early advocate of the cognitive approach to learning was Edward Tolman, whose research dealt with the problem of rats learning their way through complex mazes (Tolman, 1932). In his view, a rat running through a complex maze was not learning a sequence of right- and left-turning responses but rather was developing a cognitive map—a mental representation of the lay out of the maze. 認知地図 学習に対する認知的アプローチの初期の提唱者は，エドワード・トールマン (Edward Tolman)であり，彼の研究ではラットが複雑な迷路の通り抜け方を どのように学習するのかという課題を扱った(Tolman, 1932)。彼の見解によ れば，ラットが複雑な迷路を走り抜けるのは，右や左に曲がるというような 一連の反応を学習しているのではなく，むしろ認知地図(cognitive map), すな わち，迷路の配置図の心的表象を作り上げていたからである。
36 long-term potentiation In this case, it is the amygdala, a limbic system structure deep within the temporal lobes that is important for emotions, including fear. Animals with amygdala damage cannot learn or remember fear memories. Amygdala neurons increase their activity in response to CSs that have been associated with aversive UCSs. It appears that learning in the amygdale is mediated by long-term potentiation (LTP), which is a persistent increase in synaptic transmission in pathways that send CS information to the amygdala. 長期増強 恐怖経験を学習し，記億に留めるためには脳のある特定部位が不可欠である。 この場合には，側頭葉内の深部にある大脳辺縁系構造で，恐怖をはじめさま ざまな情動に重要な役割を果たす扁桃体が不可欠な部位になる。扁桃体に損 傷をこうむっている動物は，恐怖記憶を学習することも記憶に留めておくこ ともできない。扁桃体での学習は，扁桃体へCS情報を送る経路でのシナプス 伝達の持続的な増大である長期増強（LTP: long-term potentiation)によって 仲介されるのは確かである。
37 synaptic plasticity The essential site of synaptic plasticity appears to reside in the cerebellum. Animals with cerebellar lesions cannot learn or remember the conditioned eyeblink (although they show normal eyeblink UCRs). Interestingly, eyeblink conditioning is associated with changes in synaptic transmission in the cerebellum. This change is called long-term depression and is associated with a long-lasting decrease in synaptic transmission at synapses in the cerebellar cortex. シナプス可塑性に不可欠な部位は小脳に存在すると思われる。小脳に損傷を 被っている動物は，条件瞬目を学習することも記憶に留めることもできない （ただし，彼らは正常な瞬目UCRsを示す）。興味深いことに，瞬目条件づけ には小脳でのシナプス伝運の変化が関係している。この変化は長期抑圧（long -term depression)と呼ばれ，小脳皮質のシナプスで長時間にわたるシナプス 伝達の低下と結びついている。
English Bold 18 point English standard 18 point Xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx Xxxxxxxxxxxxxxxxxxx up to 9 lines 日本語ボールド18ポイント 日本語標準１８ポイント（尺あわせにより16ポイントも可） Ooooooooooooooooooooooooooooooooooooooooo Ooooooooooooooooooooo おおよそ 9行まで 38
Скачать презентацию 第７章 LEARNING AND CONDITIONING 学習と条件づけ 1 learning
09d8910f16c0fc0595a5cee2f57b4623.ppt