Mengapa Ganjaran Run-of-the-Mill Mungkin Kehilangan Rayuan Mereka

Kandungan

• Perkara utama
• Ganjaran Jus Rare Kuatkan Dopamine dan Dapatkan Jus Monyet
• Ganjaran Blasé Jangan Memperkuat Dopamin

Perkara utama

• Sebagai sebahagian daripada sistem dopaminergik otak tengah, dopamin neurotransmitter berperanan dalam perasaan senang dan mendorong tingkah laku berdasarkan ganjaran.
• Tahap dopamin yang diperkuat memberi insentif kepada pembelajaran berasaskan ganjaran di kedua-dua persekitaran makmal dan persekitaran dunia nyata.
• Penyelidikan baru mengenai monyet menunjukkan bahawa, tidak seperti ganjaran biasa, nampaknya "ganjaran langka" memperkuat tindak balas dopamin di otak.

Penyelidikan baru menjelaskan tentang "perasaan jackpot" yang diperoleh seseorang setelah memenangi hadiah langka yang tidak disangka-sangka, dan, sebaliknya, mengenai perasaan yang agak kurang senang menerima hadiah yang boleh diramalkan yang tidak ada artinya untuk ditulis di rumah. Makalah ini, "Rare Rewards Amplify Dopamine Response," muncul dalam edisi April 2021 Neurosains Alam .

Oleh kerana neuron dopamin memainkan peranan penting dalam pembelajaran berdasarkan ganjaran tetapi agak sedikit yang diketahui mengenai bagaimana kesadaran ganjaran mempengaruhi neuron dopamin individu, penyelidik University of Pittsburgh menyiasat "bagaimana kekerapan kesalahan ramalan ganjaran dan ganjaran mempengaruhi isyarat dopamin" di otak tengah.

"Kami ingin tahu bagaimana neuron dopamin akan bertindak balas jika rentangnya tetap, tetapi kebarangkalian relatif ganjaran dalam julat itu berubah," kata pengarang kanan William Stauffer pada 2 April Perubatan Xpress artikel . "Oleh itu, objektif utama kajian kami adalah untuk mengetahui apakah neuron dopamin sensitif terhadap bentuk taburan kebarangkalian."

"Kesalahan ramalan ganjaran sangat penting untuk pembelajaran haiwan dan mesin," tambahnya. "Namun, dalam teori pembelajaran haiwan dan mesin klasik, bahagian 'ganjaran yang diramalkan' dari persamaan hanyalah nilai rata-rata hasil masa lalu. Walaupun ramalan ini berguna, akan lebih berguna untuk meramalkan nilai rata-rata, serta lebih banyak lagi statistik kompleks yang menggambarkan ketidakpastian. "

Ganjaran Jus Rare Kuatkan Dopamine dan Dapatkan Jus Monyet

Untuk kajian ini, Stauffer dan rakan-rakan di University of Pittsburgh's Center for Neuroscience dan Pitt's Brain Institute membuat eksperimen pada monyet yang memasangkan isyarat visual dengan "taburan kebarangkalian ganjaran" yang berbeza berdasarkan titisan jus buah kecil, sederhana dan besar .

Sebagai contoh, satu taburan kebarangkalian ganjaran secara konsisten memberi setiap tetes jus bersaiz sederhana monyet; namun, pada kesempatan yang jarang berlaku, seekor monyet mungkin akan mendapat jus yang lebih kecil atau lebih besar daripada yang dijangkakan. Dalam corak taburan yang lain, monyet-monyet itu dijangka mendapat sejumlah kecil jus kecil, sederhana, dan besar dengan kebarangkalian yang sama.

Kemudian, ahli sains saraf menggunakan elektrod untuk merakam tindak balas dopamin di pusat ganjaran otak ketika monyet melihat isyarat visual yang dipasangkan dengan corak taburan kebarangkalian ganjaran yang berbeza.

Ganjaran Blasé Jangan Memperkuat Dopamin

Terutama, Stauffer dan pengarang bersama mendapati bahawa penurunan jus yang nampaknya jarang berlaku tindak balas dopamin di otak. Di sisi lain, ganjaran yang sangat besar kemungkinan dengan ukuran yang sama dan biasa diramal menimbulkan tindak balas dopamin yang lebih lemah.

Sebagai penulis menyimpulkannya: "Ganjaran langka menguatkan tindak balas dopamin, walaupun kesalahan ramalan konvensional sama, menunjukkan mekanisme untuk mempelajari kerumitan insentif dunia nyata."

"Kajian ini adalah langkah pertama untuk memahami bagaimana pengagihan kebarangkalian ganjaran subjektif dikodekan di otak, dan bentuk apa yang dapat diambil oleh kepercayaan ini," kata Stauffer. "Dengan hasil ini, kita sekarang akan kembali mempelajari pilihan. Walaupun begitu, saya mengesyaki hasil ini akan mempunyai implikasi yang lebih luas dan juga penting untuk sistem pembelajaran berasaskan kecerdasan biologi dan buatan."