Tonic dopamine: opportunity costs a

Tonic dopamine: opportunity costs and the control of response vigor

Abstract
Rationale
Dopamine neurotransmission has long been known to exert a powerful influence over the vigor, strength, or rate of responding. However, there exists no clear understanding of the computational foundation for this effect; predominant accounts of dopamine’s computational function focus on a role for phasic dopamine in controlling the discrete selection between different actions and have nothing to say about response vigor or indeed the free-operant tasks in which it is typically measured.
Objectives
We seek to accommodate free-operant behavioral tasks within the realm of models of optimal control and thereby capture how dopaminergic and motivational manipulations affect response vigor.
Methods
We construct an average reward reinforcement learning model in which subjects choose both which action to perform and also the latency with which to perform it. Optimal control balances the costs of acting quickly against the benefits of getting reward earlier and thereby chooses a best response latency.
Results
In this framework, the long-run average rate of reward plays a key role as an opportunity cost and mediates motivational influences on rates and vigor of responding. We review evidence suggesting that the average reward rate is reported by tonic levels of dopamine putatively in the nucleus accumbens.
Conclusions
Our extension of reinforcement learning models to free-operant tasks unites psychologically and computationally inspired ideas about the role of tonic dopamine in striatum, explaining from a normative point of view why higher levels of dopamine might be associated with more vigorous responding.

ผลลัพธ์ (ไทย) 2:

โดพามีนยาชูกำลังที่ค่าใช้จ่ายในโอกาสและการควบคุมการตอบสนองความแข็งแรงบทคัดย่อเหตุผลDopamine neurotransmission ที่รู้จักมานานจะใช้อิทธิพลที่มีประสิทธิภาพมากกว่าความแข็งแรงความแข็งแรงหรืออัตราการตอบสนอง แต่มีอยู่ไม่มีความเข้าใจที่ชัดเจนของมูลนิธิการคำนวณผลกระทบนี้ บัญชีที่โดดเด่นของการมุ่งเน้นฟังก์ชั่นการคำนวณต้องใจในบทบาทโดพามีนเฟสิคในการควบคุมการเลือกที่ไม่ต่อเนื่องระหว่างการกระทำที่แตกต่างกันและไม่มีอะไรจะพูดเกี่ยวกับความแข็งแรงของการตอบสนองหรืออันที่จริงงานฟรีผ่าตัดในสิ่งที่มันมักจะวัด. วัตถุประสงค์ของเราพยายามที่จะรองรับการไล่ทุ่งงานพฤติกรรมผ่าตัดภายในขอบเขตของรูปแบบของการควบคุมที่ดีที่สุดและจึงจับวิธี dopaminergic และกิจวัตรสร้างแรงบันดาลใจส่งผลกระทบต่อความแข็งแรงของการตอบสนอง. วิธีการที่เราสร้างเสริมผลตอบแทนเฉลี่ยการเรียนรู้ในรูปแบบที่วิชาเลือกทั้งการกระทำที่จะดำเนินการและยังแฝงด้วยซึ่งในการดำเนินการได้. การควบคุมที่เหมาะสมที่สุดยอดค่าใช้จ่ายของการทำหน้าที่ได้อย่างรวดเร็วกับประโยชน์ของการได้รับรางวัลก่อนหน้านี้และจึงเลือกแฝงตอบที่ดีที่สุด. ผลในกรอบนี้ในระยะยาวอัตราเฉลี่ยของผลตอบแทนที่มีบทบาทสำคัญเป็นต้นทุนค่าเสียโอกาสและไกล่เกลี่ยอิทธิพลสร้างแรงบันดาลใจเกี่ยวกับอัตราและความแข็งแรงของการตอบสนอง เราตรวจสอบหลักฐานที่ชี้ให้เห็นว่าอัตราผลตอบแทนเฉลี่ยมีรายงานจากระดับยาชูกำลังของโดพามีน putatively ใน accumbens นิวเคลียส. สรุปผลการวิจัยส่วนขยายของเราในการเสริมการเรียนรู้รูปแบบงานฟรี-ผ่าตัด unites จิตใจและคอมพิวเตอร์แรงบันดาลใจความคิดเกี่ยวกับบทบาทของโดพามีนยาชูกำลังใน striatum อธิบาย จากจุดเชิงบรรทัดฐานของมุมมองที่ว่าทำไมระดับสูงของโดพามีนอาจจะเกี่ยวข้องกับการตอบสนองมากขึ้นแข็งแรง

ผลลัพธ์ (ไทย) 3:

ยาโด : โอกาส ต้นทุน และการควบคุมการตอบสนองความแข็งแรง



เหตุผลนามธรรมแบบนิวโรทราน ิสชั่นได้นานถูกเรียกว่าโหมพลังอำนาจความแข็งแรง , ความแข็งแรง , หรืออัตราการตอบสนอง อย่างไรก็ตาม มีอยู่ไม่มีความเข้าใจที่ชัดเจนของฐานการคำนวณสำหรับผลนี้บัญชีที่ของโดพามีนของการคำนวณฟังก์ชันเด่นเน้นบทบาท phasic โดปามีนในการควบคุมการแบ่งแยกระหว่างการกระทำต่าง ๆ และไม่มีอะไรจะพูดเกี่ยวกับความแข็งแรงของการตอบสนองหรือแท้ฟรีการดำเนินการงานซึ่งมักจะวัด

วัตถุประสงค์เราต้องการที่จะรองรับฟรีที่มีผลพฤติกรรมงานภายในขอบเขตของรูปแบบของการควบคุมที่เหมาะสมที่สุดและจึงจับวิธีเกี่ยวกับโดปามีนและแรงจูงใจ manipulations มีผลต่อความแข็งแรงตอบสนอง .

เราสร้างวิธีการเฉลี่ยรางวัลเสริมการเรียนรู้ในวิชาทั้งสองซึ่งการกระทำที่เลือกปฏิบัติ และยังแอบแฝงที่ต้องปฏิบัติตามการควบคุมที่เหมาะสมที่สุดยอดค่าใช้จ่ายของการแสดงได้อย่างรวดเร็วกับประโยชน์ในการได้รับรางวัลก่อนหน้านี้และจึงเลือกคำตอบที่ดีที่สุด

ผลแฝงอยู่ ในกรอบนี้ ยาว อัตราเฉลี่ยของผลตอบแทนมีบทบาทเป็นค่าเสียโอกาส และแรงจูงใจที่มีอิทธิพลต่อ mediates ราคาและความแข็งแรงของการตอบสนองเราตรวจสอบหลักฐานชี้ให้เห็นว่าอัตราผลตอบแทนเฉลี่ยที่รายงานโดยระดับยาของ dopamine ในสมอง putatively ในนิวเคลียส .

สรุปรูปแบบการเรียนรู้ที่มีการขยายงานผ่าตัดฟรีรวบรวมจิตใจและ computationally แรงบันดาลใจความคิดเกี่ยวกับบทบาทของ dopamine แต่โทนิค ,อธิบายจากมุมมองของจุดอ้างอิง ถึงระดับที่สูงขึ้นของโดปามีนอาจจะมีความเกี่ยวข้องกับแข็งแรง
ตอบกลับ