啮齿动物强化决策中成本效益分析的操作协议
Summary
成本效益分析是大脑在决策过程中进行的一种称重尺度方法。在这里, 我们提出了一个训练老鼠的协议, 在一个以操作为基础的决策范式中, 老鼠选择更高的奖赏, 代价是等待十五年代的接收。
Abstract
强化导向决策是根据利益的相对价值及其后果选择竞争的行动路线之间的能力。这一过程是人类正常行为的组成部分, 被证明被神经和精神紊乱, 如成瘾、精神分裂症和抑郁症所扰乱。啮齿类动物早已被用来揭示人类认知的神经生物学。为此, 制定了若干行为任务;然而, 大多数是非自动化的, 是劳动密集型的。最近开发的开源微控制器使研究人员能够自动化基于操作的任务来评估各种认知任务, 规范刺激演示, 改进数据记录, 从而提高研究成果。在这里, 我们描述了一种自动化的基于延迟的增强导向决策任务, 使用由定制软件程序控制的操作性 T 迷宫。利用这些决策任务, 我们展示了大鼠前扣带皮层局部场电位活动的变化, 同时进行了基于延迟的成本和效益决策任务。
Introduction
决策是根据决策者的价值和偏好以及所选行动1的后果来识别和选择选择的过程。尽管决策在不同领域 (即经济学、心理学和神经科学) 中得到了广泛的研究, 但这种认知能力背后的神经机制尚未得到充分的理解。决策的两个子类是感性决策和增强导向决策。虽然它们包含相当多的重叠元素和概念, 感性决策依赖于现有的感官信息1,2, 而加强导向决策处理相对价值在特定时间刻度3中获得的操作。增强决策的一个重要方面是成本效益分析, 它是通过计算给定选择的好处并减去每种备选方案1的相关成本而直观地执行的。
T 迷宫 (或变种 Y 迷宫) 是使用啮齿动物的认知实验中使用最广泛的迷宫之一。动物被放置在起始臂 (T 的底部), 并允许选择目标臂 (其中一个侧臂)。任务, 如强迫交替或左-右歧视主要是用来与啮齿类动物在 T 迷宫测试参考和工作记忆4。T 迷宫也广泛用于决策实验5,6,7。在最简单的设计中, 奖励只放在一个目标臂上。这种选择是可以预测的, 而无论奖励价值如何, 动物们肯定更喜欢奖赏而不是一无所有。另一种选择是在两个目标武器中放置奖励, 然后让动物根据几个参数 (即动物的自然喜好、奖励的价值和支付的费用) 选择哪条路径。在基于价值的设计中, 由于具有称量尺度属性, 任务更加复杂。这样, 动物通过在两种替代品之间选择, 以及在行动的成本 (即等待的量 (延迟) 或获得奖励所需的努力 (基于努力的工作量) 之间, 得到不同的价值奖赏,每个作出贡献的决定,5,6。
在传统的基于延迟的 T 迷宫决策中, 动物被训练来选择高奖赏臂 (HRA), 避免相反的低奖赏臂 (上帝军)。在整个实验中, HRA 和上帝抵抗军的两侧保持不变。尽管上述任务在文献中有很好的记载, 但它还是有几个程序上的弊端。首先, 通过有一个固定的目标手臂, 动物知道哪一个手臂选择从一开始的试验。在这种情况下, 动物可以根据记忆而不是决策来选择目标臂。因此, 在一个基于延迟的决策范式中, 如果动物因为研究干预而选择了低报酬, 就不清楚这是由于记忆力的丧失还是学习干预的缘故。记忆控制小组分离观察的行为从记忆问题可能被考虑, 但这负担研究员和动物一样由于另外的工作7。第二个问题是动物做出决定的时刻: 一旦动物到达决策区 (所有三臂的交界处), 他们通常会向左和向右看, 权衡每只手臂的成本和利益, 然后做出决定。然而, 经过几次试验, 他们在到达决策区之前进行这样的计算, 直接跑到奖励臂上。因此, 这两个缺点-一只手臂的预偏向, 并发现决策的时刻-都高度中断了对电生理和神经影像数据的解释。
在本文所解释的方法中, 首选臂 (HRA) 由听觉线索提示, 并可能因试用而异。动物通过进入测试区 (图 1) 启动试验, 并通过 “鼻子戳” 的红外线门触发听觉提示, 该闸门已放置在三臂的交界处。音频信号 (20 分贝, 介于500和 1000 ms) 是从扬声器在目标臂的末尾播放。
Protocol
Representative Results
Discussion
啮齿目动物长期被使用了在处理不同的题目的神经科学研究研究, 从认知能力例如学习和记忆2,14和增强的行为7,15,16对器官的中央控制17,18和神经药理学19,20。拟议的议定书解释了一个复杂的行为?…
Divulgations
The authors have nothing to disclose.
Acknowledgements
这项研究得到了澳大利亚 RMH 神经科学基金会的支持;澳大利亚大脑基金会;澳大利亚 RACP Thyne 里德奖学金;由认知科学和技术委员会的项目赠款, 伊朗对阿巴斯 Haghparast。
Materials
| T-maze | Self made | ||
| Dustless Precision Sugar Pellets | TSE Systems Intl. Group | F0023 | 45 mg, Sucrose |
| Ketamine Hydrochloride Injection, USP | Sigma-Aldrich | 6740-87-0 | |
| Xylazine | Sigma-Aldrich | 7361-61-7 | |
| stereotaxic device | Stoelting | ||
| Isofluran | Santa Cruz Biotechnology | sc-363629Rx | |
| PFA-coated stainless-steel wires | A-M systems | ||
| acrylic cement | Vertex, MA, USA | ||
| (wooden or PVC (polyvinyl chloride)-made) | local suppliers | ||
| Mini-Fit Power Connector | Molex | 15243048 | |
| ethannol 70% | Local suppliers | ||
| buprenorphine | diamondback drugs | ||
| Arduino UNO | Arduino | https://www.arduino.cc/ | |
| Infrared emitting diode | Sharp | GL480E00000F | http://www.sharp-world.com/ |
| Chronux Toolbox | Chronux.org | ||
| Arduino codes | https://github.com/dechuans/arduino-maze |
References
- Gold, J. I., Shadlen, M. N. The neural basis of decision making. Annual Review of Neuroscience. 30, 535-574 (2007).
- Shi, Z., Müller, H. J. Multisensory perception and action: development, decision-making, and neural mechanisms. Frontiers in Integrative Neuroscience. 7, 81 (2013).
- Sutton, R. S., Barto, A. G. . Reinforcement Learning: An Introduction. 1, (1998).
- Khani, A., Rainer, G. Neural and neurochemical basis of reinforcement-guided decision making. Journal of Neurophysiology. 116, 724-741 (2016).
- Fatahi, Z., Haghparast, A., Khani, A., Kermani, M. Functional connectivity between anterior cingulate cortex and orbitofrontal cortex during value-based decision making. Neurobiology of Learning and Memory. 147, 74-78 (2018).
- Khani, A., et al. Activation of cannabinoid system in anterior cingulate cortex and orbitofrontal cortex modulates cost-benefit decision making. Psychopharmacology. 232, 2097-2112 (2015).
- Rudebeck, P. H., Walton, M. E., Smyth, A. N., Bannerman, D. M., Rushworth, M. F. Separate neural pathways process different decision costs. Nature Neuroscience. 9, 1161-1168 (2006).
- Gage, G. J., et al. Surgical implantation of chronic neural electrodes for recording single unit activity and electrocorticographic signals. Journal of Visualized Experiments. (60), e3565 (2012).
- Paxinos, G., Watson, C. . The Rat Brain in Stereotaxic Coordinates. , (1998).
- Bokil, H., Andrews, P., Kulkarni, J. E., Mehta, S., Mitra, P. P. Chronux: a platform for analyzing neural signals. Journal of Neuroscience Methods. 192, 146-151 (2010).
- Cohen, M. X. . Analyzing Neural Time Series Data: Theory and Practice. , (2014).
- Luk, C. -. H., Wallis, J. D. Choice coding in frontal cortex during stimulus-guided or action-guided decision-making. Journal of Neuroscience. 33, 1864-1871 (2013).
- Rudebeck, P. H., et al. Frontal cortex subregions play distinct roles in choices between actions and stimuli. Journal of Neuroscience. 28, 13775-13785 (2008).
- Goshadrou, F., Kermani, M., Ronaghi, A., Sajjadi, S. The effect of ghrelin on MK-801 induced memory impairment in rats. Peptides. 44, 60-65 (2013).
- Haghparast, A., et al. Intrahippocampal administration of D2 but not D1 dopamine receptor antagonist suppresses the expression of conditioned place preference induced by morphine in the ventral tegmental area. Neuroscience Letters. 541, 138-143 (2013).
- Esmaeili, M. -. H., Kermani, M., Parvishan, A., Haghparast, A. Role of D1/D2 dopamine receptors in the CA1 region of the rat hippocampus in the rewarding effects of morphine administered into the ventral tegmental area. Behavioural Brain Research. 231, 111-115 (2012).
- Chaleek, N., Kermani, M., Eliassi, A., Haghparast, A. Effects of orexin and glucose microinjected into the hypothalamic paraventricular nucleus on gastric acid secretion in conscious rats. Neurogastroenterology & Motility. 24, e94-e102 (2012).
- Kermani, M., Eliassi, A. Gastric acid secretion induced by paraventricular nucleus microinjection of orexin A is mediated through activation of neuropeptide Yergic system. Neurosciences. 226, 81-88 (2012).
- Kermani, M., Azizi, P., Haghparast, A. The role of nitric oxide in the effects of cumin (Cuminum Cyminum L.) fruit essential oil on the acquisition of morphine-induced conditioned place preference in adult male mice. Chinese Journal of Integrative Medicine. , 1-6 (2012).
- Ahmadi, A., et al. Synthesis and antinociceptive behaviors of new methyl and hydroxyl derivatives of phencyclidine. Current Medicinal Chemistry. 19, 763-769 (2012).
