人工智能 (AI) 从人类大脑的现有知识中汲取灵感,人工复制其某些学习过程和功能。然而,人工代理成功模拟大脑活动的程度尚不完全清楚。
新加坡南洋理工大学李光前医学院的研究员 Hiroshi Makino 最近开展了一项研究,探索大脑和人工智能体如何学习解决新的复合任务的可能相似之处。他的发现发表在Nature Neuroscience上,可能对 AI 和神经科学研究产生有趣的影响。
“以前的心理学研究表明,人类和非人类动物结合了预先学习的技能来扩展他们的行为库,”进行这项研究的研究员 Hiroshi Makino 告诉 Medical Xpress。“然而,大脑如何实现这一点仍然知之甚少。我受到深度强化学习(人工智能研究的一个子领域)研究同一问题的启发,并通过记录小鼠大脑中的神经活动对从中得出的理论预测进行了实证检验。 “
在解决新任务时,AI 代理会提取在预训练期间获得的技能,并以分层方式重新组合这些技能。牧野想探索大脑以类似方式行事的可能性。
为此,他首先研究了深度强化学习代理如何学会解决新任务。随后,他将此与小鼠处理相同新任务的方式进行了比较。
“当老鼠通过结合预先获得的技能/知识解决了一个新问题时,他们大脑中单个神经元的活动被记录下来,”Makino 解释道。“将由此产生的神经活动与源自深度强化学习的 理论模型进行了比较,在深度强化学习中,使用简单的算术运算来组合预先学习的行为的值。”
使用一种称为双光子钙成像的技术,牧野探索了小鼠皮层(与执行功能和学习相关的大脑区域)中发生的事情,因为他们使用以前获得的技能处理了一项新任务。有趣的是,他观察到动作价值的神经表征类似于在处理新的复合任务时由深度强化学习算法创建的神经表征。
“我发现用深度强化学习算法训练的人工智能体和大脑之间有相似的活动模式,”牧野说。“我认为这项研究的主要贡献之一是神经科学和深度强化学习的整合,以确定大脑如何构成新行为的潜在机制。”
总的来说,Makino 的研究结果表明,在处理新任务时,哺乳动物的大脑会通过对先前获得的具有随机策略的动作值表示进行简单的算术运算来构成新的行为。这些想法源于深度强化学习的理论框架。
将来,这项最近的研究可以为将神经科学观察与深度强化学习研究联系起来的新研究铺平道路。这些工作可以共同促进人工智能系统的持续改进,同时也有可能增强目前对哺乳动物大脑的理解。
“我现在计划通过将深度强化学习 的理论概念应用于神经科学来研究自然智能各个领域的神经机制,”牧野补充道。
智能推荐
-
美色使男人大脑皮层活跃 男人竟拥有两个大脑 脑电图揭示真相2023-09-04 男性对美色的特殊反应在科学上已经得到了广泛的研究和探讨。通过脑电图和神经成像技术,科学家们观察了男性参与者在观看美色图像时的大脑活动
-
研究:姜黄成分ar-turmerone可以支持大脑再生2023-08-02 作为世界上最通用的治疗香料之一,姜黄具有8多种健康益处,与14种不同的药物一样有效,但没有它们的副作用
-
大规模化石研究揭示了15万年前现代生物多样性梯度的起源2023-08-10 研究人员已经使用了近五十万块化石来解决了一个2年的科学谜团:为什么不同物种的数量在赤道附近最多,并且向极地地区稳步减少
-
英国花卉研究揭示了对植物性生活的惊讶2023-08-27 一项新的研究表明,当野生开花植物衡量其他植物时,它们可能经常以近亲而不是邻居之间的婚姻告终。关于英国本土野花交配习性的发现代表了世界上第一个对所有杂交种(两个不同
-
研究揭示了导致机会性感染易感性的新遗传疾病2023-08-04 由范德比尔特大学医学中心免疫遗传学家RubénMartínez-Barricarte博士共同领导的国际联盟发现了一种新的遗传疾病,这种
-
研究表明人类大脑进化的催化剂2023-08-29 一百万多年前,人类基因组的大块被重新排列-卵子或精子形成过程中的一个偶然事件,导致DNA片段的缺失,复制或逆转
-
研究人员揭示了最古老的棘龙大脑2023-08-04 南安普敦大学和俄亥俄大学的研究人员重建了两只英国棘龙的大脑和内耳,帮助揭示了这些大型掠食性恐龙如何与环境相互作用
-
研究揭示了太阳能电池的热不稳定性 但提供了一条光明的前进道路2023-08-04 近年来,一种新型太阳能技术似乎很有前途。卤化物钙钛矿太阳能电池既高性能又低成本地生产电能-这是未来任何成功的太阳能技术的两个必要成分
-
通过研究蜥蜴 研究人员揭示了塑造生物多样性的力量2023-08-12 “如果你在热带雨林中选择一个地方,计算15米内不同种类的蜥蜴的数量,你会得出一个数字,”卢克·马勒问道,“是什么
-
研究揭示了冰川开始期间东亚冬季风的演变和潜在强迫机制2023-08-03 东亚冬季风(EAWM)是东亚季风环流的主要组成部分,其强度与北半球冰盖(NHIS)在轨道时间尺度上的体积密切相关
-
慢性疼痛引起的抑郁症:小鼠研究中揭示的潜在机制2023-08-05 慢性疼痛通常会导致抑郁症,从而增加痛苦并且在临床上难以治疗。现在,研究人员首次发现了驱动这些抑郁系统的潜在机制,根据发表在《临床调查杂志》上的一项研究
-
研究团队建立了一个框架来量化大脑的控制成本2023-08-11 为了更好地了解大脑中这种控制的特性,科学家们寻找方法来估计大脑从一种状态过渡到另一种状态时控制难度或控制成本