脉冲强化学习与决策能力

时间：17:24:51作者：admin分类：时刻浏览：12评论：0

人民网北京9月27日电 (记者赵竹青)记者从中国科学院自动化研究所获悉，该所曾毅研究员负责的类脑认知智能团队受经过自然演化的生物脑神经环路结构呈现出的多样性以及脉冲时序依赖可塑性机制启发，提出了脑启发的神经环路演化策略，助力研发更具生物合理性和高效性的类脑脉冲神经网络。

这一研究近日在国际期刊《美国国家科学院院刊》(PNAS)上发表。

据介绍，在生物神经系统中，不同类型的神经元能够自组织成连接模式各异的神经环路，以在结构上支持实现丰富的认知功能。

人脑中不同类型的神经环路及其自适应能力促进了人类感知、学习、决策及其他高等认知功能的实现。

然而，当前的脉冲神经网络设计范式大多基于深度学习领域的结构启发。

这些结构主要由前馈连接占据主导地位，而没有考虑到不同类型的神经元，显著阻碍了脉冲神经网络在复杂任务上发挥其潜力。

从计算视角挖掘生物神经环路的丰富动力学特性及其意义，并应用于当前类脑脉冲神经网络的结构从而提升人工智能系统的能力，仍然是一个深刻而具有开放性的挑战。

科研团队以前馈和反馈连接与兴奋性和抑制性神经元结合为基础，为智能演化的计算建模提供了更具生物合理性的演化空间。

研究利用神经元的局部脉冲行为，通过脉冲时序依赖可塑性的局部规则，自适应地演化出通过自然演化生成的功能性神经环路，如前向兴奋、前向抑制、反馈抑制和侧向抑制，并结合全局误差信号更新突触权重。

通过融入演化生成的神经环路，本研究构建了用于图像分类和强化学习与决策任务的类脑脉冲神经网络。

利用受脑启发的神经环路演化策略(NeuEvo)以及演化出的丰富的类神经环路类型，演化后的类脑脉冲神经网络极大地增强了感知，为具有复杂功能的网络演化与认知能力涌现奠定了基础。

继续浏览有关神经演化的文章

相关文章