闭环脑刺激不再只追目标波形:CLEAR-FORCE把脑反馈并入误差,模拟中同步与抑制都奏效
闭环脑刺激的控制器通常按预设目标训练,难以跟随脑活动的实时波动。CLEAR-FORCE把储层网络输出的目标误差与模拟脉冲网络群体膜电位的反馈误差合并,在刺激进行中实时更新读出权重。在两组脉冲神经元仿真中,它分别诱导出30 Hz振荡并压制阵发性爆发;闭环反馈强度高于零时误差低于开环,但反馈过弱反而差于开环。
闭环脑刺激的控制器通常按预设目标训练,难以跟随脑活动的实时波动。CLEAR-FORCE把储层网络输出的目标误差与模拟脉冲网络群体膜电位的反馈误差合并,在刺激进行中实时更新读出权重。在两组脉冲神经元仿真中,它分别诱导出30 Hz振荡并压制阵发性爆发;闭环反馈强度高于零时误差低于开环,但反馈过弱反而差于开环。
在部分可观测强化学习中,把循环记忆模块的权重冻结、只训练输出与混合层,仍能在延迟回忆、离散与连续控制以及像素任务上取得与全量训练相当的控制表现,同时把可训练参数减少一半以上。
已读完全部报道