最近在看直接训练SNN的一些论文,BPTT算法(RNN中提出)可以说是直接训练SNN的基本算法,在此做一下过程推导,方便以后查阅。 首先给出参考的链接: 习翔宇:BPTT算法推导(数学推导细节更多版本)11 赞同 · 1 评论文章 文本的推导都是基于上述链接,可以说是对上述链接的一个补充与完善(个人觉得里面的推导有些小问题)。
训练SNN的一种方法是基于BP训练,在使用BP训练SNN的时候,用的最广泛的比较多的是RNN里的BPTT,和CNN单向传输不同的是,RNN里出现了多个需要计算的参数,RNN的基本方程为 ht=σ(Wxxt+Whht−1) y^t=σ(Woht)核心还是链式求导法则,对于损失函数,对于一个样本还是需要把所有时间都加起来 L=∑t=0TLt下面来看L`...