如何用tensorflow编写自定义梯度反向传播的代码？
- 内容介绍
- 文章标签
- 相关推荐
本文共计271个文字，预计阅读时间需要2分钟。
以sign函数为例：sign函数可以对数值进行二值化，但在处理斜度反向传播时处理不好，一般采用一个近似函数的斜度作为替代，如图中的Htanh函数。在[-1,1]区间内，Htanh的直接斜度为1，其他为0。
以sign函数为例：
sign函数可以对数值进行二值化，但在梯度反向传播是不好处理，一般采用一个近似函数的梯度作为代替，如上图的Htanh。在[-1,1]直接梯度为1，其他为0。
#使用修饰器，建立梯度反向传播函数。
本文共计271个文字，预计阅读时间需要2分钟。
以sign函数为例：sign函数可以对数值进行二值化，但在处理斜度反向传播时处理不好，一般采用一个近似函数的斜度作为替代，如图中的Htanh函数。在[-1,1]区间内，Htanh的直接斜度为1，其他为0。
以sign函数为例：
sign函数可以对数值进行二值化，但在梯度反向传播是不好处理，一般采用一个近似函数的梯度作为代替，如上图的Htanh。在[-1,1]直接梯度为1，其他为0。
#使用修饰器，建立梯度反向传播函数。