梯度下降法无需导数

我在尝试理解梯度下降法,但感到很困惑。如果你有一个抛物…

Pytorch: 如何创建不基于导数的更新规则?

我想实现以下算法,来自这本书,第13.6节: 我不明白…

在神经网络的反向传播中,如何获得微分方程?

我对dz=da*g'(z)感到困惑。我们都知道,在前向…

pytorch: 当损失来自两个网络时,损失如何表现?

我正在尝试在pytorch中实现这本书中第13.5节的…

Pytorch ValueError: 优化器接收到空参数列表

在尝试创建一个神经网络并使用Pytorch进行优化时,…

如何计算选定子样本预测的训练损失

我正在训练一个用于视频序列的深度学习多目标跟踪模型。视…

如何使用点积计算权重的梯度下降成本?

已关闭。 此问题需要调试详情。目前不接受回答。 编辑问…

如何将我的训练数据输入到这个神经网络中

我在尝试用一段特定的代码解决一个分类问题,但我无法完全…

我应该使用哪种机器学习模型?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

使用Excel编写人工神经网络:VBA类型不匹配错误

我正在尝试使用Excel VBA编写一个基本的人工神经…

解析Python中的随机梯度下降代码

在Michael Nielson关于人工神经网络的在线…

多层神经网络反向传播公式(使用随机梯度下降)

使用Backpropagation calculus …

预测总是1或0

编辑:将输入压缩在0到1之间,每个数据集每个神经元的输…

为什么梯度检查在反向传播中速度慢?

我最近学习了一种名为“梯度检查”的算法,用于确保我的神…

如何在反向传播算法中使用链式法则的结果中进行矩阵乘法

我正在尝试理解反向传播的数学原理,并希望使用Pytho…

为什么在Pytorch中,当我复制一个网络的权重后,它会在反向传播后自动更新?

我编写了以下代码进行测试,因为在我的原始网络中,我使用…

PyTorch : 预测单个示例

以下示例来自于: https://github.com…

如何在Tensorflow中通过一个预测另一模型权重的模型进行反向传播

我目前正在尝试训练一个模型(超网络),该模型可以预测另…

什么是时间反向传播中的误差项,如果我只有一个输出?

在这个问题中,RNN: 当仅在最终时间步获取输出时的时…

不确定函数是否会破坏反向传播

在过去的几天里,我一直在尝试使用TensorFlow,…

反向传播是如何工作的?

我在纸上创建了我的第一个简单神经网络。它有5个输入(数…

反向传播和反向模式自动微分有什么区别?

在阅读这本书时,我了解到以下内容: 对于每个训练实例,…

用于解决XOR问题的自制神经网络反向传播未能正确收敛

为了学习目的,我正在用JavaScript从头开始实现…

计算梯度更新

假设我想手动计算相对于Kullback-Liebler…

使用交叉熵函数时,sigmoid函数是否会影响与输出层不直接连接的权重的减速?

我一直在自学神经网络的误差函数。http://neur…