Keras模型的二元交叉熵准确率未发生变化

我在网上看到了很多关于这个问题的提问,但没有找到明确的解决方案,我的案例可能有所不同,因为它涉及时间序列数据和LSTM架构。

model = Sequential()model.add(LSTM(50, activation='relu', return_sequences=True, input_shape=(n_steps, n_features)))model.add(LSTM(50, activation='relu'))model.add(Dense(1, activation = 'sigmoid'))model.compile(optimizer='adam', loss='binary_crossentropy',metrics=['accuracy'])

日志:

Train on 290 samples, validate on 190 samplesEpoch 1/4000 - 1s - loss: 0.6896 - accuracy: 0.5586 - val_loss: 0.6846 - val_accuracy: 0.6105Epoch 2/4000 - 0s - loss: 0.6890 - accuracy: 0.5586 - val_loss: 0.6843 - val_accuracy: 0.6105Epoch 3/4000 - 0s - loss: 0.6889 - accuracy: 0.5586 - val_loss: 0.6829 - val_accuracy: 0.6105Epoch 4/4000 - 0s - loss: 0.6884 - accuracy: 0.5586 - val_loss: 0.6827 - val_accuracy: 0.6105Epoch 5/4000 - 0s - loss: 0.6883 - accuracy: 0.5586 - val_loss: 0.6825 - val_accuracy: 0.6105Epoch 6/4000 - 0s - loss: 0.6882 - accuracy: 0.5586 - val_loss: 0.6822 - val_accuracy: 0.6105Epoch 7/4000 - 0s - loss: 0.6882 - accuracy: 0.5586 - val_loss: 0.6820 - val_accuracy: 0.6105Epoch 8/4000 - 0s - loss: 0.6880 - accuracy: 0.5586 - val_loss: 0.6818 - val_accuracy: 0.6105Epoch 9/4000 - 0s - loss: 0.6880 - accuracy: 0.5586 - val_loss: 0.6806 - val_accuracy: 0.6105Epoch 10/4000 - 0s - loss: 0.6876 - accuracy: 0.5586 - val_loss: 0.6795 - val_accuracy: 0.6105

回答:

可以尝试以下几种方法:

  • 降低学习率。
  • 数据集是否不平衡?如果是的话,模型可能已经学会只预测一个类别(我认为这是这里的原因)。
  • 尝试为不平衡的类别分配更多权重,参考这里
  • 尝试重置模型,使用tf.keras.backend.clear_session
  • 尝试使用集成学习,弱学习器。
  • 更好的方法是,尝试一个基本的时间序列回归模型,如ARMA,以获得基准结果。

Related Posts

神经网络反向传播代码不工作

我需要编写一个简单的由1个输出节点、1个包含3个节点的…

值错误:y 包含先前未见过的标签:

我使用了 决策树分类器,我想将我的 输入 作为 字符串…

使用不平衡数据集进行特征选择时遇到的问题

我正在使用不平衡数据集(54:38:7%)进行特征选择…

广义随机森林/因果森林在Python上的应用

我在寻找Python上的广义随机森林/因果森林算法,但…

如何用PyTorch仅用标量损失来训练神经网络?

假设我们有一个神经网络,我们希望它能根据输入预测三个值…

什么是RNN中间隐藏状态的良好用途?

我已经以三种不同的方式使用了RNN/LSTM: 多对多…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注