请帮我解决pyBrain中简单分类器神经网络的线性激活问题?

我正在尝试一个非常简单的例子,使用一个名为pyBrain的Python库,但我无法让它正常工作。 很可能有一个非常简单的原因,所以,我希望有人能帮助我!

1) 一个简单的异或运算可以正常工作。

2) 将数字时钟上显示的LED分类到数值输出值可以正常工作。

例如:

[ 1.  1.  1.  0.  1.  1.  1.] => [ 0.]
[ 0.  0.  1.  0.  0.  1.  0.] => [ 1.] 
[ 1.  0.  1.  1.  1.  0.  1.] => [ 2.] 
[ 1.  0.  1.  1.  0.  1.  1.] => [ 3.] 
[ 0.  1.  1.  1.  0.  1.  0.] => [ 4.] 
[ 1.  1.  0.  1.  0.  1.  1.] => [ 5.] 
[ 1.  1.  0.  1.  1.  1.  1.] => [ 6.] 
[ 1.  0.  1.  0.  0.  1.  0.] => [ 7.] 
[ 1.  1.  1.  1.  1.  1.  1.] => [ 8.] 
[ 1.  1.  1.  1.  0.  1.  1.] => [ 9.] 

3) 将数值分类到LED输出以驱动数字显示不起作用。

例如:

[ 0.] => [ 1.  1.  1.  0.  1.  1.  1.] 

等等(如上,但反过来)。

我使用一个简单的线性激活器,有10个输入,1个输出,并且我尝试了隐藏层中超过12个神经元。

我的困惑是,网络不应该能够在隐藏层中用10个神经元记住模式吗?

我相信我错过了一些显而易见的东西,所以,请随时启发我的愚蠢!


回答:

当您进行回归(表示一系列值的单个输出节点)时,线性激活是合适的,但对于分类(表示匹配的二进制输出),最好使用限制值范围的激活,例如 sigmoid 或 tanh。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注