我的输入层有98个浮点值,范围在-5.0 < x < 5.0之间,输出是一个单节点的浮点值,范围同样在-5.0 < x < 5.0之间
数据集非常大,达到10GB,并且可以很容易地扩展到更大的尺寸。
我遇到的最大问题是激活函数。对于输入和输出值在-5.0 < x < 5.0范围内的数据,应该使用什么样的激活函数最好呢?
另外,如果您对这种数据集适合使用哪种类型的神经网络(如LSTM、CNN)、 dropout、隐藏层的数量、批次大小和优化器有建议,也非常欢迎分享。
尽管有大量的例子和信息,但我仍然在尝试为我的数据集调整所有这些参数时遇到了相当多的困难。
回答:
您可以使用手动拉伸的'tanh'
函数。
单独使用时,’tanh’函数的输出范围在-1到+1之间。您可以通过将其乘以5(或者稍微大一点,比如5.1)来拉伸这个范围。
model.add(YourLastLayer(..., activation='tanh'))model.add(Lambda(lambda x: x * 5))
其他问题无法回答,因为我们完全不知道您的数据集是关于什么的,数据是如何组织的,它代表什么以及您想要达到的目标是什么。
不过,看起来这是一个经典的Dense
(或全连接)网络的案例。