数据/特征归一化

我有一组特征值位于区间(-1,1)内。我正在寻找一种双射函数或程序,将数据归一化到特定范围,使其均值接近0,方差接近1。

函数必须是双射的,这一点非常重要,因为我需要将这些特征归一化后作为输入,供使用tanh激活函数的神经网络使用。我的处理流程将是在内存中转换数据,输入到网络中,然后将网络结果转换回初始尺度。


回答:

这种归一化任务在神经网络应用中非常常见。最常见的方法是简单地计算数据的均值和标准差,并将这些值存储在训练程序中。因此,你的数据处理流程如下:

  1. 计算输入数据的meansd,并将其存储在内存中。
  2. 应用归一化转换:normed_data = (data - mean) / sd
  3. 训练/评估/使用网络。
  4. 使用original_data = (normed_data * sd) + mean反归一化数据。

我写了一篇关于数据归一化的更长的文章。你可以在这里阅读这里

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注