使用numpy.Zeros(x*y,x*y)时,自组织映射出现内存错误?我的X/Y应该代表什么?

我正在尝试使用Stephan Marslands的2D自组织映射(结合主成分分析)进行实验

import som as sm#put it into somdef som_algorithm(inputs,nIterations,x=0,y=0):    print "运行自组织映射!"    if x == 0 and y == 0:        y = len(inputs[0])        x = len(inputs)    print "x轴是 " + str(x) + " / y轴是 " + str(y)    som = sm.som(x,y,inputs)    som.somtrain(inputs, nIterations)    print som.somfwd(inputs)som_algorithm(training, 100)

根据我的数据集在预处理后,产生了以下错误

运行自组织映射!x轴是 600 / y轴是 173Traceback (most recent call last):  File "\source\bag_of_words.py", line 112, in <module>som_algorithm(training, 100)  File "\source\bag_of_words.py", line 87, in som_algorithmsom = sm.som(x,y,inputs)  File "\som\__init__.py", line 44, in __init__self.mapDist = zeros((self.x*self.y,self.x*self.y))MemoryError

目前我的Y代表每个数组中的元素数量(包含在大维度中的小维度),我的X代表包含小数组维度的大维度。是什么导致了这个内存错误?


回答:

代码试图创建一个形状为x*y乘以x*y的零数组。这将是10774440000个元素。数组中的每个值是8字节(双精度)。这超过了80GB。你只是内存不足了。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注