在scikit-learn中保存预处理对象的方法? [duplicate]

我正在构建一个神经网络,目的是在未来对新数据进行预测。我首先使用sklearn.preprocessing对训练数据进行预处理,然后训练模型,接着进行一些预测,最后关闭程序。将来,当有新数据输入时,我需要使用相同的预处理尺度来转换新数据,然后再将其输入模型。目前,我必须加载所有旧数据,拟合预处理器,然后使用这些预处理器转换新数据。有什么方法可以保存预处理对象(如sklearn.preprocessing.StandardScaler),这样我就可以直接加载旧对象,而不必重新创建它们吗?


回答:

正如lejlot提到的,你可以使用pickle库将训练好的网络保存为硬盘上的文件,然后你只需加载它就可以开始进行预测。

以下是如何使用pickle保存和加载Python对象的示例:

import pickleimport numpy as npnpTest_obj = np.asarray([[1,2,3],[6,5,4],[8,7,9]])strTest_obj = "pickle example XXXX"if __name__ == "__main__":    # 存储对象信息    pickle.dump(npTest_obj, open("npObject.p", "wb"))    pickle.dump(strTest_obj, open("strObject.p", "wb"))    # 从文件中读取信息    str_readObj = pickle.load(open("strObject.p","rb"))    np_readObj = pickle.load(open("npObject.p","rb"))    print(str_readObj)    print(np_readObj)

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注