AWS托管机器学习大型模型文件

我想公开一个我本地训练的模型,并通过一些函数来帮助评估参数。这个模型相当大(10 GB)。我考虑构建一个Web服务来提供所需的功能。然而,我不知道应该如何托管我的模型(它是一个非常大的文本文件),以及如何能够访问它。进一步来说,我是否需要将整个模型加载到我的EC2实例内存中?处理这种任务的最佳方式是什么?


回答:

你可以始终将其保存在S3存储桶中,并在R中加载它。例如,我看不到部分加载模型的方法。然而,我认为这样做会失去模型泛化结果的能力。恐怕你需要花一些钱,选择一个能够加载整个模型的大型实例。祝你好运!

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注