通过REST API访问机器学习模型

我已经创建了一个卷积神经网络,用于对猫和狗的图像进行分类。数据集和代码都在网上可以找到。我使用Python作为编程语言。但现在我需要将这个模型部署到服务器上,并且需要通过REST API来访问它。

我已经使用HDF5格式保存了我的模型,例如“model.h5”。参考资料:https://machinelearningmastery.com/save-load-keras-deep-learning-models/

我们也可以将模型转换成PMML文件,但目前PMML文件还不支持CNN。

我们可以使用flask库将模型转换成RESTful Web服务,像这样:“https://www.linode.com/docs/applications/big-data/how-to-move-machine-learning-model-to-production/

我更倾向于使用Java。

我希望使用Spring Boot创建一个微服务。但我没有找到任何关于如何操作的逐步文章。

谁能帮我解答一下,如何使用Java通过REST API访问模型?或者有其他什么方法可以部署和通过REST API访问模型?

任何帮助都将不胜感激。


回答:

由于您使用Keras训练了模型,我建议您将模型转换为tensorflow的冻结模型(pb文件)。您可以使用这个h5格式的keras模型转换为tensorflowpb模型。

一旦您有了准备好的tensorflow模型,您就可以使用许多成熟的库来部署模型。Tensorflow-serving是最著名的之一,它有很多内置的便捷功能,比如从模型中获得RESTful输出、更快的并行预测等等。

这里有一篇文章展示了如何在tensorflow-serving中部署keras模型。部署到tensorflow-serving后,您可以使用nvidia-docker进行容器化,然后通过任何javaspring-boot应用程序来使用该服务。

Related Posts

Keras Dense层输入未被展平

这是我的测试代码: from keras import…

无法将分类变量输入随机森林

我有10个分类变量和3个数值变量。我在分割后直接将它们…

如何在Keras中对每个输出应用Sigmoid函数?

这是我代码的一部分。 model = Sequenti…

如何选择类概率的最佳阈值?

我的神经网络输出是一个用于多标签分类的预测类概率表: …

在Keras中使用深度学习得到不同的结果

我按照一个教程使用Keras中的深度神经网络进行文本分…

‘MatMul’操作的输入’b’类型为float32,与参数’a’的类型float64不匹配

我写了一个简单的TensorFlow代码,但不断遇到T…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注