ML.NET 无需拟合即可转换数据

简介

您好,我想进行一些数据准备操作,然后将DataView传递给另一个方法,或者在多个地方使用它。

因此,我创建了一个IEstimator<ITransformer>对象来保存管道,例如:

var textEstimator = mlContext.Transforms.Text.NormalizeText("Description")    .Append(mlContext.Transforms.Text.TokenizeIntoWords("Description"))    .Append(mlContext.Transforms.Text.RemoveDefaultStopWords("Description"))    .Append(mlContext.Transforms.Conversion.MapValueToKey("Description"))    .Append(mlContext.Transforms.Text.ProduceNgrams("Description"))    .Append(mlContext.Transforms.NormalizeLpNorm("Description"));

(摘自 docs.microsoft

但是现在,我想获取DataView,请记住,这还不是学习管道。


问题

那么,为什么我必须在Transform之前Fit管道呢?

// 拟合数据到估计器// 拟合会生成一个变换器,用于应用估计器定义的操作ITransformer textTransformer = textEstimator.Fit(data);// 转换数据IDataView transformedData = textTransformer.Transform(data);

回答:

调用Fit会从您使用MLContext上的便捷方法设置的估计器链中构建变换器链。变换器实际执行转换数据的工作。

您说的没错,大多数估计器除了返回相应的变换器外几乎不做其他工作,但当您将来将其转化为学习管道时,类似的结构将大大有益于您。

Related Posts

在使用k近邻算法时,有没有办法获取被使用的“邻居”?

我想找到一种方法来确定在我的knn算法中实际使用了哪些…

Theano在Google Colab上无法启用GPU支持

我在尝试使用Theano库训练一个模型。由于我的电脑内…

准确性评分似乎有误

这里是代码: from sklearn.metrics…

Keras Functional API: “错误检查输入时:期望input_1具有4个维度,但得到形状为(X, Y)的数组”

我在尝试使用Keras的fit_generator来训…

如何使用sklearn.datasets.make_classification在指定范围内生成合成数据?

我想为分类问题创建合成数据。我使用了sklearn.d…

如何处理预测时不在训练集中的标签

已关闭。 此问题与编程或软件开发无关。目前不接受回答。…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注