Scikit: 使用cross_val_score函数计算精确度和召回率

我正在使用scikit对垃圾邮件/正常邮件数据进行逻辑回归分析。X_train是我的训练数据,y_train是标签(’spam’或’ham’),我这样训练我的LogisticRegression模型:

classifier = LogisticRegression()classifier.fit(X_train, y_train)

如果我想获取10折交叉验证的准确率,我只需这样写:

 accuracy = cross_val_score(classifier, X_train, y_train, cv=10)

我以为通过简单地添加一个参数也可以计算精确度和召回率,像这样:

precision = cross_val_score(classifier, X_train, y_train, cv=10, scoring='precision')recall = cross_val_score(classifier, X_train, y_train, cv=10, scoring='recall')

但这导致了一个ValueError错误:

ValueError: pos_label=1 is not a valid label: array(['ham', 'spam'], dtype='|S4') 

这是与数据有关的问题(我应该将标签二值化吗?)还是cross_val_score函数发生了变化?

提前感谢!


回答:

为了计算召回率和精确度,数据确实需要进行二值化处理,像这样:

from sklearn import preprocessinglb = preprocessing.LabelBinarizer()lb.fit(y_train)

进一步来说,我很惊讶在计算准确率时不需要对数据进行二值化:

accuracy = cross_val_score(classifier, X_train, y_train, cv=10)

这是因为准确率公式并不真正需要关于哪个类别被视为正类或负类的信息:(TP + TN) / (TP + TN + FN + FP)。我们确实可以看到TP和TN是可以互换的,但对于召回率、精确度和F1值来说则不是这样。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注