如何从Scikit-learn的拟合模型中获取属性列表?

在Scikit-learn中,有没有办法获取已使用模型的特征(属性)列表(或整个训练数据的表格)?我使用了一些预处理方法,如特征选择,我希望知道哪些特征被选中,哪些特征被移除。例如,我使用了随机森林分类器和递归特征消除方法。


回答:

选定特征的掩码存储在RFE对象的’_support’属性中。

查看文档:http://scikit-learn.org/stable/modules/generated/sklearn.feature_selection.RFE.html#sklearn.feature_selection.RFE

以下是一个示例:

from sklearn.datasets import make_friedman1from sklearn.feature_selection import RFEfrom sklearn.svm import SVR# 加载数据集X, y = make_friedman1(n_samples=50, n_features=10, random_state=0)estimator = SVR(kernel="linear")selector = RFE(estimator, 5, step=1)X_new = selector.fit_transform(X, y)print selector.support_ print selector.ranking_

将显示:

array([ True,  True,  True,  True,  True,      False, False, False, False, False], dtype=bool)array([1, 1, 1, 1, 1, 6, 4, 3, 2, 5]) 

请注意,如果你想在RFE模型中使用随机森林分类器,你会遇到以下错误:

AttributeError: 'RandomForestClassifier' object has no attribute 'coef_'

我在这个讨论中找到了一个解决方法:使用Scikit-learn对随机森林进行递归特征消除

你需要像这样重写RandomForestClassifier类:

class RandomForestClassifierWithCoef(RandomForestClassifier):    def fit(self, *args, **kwargs):        super(RandomForestClassifierWithCoef, self).fit(*args, **kwargs)        self.coef_ = self.feature_importances_

希望这对你有帮助 🙂

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注