在Pandas中对列标签进行编码以用于机器学习

我正在处理一个用于机器学习的汽车评估数据集,数据集如下所示

buying,maint,doors,persons,lug_boot,safety,classvhigh,vhigh,2,2,small,low,unaccvhigh,vhigh,2,2,small,med,unaccvhigh,vhigh,2,2,small,high,unaccvhigh,vhigh,2,2,med,low,unaccvhigh,vhigh,2,2,med,med,unaccvhigh,vhigh,2,2,med,high,unacc

我想将这些字符串按列转换为唯一的枚举整数。我了解到pandas.factorize()是可行的方法,但它只能作用于一列。我如何用一个命令一次性对整个数据框进行因子化处理呢?

我尝试使用lambda函数,但它不起作用。

df.apply(lambda c:pd.factorize(c),axis=1)

输出结果:

   0     ([0, 0, 1, 1, 2, 3, 4], [vhigh, 2, small, low,...    1     ([0, 0, 1, 1, 2, 3, 4], [vhigh, 2, small, med,...    2     ([0, 0, 1, 1, 2, 3, 4], [vhigh, 2, small, high...    3     ([0, 0, 1, 1, 2, 3, 4], [vhigh, 2, med, low, u...    4       ([0, 0, 1, 1, 2, 2, 3], [vhigh, 2, med, unacc])    5     ([0, 0, 1, 1, 2, 3, 4], [vhigh, 2, med, high, ...

我看到了编码后的值,但无法从上面的数组中提取出来


回答:

Factorize返回一个包含(值, 标签)的元组。你只需要数据框中的值部分。

In [26]: cols = ['buying', 'maint', 'lug_boot', 'safety', 'class']In [27]: df[cols].apply(lambda x: pd.factorize(x)[0])Out[27]:    buying  maint  lug_boot  safety  class0       0      0         0       0      01       0      0         0       1      02       0      0         0       2      03       0      0         1       0      04       0      0         1       1      05       0      0         1       2      0

然后将这些值与数值数据合并。

不过,这里需要提醒一下:这种方法暗示了“低”安全性和“高”安全性与“中”安全性之间的距离是相同的。你可能更适合使用pd.get_dummies

In [37]: dummies = []In [38]: for col in cols:   ....:     dummies.append(pd.get_dummies(df[col]))   ....:     In [39]: pd.concat(dummies, axis=1)Out[39]:    vhigh  vhigh  med  small  high  low  med  unacc0      1      1    0      1     0    1    0      11      1      1    0      1     0    0    1      12      1      1    0      1     1    0    0      13      1      1    1      0     0    1    0      14      1      1    1      0     0    0    1      15      1      1    1      0     1    0    0      1

get_dummies有一些可选参数来控制命名,你可能会用到这些参数。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注