StackOverflow标签预测器…请建议一种机器学习方法?

我正在尝试预测StackOverflow问题的标签,但我无法决定哪种机器学习算法是正确的途径。

输入:我已经挖掘了StackOverflow的问题作为数据集,我已经对数据集进行了分词,并从中移除了停用词和标点符号。

我尝试过的事情:

  1. TF-IDF
  2. 在数据集上训练了朴素贝叶斯,然后输入用户定义的输入来预测标签,但效果不佳
  3. 线性SVM

我应该使用监督学习还是无监督学习的机器学习算法?如果可能的话,请从头开始建议一个正确的机器学习方法。附注:我有StackOverflow上所有标签的列表,这会有什么帮助吗?谢谢


回答:

我会尝试使用多层感知机(MLP)。为了开始,我会选择一个合理小的关键词输入集,并对其进行编码(例如[1..100]),然后为一个合理小的输出标签集进行训练。

附注:对于此任务,无监督学习通常是不利的,因为许多涉及不同标签的问题内容非常相似,很可能会被聚类在一起。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注