我正在开发一个用户可以提问的Web应用程序。这些问题应该根据问题内容、标题、用户数据、地区等一些标准进行分类。接下来,这些问题应该以某种方式处理:对于一些需要额外信息的请求应该发送出去,其他应该被删除或标记为垃圾邮件,还有一些应该直接发送给某个专家处理。
问题在于用户无法自己选择正确的分类,这是一件相当复杂的事情,而且用户可能会作弊。
有没有什么方法可以自动完成这个任务?目前有几个人在做这项工作,过滤问题。或许已经存在一些现成的解决方案。
回答:
这真的是一个非常复杂的任务。你应该考虑使用有监督的机器学习分类算法。你可以尝试使用类似于垃圾邮件过滤的算法(https://en.wikipedia.org/wiki/Naive_Bayes_spam_filtering)
- 收集一些之前已经分类的问题(标记的示例)。
- 收集一些用于问题分类的词汇(识别组)。
- 处理问题文本,移除“停用词”并将词汇替换为它们的词根。
- 将问题文本、标题、用户数据等映射为一些数字(问题向量)。
- 使用像SVM这样的算法来创建和使用分类器(模型)。
但这只是一个非常一般的做法,你可以参考一下。没有更多的具体细节,很难说更多。如果没有额外的细节,很难给出更具体的建议。我认为你不太可能找到现成的解决方案,这是一个相当特定的任务。但当然,你可以使用很多机器学习框架。