我有一个表格,里面有大约5000个术语,我想将它们分组到有意义的类别中。
例如,一些术语是:
NissanFordArrestedJeepCourt
结果应该是Nissan、Ford、Jeep被分到一个类别,而Arrested和Court被分到另一个类别。我查看了斯坦福分类器NLP。我是否可以假设这是我应该选择的正确工具?
回答:
如果没有很多专有名词,我建议你使用NLTK。你可以使用WordNet的语义相似性作为特征,并尝试对这些词进行聚类。这里有一个关于如何做的讨论。
要使用斯坦福分类器,你需要知道你想要多少个词桶(类别)。此外,我认为它是为文档而不是词设计的。