训练两个特征而不是一个

我有这段代码。我有两个特征。我如何将这两个特征一起训练?

from textblob import TextBlob, Word, Blobberfrom textblob.classifiers import NaiveBayesClassifierfrom textblob.taggers import NLTKTaggerimport reimport nltkdef get_word_before_you_feature(mystring):    keyword = 'you'    before_keyword, keyword, after_keyword = mystring.partition(keyword)    before_keyword = before_keyword.rsplit(None, 1)[-1]    return {'word_after_you': before_keyword}def get_word_after_you_feature(mystring):    keyword = 'you'    before_keyword, keyword, after_keyword = mystring.partition(keyword)    after_keyword = after_keyword.split(None, 1)[0]    return {'word_after_you': after_keyword}    classifier = nltk.NaiveBayesClassifier.train(train)lang_detector = NaiveBayesClassifier(train, feature_extractor=get_word_after_you_feature)lang_detector = NaiveBayesClassifier(train, feature_extractor=get_word_before_you_feature)print(lang_detector.accuracy(test))print(lang_detector.show_informative_features(5))

这是我得到的输出。

word_before_you = ‘do’ refere : generi = 2.2 : 1.0
word_before_you = ‘when’ generi : refere = 1.1 : 1.0

看起来它只获取了最后一个特征。我如何让分类器同时训练两个特征而不是一个?


回答:

您定义了lang_detector两次,第二次定义直接覆盖了第一次。您应该定义一个特征提取函数,该函数返回一个特征字典,每个特征名称作为键。在您的案例中,您可以定义get_word_features(mystring),它可以返回这样的字典:

return {      'word_after_you': after_keyword,      'word_before_you': before_keyword       }

其余部分与您之前做的一样:将特征检测函数传递给分类器的构造函数,并检查结果。

lang_detector = NaiveBayesClassifier(train, feature_extractor=get_word_features)lang_detector.show_most_informative_features(5)

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注