我想使用最大熵模型实现自己的情感分析,不使用任何API。对于我的最大熵模型,最佳的特征f(c,d)是什么?我有三个类别:正面、负面和中性
回答:
情感分析中使用最广泛且有效的特征是一元语法。二元语法也可以使用,但它们是否真正有用一直存在争议。
请注意,在情感分析中使用一元语法/二元语法的频率值并不会显著改善结果;因此,通常只需提取词类,并使用布尔值来表示它们在文本中的存在与否就足够了。
重要的是在提取这些特征之前如何预处理文本。例如,除了将词元小写化外,处理否定范围可以在提取一元语法特征时提高结果。
无论如何,情感分析是一个广阔的领域。你会发现不同的特征提取策略可能会根据你需要执行的特定分析类型(例如,基于特征的分析、主观性分析、极性分析等)产生不同的结果。
你可以在这里找到开始所需的几乎所有内容:
- http://sentiment.christopherpotts.net
- Liu, Bing. “Sentiment analysis and opinion mining.” Synthesis Lectures on Human Language Technologies 5.1 (2012): 1-167.
- Pang, Bo, and Lillian Lee. “Opinion mining and sentiment analysis.” Foundations and trends in information retrieval 2.1-2 (2008): 1-135.