使用Python中的机器学习进行文体测量

我们正在尝试构建一个系统,该系统可以接受小说作为输入,并提取作者的风格(如单词长度、句子长度、逗号的使用等),以便在提供任何已训练作者的匿名文档时,能够预测文档的作者身份。

我们的训练系统需要通过机器学习算法来学习作者的风格。使用朴素贝叶斯算法来训练我们的系统以提取每个作者的风格是否存在问题?如果有更好的替代方案,请告诉我?

我们正在尝试用Python来实现它。你能告诉我从哪里开始吗?提前感谢..


回答:

我建议你从查看scikit-learn开始:这是一个包含许多已实现算法的机器学习库。

对于文本分类,朴素贝叶斯通常不会取得最佳效果。请考虑支持向量机及其基于思想的算法,例如(你可以在scikit网站上搜索这些并从那里开始):SGDClassifier、PassiveAggressiveClassifier和LinearSVC。

Scikit也实现了朴素贝叶斯分类器,所以也请查看这些。

我不会建议你手动决定什么是作者风格的相关因素。请查看CountVectorizer(词袋模型)和TfidfVectorizer(词袋模型的tf-idf加权),这些应该能为你构建不错的初始特征。

Related Posts

使用LSTM在Python中预测未来值

这段代码可以预测指定股票的当前日期之前的值,但不能预测…

如何在gensim的word2vec模型中查找双词组的相似性

我有一个word2vec模型,假设我使用的是googl…

dask_xgboost.predict 可以工作但无法显示 – 数据必须是一维的

我试图使用 XGBoost 创建模型。 看起来我成功地…

ML Tuning – Cross Validation in Spark

我在https://spark.apache.org/…

如何在React JS中使用fetch从REST API获取预测

我正在开发一个应用程序,其中Flask REST AP…

如何分析ML.NET中多类分类预测得分数组?

我在ML.NET中创建了一个多类分类项目。该项目可以对…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注