如何在不同语言的文本中检测年龄的特征?

我有一个涉及多种语言的文本分类任务。我希望创建一个从文本中提取年龄的特征,年龄的分类包括:18-2425-3435-4950-xx。我的语料库只有推文。我已经尝试使用所有推文,但性能非常低(0.66)。有什么方法可以处理这个任务吗?提前感谢。


回答:

由于这仍然是一个研究任务,我建议查看几篇科学论文(链接和下面的摘要主要来自我们论文的“相关工作”部分 – 遗憾的是,原文是俄文,所以我对谷歌翻译做了一些编辑)。

因此,请查看这些按年份标记的作品:20092010201120132014

总结如下:你应该寻找或创建带标签的语料库,并使用以下特征进行监督机器学习:

  1. 文本特征:单词和字符的n-gram,
  2. 风格特征:词性、俚语、平均句子长度、标点符号、首字母缩写、表情符号等,
  3. 社交网络特征:用户的好友数量、用户页面上显示的帖子数量、总帖子数量、用户每篇帖子的平均评论数量。

Related Posts

使用LSTM在Python中预测未来值

这段代码可以预测指定股票的当前日期之前的值,但不能预测…

如何在gensim的word2vec模型中查找双词组的相似性

我有一个word2vec模型,假设我使用的是googl…

dask_xgboost.predict 可以工作但无法显示 – 数据必须是一维的

我试图使用 XGBoost 创建模型。 看起来我成功地…

ML Tuning – Cross Validation in Spark

我在https://spark.apache.org/…

如何在React JS中使用fetch从REST API获取预测

我正在开发一个应用程序,其中Flask REST AP…

如何分析ML.NET中多类分类预测得分数组?

我在ML.NET中创建了一个多类分类项目。该项目可以对…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注