条件拆分数据为训练集和测试集(Pandas)

我有一段使用Python进行预测任务的代码。任务是预测一家公司在2015年至2019年间的销售情况。

我想将数据拆分为训练集和测试集。

但问题是,我想使用2015年至2018年的数据来训练模型,并在2019年的数据上测试模型。

如何使用train_test_split和ShuffleSplit进行这种条件拆分数据,

X_train = df.iloc[train_index]X_test = df.iloc[test_index]y_train = X_train.Salesy_test = X_test.Sales

回答:

由于一开始就设定了条件,你会失去机器学习预处理中使用洗牌方法的好处。因此,我建议不要在这种条件下进行训练-测试拆分(我认为这会导致偏见结果)。不过,如果你必须这样做,可以尝试以下方法:

train = your_data[your_data['year_column'] < 2019]test = your_data[your_data['year_column'] == 2019]X_train = train.loc[:, train.columns != 'column_of_interest']y_train = train['column_of_interest']X_test = test.loc[:, test.columns != 'column_of_interest']y_train = test['column_of_interest']

Related Posts

使用LSTM在Python中预测未来值

这段代码可以预测指定股票的当前日期之前的值,但不能预测…

如何在gensim的word2vec模型中查找双词组的相似性

我有一个word2vec模型,假设我使用的是googl…

dask_xgboost.predict 可以工作但无法显示 – 数据必须是一维的

我试图使用 XGBoost 创建模型。 看起来我成功地…

ML Tuning – Cross Validation in Spark

我在https://spark.apache.org/…

如何在React JS中使用fetch从REST API获取预测

我正在开发一个应用程序,其中Flask REST AP…

如何分析ML.NET中多类分类预测得分数组?

我在ML.NET中创建了一个多类分类项目。该项目可以对…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注