我在使用knncat的knncat函数对汽车数据进行KNN分析时遇到了问题。我的训练集大约有700,000个观察值。当我尝试实施分析时,出现了以下情况。我尝试在读取数据时使用完整案例方法来移除NA值。我不确定如何处理这些错误或者它们意味着什么。
kdata.training = kdataf[ind==1,]kdata.test = kdataf[ind==2,]kdata_pred = knncat(train = kdata.training, test = kdata.test, classcol = 4)
在knncat(train = kdata.training, test = kdata.test, classcol = 4)中发生错误:某些类别只有一个成员。请检查”classcol”
当我尝试运行训练集和测试集的一个小部分(分别为200和70个观察值)时,我得到了以下错误:
kdata_strain = kdata.training[1:200,]kdata_stest = kdata.test[1:70,]kdata_pred = knncat(train = kdata_strain, test = kdata_stest, classcol = 4)
在knncat(train = kdata_strain, test = kdata_stest, classcol = 4)中发生错误:某些因子有空级别
这是对kdataf调用str方法的结果,kdataf是上面数据的采样数据框:
str(kdataf)'data.frame': 1159712 obs. of 9 variables: $ vehicle_sales_price: num 13495 11999 14499 12495 14999 ... $ week_number: Factor w/ 27 levels "1","2","3","4",..: 11 10 13 10 10 9 18 10 10 10 ... $ county: Factor w/ 219 levels "Anderson","Andrews",..: 49 49 49 49 49 49 49 49 49 49 ... $ ownership_code : Factor w/ 23 levels "1","2","3","4",..: 11 11 3 1 11 11 11 11 11 11 ... $ X30_days_late : Factor w/ 2 levels "0","1": 1 1 2 1 1 1 1 1 1 1 ... $ X60_days_late : Factor w/ 2 levels "0","1": 1 1 1 1 1 1 2 1 1 1 ... $ penalty : num 0 0 55.3 0 0 ... $ processing_time : int 28 24 32 29 19 20 63 27 28 24 ... $ transaction_code : Factor w/ 2 levels "TITLE","WDTA": 2 2 2 2 2 2 2 2 2 2 ...
种子被设置为’1234’,训练数据与测试数据的比例为2:1
回答:
首先,我对R知之甚少,所以请谨慎对待我的回答。我也遇到了同样的问题,这看起来很奇怪,因为数据中没有NA值。起初我认为可能是数据中包含了像’, /等特殊字符。但事实并非如此,当我在定义训练集后添加以下三行代码后,knncat算法可以处理这些字符(我使用data.table因为我的数据量很大):
write.csv(train, file="train.csv")train <- fread("train.csv", sep=",", header=T, stringsAsFactors=T)train[,V1:=NULL]
然后,就不会再出现’某些因子有空级别’或’某些类别只有一个成员。请检查”classcol”‘的消息了。我知道这不是问题的真正解决方案,但至少,你可以完成你的工作。希望对你有帮助。