我正在使用 LibSVM 在一个高度不平衡的数据集上训练 SVM。输出中 10% 为真,90% 为假。我读到了关于权重参数的内容:
-wi weight: set the parameter C of class i to weight*C, for C-SVC (default 1)
每个类别的参数应该如何设置?这个权重参数直观上意味着什么,我们应该如何使用它?
回答:
权重参数控制 SVM 优化的偏斜性。也就是说,权重较高的类别会更重要。如果一个类别的权重是另一个类别的三倍,那么低权重类别的实例可以比高权重类别的实例离 libsvm 确定的类别边界远三倍,以获得相同的优化值。
如何使用这个参数完全取决于你——你可以设置两个类别的权重相等(即真值的权重为 9),但这样设置是否能实际改善结果则是另一回事。
我建议你尝试不同的权重,看看会发生什么。