改进k-means聚类

我的计算机视觉讲义中提到,如果我们知道聚类的标准差,k-means聚类算法的性能可以得到改善。这是怎么回事呢?

我的想法是,我们可以先通过基于直方图的分割来利用标准差得到更好的初始估计。你觉得呢?感谢任何帮助!


回答:

你的讲师可能想到的是Veenman等人2002年的论文。基本思路是,你设定每个聚类允许的最大方差。你从与数据点数量相同的聚类开始,然后通过以下方式“演化”聚类:

  • 如果合并后的聚类的方差低于阈值,则合并邻近的聚类
  • 如果一个聚类的方差高于阈值,则隔离“远”的元素
  • 或者如果在邻近聚类之间移动一些元素可以减少平方误差和,则进行移动

(这种演化作为一种全局优化程序,可以避免k-means中初始聚类均值分配的不良后果)

总之,如果你知道方差,你就知道聚类应该有多大变化,因此更容易例如检测异常值(通常应该放入单独的聚类中)。

Related Posts

使用LSTM在Python中预测未来值

这段代码可以预测指定股票的当前日期之前的值,但不能预测…

如何在gensim的word2vec模型中查找双词组的相似性

我有一个word2vec模型,假设我使用的是googl…

dask_xgboost.predict 可以工作但无法显示 – 数据必须是一维的

我试图使用 XGBoost 创建模型。 看起来我成功地…

ML Tuning – Cross Validation in Spark

我在https://spark.apache.org/…

如何在React JS中使用fetch从REST API获取预测

我正在开发一个应用程序,其中Flask REST AP…

如何分析ML.NET中多类分类预测得分数组?

我在ML.NET中创建了一个多类分类项目。该项目可以对…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注