聚类分析(文末送书)

简介: 聚类分析中常用数据结构有数据矩阵和相异度矩阵

目录


聚类分析是什么


一、 定义和数据类型


聚类应用


聚类分析方法的性能指标


聚类分析中常用数据结构有数据矩阵和相异度矩阵


聚类分析方法分类


二、K-means聚类算法


划分聚类方法对数据集进行聚类时包含三个要点


K-Means算法流程:


K-means聚类算法的特点


三、k-medoids算法


基本思想


K-medoids算法特点


四、送书活动


五、抽奖规则


聚类分析是什么

聚类分析是一种寻找数据之间内在结构的技术,将数据对象的集合分组为由类似的对象组成的多个类的分析过程。聚类把全体数据实例组织成一些相似组,而这些相似组被称作簇。处于相同簇中的数据实例彼此相同,处于不同簇中的实例彼此不同。聚类技术通常又被称为无监督学习,与监督学习不同的是,在簇中那些表示数据类别的分类或者分组信息是没有的。


一、 定义和数据类型

聚类应用

市场营销: 帮助营销人员帮他们发现顾客中独特的群组,然后利用他们的知识发展目标营销项目

土地利用: 在土地观测数据库中发现相似的区域

保险: 识别平均索赔额度较高的机动车辆保险客户群组

城市规划: 通过房屋的类型、价值、地理位置识别相近的住房

地震研究: 沿着大陆断层聚类地震的震中

聚类分析方法的性能指标

可扩展性

自适应性

鲁棒性

可解释性

聚类分析中常用数据结构有数据矩阵和相异度矩阵


b482c88dce53f42d1c1f8a7fc0c98cf1_d54ee27645f64176825ddf88b463a1d0.png

27e391a69a7117344def98c6a181cf15_ed69ecd0c1294898897b065222ace202.png


聚类分析方法分类

基于划分、基于分层、基于密度、基于网络、基于模型


二、K-means聚类算法

划分聚类方法对数据集进行聚类时包含三个要点

选定某种距离作为数据样本间的相似性度量

选择评价聚类性能的准则函数

选择某个初始分类,之后用迭代的方法得到聚类结果,使得评价聚类的准则函数取得最优值


标准测试函数:


40eae9e1e2ef096e203be8805a55f7b9_8b6a764ba2d840dd86975ba6651dfd31.png


均值:

57b831d7c591aea643e9df88af5f932f_faf17bab73b74b7096d45a02364e13e1.png



K-Means算法流程:

输入:包含n个对象的数据集聚类个数k,最小误差e

输出:满足方差最小标准的k个聚类

①从n个数据对象中随机选出k个对象作为初始聚类的中心

②将每个类簇中的平均值作为度量基准,重新分配数据库中的

数据对象

③计算每个类簇的平均值,更新平均值

④循环(2)(3),直到每个类簇不在发生变化或者平均误差小于e


K-means聚类算法的特点

优点

简单、快速

算法尝试找出使平方误差函数值最小的k个划分据集

对处理大数据集,该算法是相对可伸缩的和高效率的


缺点


不适合于发现非凸面形状的簇,或者大小差别很大的簇


要求用户必须事先给出要生成的簇的数目K


对于“噪声”和孤立点数据敏感


对初值敏感


三、k-medoids算法

基本思想

k-medoids算法是一种聚类算法,与k-means算法相似,但它选择的中心点是簇中实际的数据点,而不是像k-means那样选择簇中心点的均值。


其基本思想是,给定一个数据集和聚类数k,随机选择k个点作为初始中心点,然后迭代以下两个步骤直到收敛:


1. 对于每个数据点,计算其与各中心点的距离,并将其划分到距离最近的簇中。


2. 对于每个簇,选择一个代表点(即中心点)来替换原来的中心点,使得代表点到簇中其他点的距离之和最小。


这个过程是一种优化过程,每次迭代会使得簇内的样本距离代表点更近,而簇间的距离更远,最终达到收敛。


与k-means算法不同,k-medoids算法不是适用于高维数据集,因为在高维空间中,欧几里得距离的性质会失效,需要使用更加复杂的距离度量方式。


K-medoids算法特点

优点:

1. 鲁棒性强:K-medoids算法采用一组代表性点(medoids)代表聚类簇,因此在数据噪声较大或者存在离群点的情况下,比k-means更加鲁棒。

2. 可解释性好:由于medoids是实际存在于数据集中的点,所以聚类结果更容易被理解和解释。

3. 适用于非凸数据集:相比k-means算法只适用于凸数据集,K-medoids算法可以处理非凸数据集的聚类问题。


缺点:

1. 运算速度慢:由于K-medoids算法需要计算每个点到medoid的距离,因此计算复杂度较高,时间复杂度为O(K*N^2),其中K为聚类簇数,N为数据点数。

2. 对初始值敏感:K-medoids算法的聚类结果取决于初始medoid的选择,因此需要多次随机初始化来获得更好的聚类结果。

3. 不适用于大数据分析:由于计算复杂度较高,K-medoids算法不适合处理大数据集。

目录
相关文章
|
7月前
|
BI
假设检验随想
假设检验随想
38 0
|
8月前
|
机器学习/深度学习 算法
R语言分类回归分析考研热现象分析与考研意愿价值变现
R语言分类回归分析考研热现象分析与考研意愿价值变现
|
8月前
|
数据采集 数据可视化 数据挖掘
数据分享|R语言逐步回归、方差分析anova电影市场调查问卷数据可视化
数据分享|R语言逐步回归、方差分析anova电影市场调查问卷数据可视化
|
Unix 索引
生信教程 | 基于PSMC估计有效群体大小
生信教程 | 基于PSMC估计有效群体大小
333 0
|
8月前
|
数据建模
R语言网络分析友谊悖论案例
R语言网络分析友谊悖论案例
R语言网络分析友谊悖论案例
|
8月前
|
机器学习/深度学习 算法 搜索推荐
数据分享|R语言谱聚类社会化推荐挖掘协同过滤电影社交网站Flixster数据集应用研究
数据分享|R语言谱聚类社会化推荐挖掘协同过滤电影社交网站Flixster数据集应用研究
|
8月前
|
数据采集 机器学习/深度学习 存储
MATLAB用改进K-Means(K-均值)聚类算法数据挖掘高校学生的期末考试成绩
MATLAB用改进K-Means(K-均值)聚类算法数据挖掘高校学生的期末考试成绩
|
8月前
|
数据可视化 搜索推荐 数据挖掘
R语言Apriori关联规则、kmeans聚类、决策树挖掘研究京东商城网络购物用户行为数据可视化
R语言Apriori关联规则、kmeans聚类、决策树挖掘研究京东商城网络购物用户行为数据可视化
|
8月前
|
机器学习/深度学习 数据采集 自然语言处理
【热门话题】常见分类算法解析
本文介绍了6种常见分类算法:逻辑回归、朴素贝叶斯、决策树、支持向量机、K近邻和神经网络。逻辑回归适用于线性问题,朴素贝叶斯在高维稀疏数据中有效,决策树适合规则性任务,SVM擅长小样本非线性问题,KNN对大规模数据效率低,神经网络能处理复杂任务。选择算法时需考虑数据特性、任务需求和计算资源。
127 0
|
8月前
|
机器学习/深度学习 资源调度 数据挖掘
r语言逻辑回归(对数几率回归,Logistic)分析研究生录取数据实例 原创 TRL 拓端研究室 拓端数据部落
r语言逻辑回归(对数几率回归,Logistic)分析研究生录取数据实例 原创 TRL 拓端研究室 拓端数据部落