[发明专利]一种数据挖掘系统中数据聚类的方法、系统及装置有效
申请号: | 201010102976.1 | 申请日: | 2010-01-28 |
公开(公告)号: | CN102141988A | 公开(公告)日: | 2011-08-03 |
发明(设计)人: | 高丹;徐萌;邓超;罗治国;周文辉;孙少陵;陶涛;何鸿凌;何清;赵卫中;马慧芳 | 申请(专利权)人: | 中国移动通信集团公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 郭润湘 |
地址: | 100032 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 挖掘 系统 方法 装置 | ||
1.一种数据挖掘系统中数据聚类的方法,其特征在于,包括:
A、主控节点对数据对象进行分块,将分块后的数据对象分发给至少两个计算节点;
B、以串行方式或并行方式控制所述每个计算节点执行:
计算利用保存的数据对象中的非中心点对象分别替换确定的设定个中心点对象后对应的替换代价;
C、所述主控节点获取所述每个计算节点的执行结果,并判断获取的执行结果中是否存在小于零的替换代价;
若是,确定替换同一中心点对象的多个非中心点对象中具有小于零且最小替换代价的非中心点对象,利用确定的所述非中心点对象替换所述中心点对象,并返回步骤B;
若否,则将当前各中心点对象及其对应簇中包括的数据对象确定为最终聚类结果并结束。
2.如权利要求1所述的方法,其特征在于,上述步骤B中,计算利用保存的数据对象中的非中心点对象分别替换确定的设定个中心点对象后对应的替换代价,包括:
针对所述保存的数据对象中每个第一非中心点对象,以串行方式或并行方式执行:
B1、选择一个未被选择过的第一中心点对象,以串行方式或并行方式执行步骤B11至步骤B14:
B11、从保存的数据对象中除所述第一非中心点对象以外的非中心点对象中选择一个未被选择过的第二非中心点对象;
B12、计算选择的所述第二非中心点对象分别与所述第一非中心点对象以及确定的设定个中心点对象中除所述第一中心点对象以外的中心点对象的距离;
B13、计算所述距离中的最小距离减去所述第二非中心点对象与其当前归属的簇对应中心点对象的距离得到的差值;
B14、判断保存的数据对象中除所述第一非中心点对象以外的非中心点对象是否均被选择过;
若否,返回步骤B11;
若是,将通过所述步骤B13计算得到的差值相加得到所述第一非中心点对象替换所述第一中心点对象的替换代价,并执行步骤B2;
B2、判断保存的数据对象中所有中心点对象是否均被选择过;
若否,返回步骤B1;
若是,结束。
3.如权利要求1所述的方法,其特征在于,所述步骤C中,确定替换同一中心点对象的多个非中心点对象中具有小于零且最小替换代价的非中心点对象,利用所述非中心点对象替换所述中心点对象,包括:
根据获取的执行结果中各替换代价对应的中心点对象,分别将对应同一中心点对象的替换代价归为一类,并针对所述每一类替换代价以串行方式或并行方式执行:
利用当前类替换代价中具有小于零且最小替换代价的非中心点对象替换当前类对应的中心点对象。
4.如权利要求1所述的方法,其特征在于,在执行完所述步骤A后,还包括:
从所述待处理数据中选择设定个数据对象作为中心点对象,并以串行方式或并行方式控制所述各计算节点执行:
计算保存的各数据对象到所述设定个中心点对象的距离;
将所述各数据对象归类至与其具有最小距离的中心点对象所表示的簇中。
5.如权利要求4所述的方法,其特征在于,将所述各数据对象归类至与其具有最小距离的中心点对象所表示的簇中,包括:
对所述各数据对象添加用于表示与其具有最小距离的中心点对象所表示的簇的标识。
6.一种数据挖掘系统中数据聚类的系统,其特征在于,包括控制节点以及至少两个计算节点;其中,
所述控制节点,用于对数据对象进行分块,将分块后的数据对象分发给所述至少两个计算节点,并以串行方式或并行方式控制所述每个计算节点执行:计算利用保存的数据对象中的非中心点对象分别替换确定的设定个中心点对象后对应的替换代价;以及,获取所述每个计算节点的执行结果,并判断获取的执行结果中是否存在小于零的替换代价;若是,确定替换同一中心点对象的多个非中心点对象中具有小于零且最小替换代价的非中心点对象,利用所述非中心点对象替换所述中心点对象,并继续以串行方式或并行方式控制所述每个计算节点执行:计算利用保存的数据对象中的非中心点对象分别替换确定的设定个中心点对象后对应的替换代价,直到所述每个计算节点的执行结果中不存在小于零的替换代价;若否,则将当前各中心点对象及其对应簇中包括的数据对象确定为最终聚类结果并结束;
所述计算节点,用于根据所述控制节点的控制,计算利用保存的数据对象中的非中心点对象分别替换确定的设定个中心点对象后对应的替换代价。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团公司,未经中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201010102976.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电源模块及网络设备
- 下一篇:一种图形数据库联机事务数据恢复的方法及系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置