聚类中的范畴属性处理方法的研究与实现

来源 :长沙理工大学 | 被引量 : 0次 | 上传用户:qlj403740087
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术的发展,数据归属变得复杂、难以被完全统计,非预分类数据快速增长。对于非预分类数据的挖掘,聚类成为优良解法。作为硬聚类算法的典型代表,K-means在处理速度和伸缩性上具有明显优势和不可替代的地位,但其对于非值属性不具备有处理能力。同时由于均值只能处理数值型数据,大多范畴属性聚类的研究工作集中在k-modes或K-prototype的基础上,少有工作对数据进行整体考虑。因而K-modes和K-prototype存在的属性“消融”缺陷一直存在。本文提出了一种新的距离计算方法和计数表结构,并介绍了由k-means发展而来的、在范畴属性聚类中获得了良好、稳定的聚类结果的范畴属性聚类方法。本文提出的EFficient EK-means与k-modes的时间复杂度为同一量级。1.提出了一种聚类算法中的范畴属性的处理方法EK-means。通过选取随机中心并使用海鸣威距离完成初始聚类,获得初始簇。之后延展均值距离的数学含义,将其使用到范畴属性中,得到范畴属性均值距离的计算方式,使簇可以被作为整体考虑。将K-means的可处理数据类型扩展到范畴属性数据,并对非对称数据具有处理意义。本文在来自UCI的蘑菇集上对范畴属性均值距离的可用性、准确性和时间复杂度方面进行了实验,结果表明范畴属性均值距离可以用于范畴属性的聚类。同时,相比较于K-modes,EK-means可获得平均10.7%的准确度提升以及超两倍的稳定性。2.提出了一种基于范畴属性均值距离的高效聚类方法Efficient EK-means。由于EK-means具有较高的时间复杂度,因此在EK-means的基础上引入数据表结构——计数表,对每个簇和簇内对象的值域进行统计,并通过迭代减少遍历数据集的次数,达到降低时间的复杂度的目的。本文在来自UCI的蘑菇集,国会投票数据集,汽车评估集和平衡秤四个范畴属性数据集上进行了对比实验,结果显示,对比EK-means,Efficient EK-means的时间复杂度下降了 n,时间复杂度为O(n);对比k-modes,Efficient EK-means在时间复杂度参数数量不变的前提下,最多可以提升16%的准确度,同时具有更稳定的聚类结果。
其他文献
本文针对渤海油田目前应用的调驱技术效果差异大的问题,以SZ36-1油田为对象,采用室内实验的方法,以调驱剂的流变性、注入性、运移性、封堵性和驱油效果为指标,对AP-P4溶液、A
数据清洗是将电力数据应用于电网运行与维护中的一个关键步骤,有助于提高数据质量和数据利用率。数据清洗通过填充缺失值、平滑噪声数据和识别离群点来提高数据质量,但是在实际应用中,广域量测系统(Wide Area Measurement System,WAMS)大数据、高响应的特征导致很难获取足够的带标签训练集,“数据海量,信息匮乏”仍是电网运行规划面临的重要问题。与有监督学习相比,无监督学习更加适用于难
2016年,国务院发布了《推行普惠金融发展规划(2016-2020年)》,提出到2020年建立普惠金融服务体系。在传统金融服务排斥的乡镇,按照供给侧结构性改革的要求,继续深化普惠金融在农村的发展深度。进入新时代,伊宁县农牧民在金融服务方面的需求随着经济生活水平的提高,逐渐注重金融服务的发展质量和多样性,不仅仅是支付转账等基础服务,包括基础需要上形成的金融服务安全的需要、保障的需要、社会公正的需要等
近年来,国家为大力扶持中小企业的发展及成长,出台了一系列普惠金融相关政策,解决了中小企业融资渠道少、融资成本高等问题,为这一群体提供了全方位的金融服务支持。各家商业银行根据该政策,纷纷制定了针对中小企业的融资产品。中国银行作为四大国有商业银行之一,为响应国家政策,推出了中银“信贷工厂”业务及一系列相关金融产品,专门为中小企业提供各类融资服务。中国银行南湖路支行地处乌鲁木齐市天山区、水磨沟区老城区,
随着经济的快速发展,我国对石油的需求与日俱增,因而提高原油采收率已成为世界各国普遍关注的问题。聚合物驱作为提高原油采收率的一种重要方法,目前已向高温高盐及稠油油藏
习近平在党的十九大报告中指出,“要全面贯彻党的教育方针,落实立德树人根本任务”。习近平关于教育的重要论述赋予了立德树人丰富的内涵与时代价值,更加深刻地揭示了新时代人才培养的本质规律,指明了教育改革发展的方向。当前我国高校实现立德树人根本任务存在内涵认知模糊、追求功利太强、教育改革不力、保障机制不全等困境。随着经济全球化、文化多元化、科技突飞猛进以及社会矛盾的日益凸显,新时代高校立德树人根本任务的路
本课题组从土壤中筛选得到短短芽胞杆菌ch2-22,研究室前期试验结果表明该菌株发酵能够产生抗菌物质,3 kDa的短杆菌肽,可以有效抑制灰霉病原菌、炭疽病原菌、叶枯病原菌等多种
本论文主要研究了干胶法合成Beta沸石及其改性研究。运用XRD、SEM、TEM、NH3-TPD、FITR和XRF等多种技术进行表征,采用乙酰丙酸和乙醇的酯化反应作为探针反应评价沸石的催化性
随着经济的迅速发展,国家对电能的使用要求越来越高,输电线路的电压等级就需要不断地提高。输电线路巡检成为当今电力行业的重要工作部分。高压输电线路基本上都位于野外,且传输距离长,环境复杂,在大风、雨雪、雷击天气,很容易受到破坏。为了提高高压输电线路巡检效率,很多地区采取了无人机巡检的方法,收到了较好的效果。然而无人机的续航时间很短,这也是目前无人机的应用中存在的最大问题。本论文针对此问题,创新性的提出