支持向量机加速训练算法研究

来源 :河北大学 | 被引量 : 0次 | 上传用户:kingknife2000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
支持向量机(SVM)是由Vapnik与其合作者提出的,它是基于统计学习理论的一门新兴学科,是统计学习理论的VC维理论和结构风险最小化理论的具体实现。SVM主要解决小样本问题,在模型的复杂度和学习能力之间寻求最佳折衷,目的在于获得最好的泛化能力。SVM算法成功应用于很多领域,但是在实际应用中也显现出一些缺点,如计算量大,速度慢,依赖经验选择参数等,其中速度问题在很大程度上限制了SVM的应用,成为SVM方法在大规模实用中受到限制。因此在保证分类精度变化不大的情况下,加快支持向量机的训练速度对SVM学习的研究具有重要的理论意义和使用价值。本文主要的研究工作是:针对支持向量机训练速度慢的问题,在现有支持向量机加速训练算法的基础上,寻找一种新的SVM加速训练算法。SVM训练速度慢的主要原因是大量的非支持向量参与训练过程,从而进行了大量的二次规划计算,导致分类计算量大、分类速度慢。基于此理论,在本篇文章中,我们首先提出了一种算法:一种基于KKT条件的SVM分块训练算法,它通过分块训练来减小二次规划问题的规模,并利用KKT条件来保留可能的支持向量集,从而保证了在分类精度变化不大的情况下,加快了SVM的训练速度。基于此算法,我们又提出了一种加速算法:一种基于KKT条件的SVM加速训练算法,它在分块学习之前,对训练集进行去样例处理,首先去掉那些与决策函数建立无关的向量,然后再进行分块学习,从而加速SVM的训练。理论分析和仿真实验都证明了该算法的有效性。
其他文献
本文主要运用了拟线性化方法和广义拟线性化方法讨论了不同类型的积分微分方程的解的收敛性,达到了提高解的收敛速度的目的。全文其分五章。   第一章简述了积分微分方程系
图像处理广泛地运用于现代生活的各个领域.图像复原是图像处理的基础步骤,图像分割是从图像处理到图像分析的关键步骤.因此,改进图像复原和分割的方法,提出相应的模型和算法
本文考虑高维空间的区域中的具有两个特征矩阵的Beltrami方程组Dtf(x)H(x)Df(x)= J(x,f)2/nG(x)这里H(x)= diag(21 (x),22(x), ···,2n(x))为对角阵,detH(x)= 1,and G(x)∈ S(n)为正
本文主要研究的是仿射Weyl群E8a-值等于6的双边胞腔W2⑹中的左胞腔,找出了双边胞腔W2⑹中的三组左胞腔代表元系,画出了它们的左胞腔图,并给出了W2⑹中所含的特异对合元。    
本论文主要研究结构动力模型修正中一类二次特征值反问题的中心对称解及其最佳逼近.设,如果,则称A为n阶中心对称矩阵.本文研究的一类二次特征值反问题具体是指构造n阶中心对称矩
图像重建技术是一种可以获得物体内部结构或者功能的图像而不对物体造成损伤的技术。目前,不完全数据重建问题和快速成像问题是图像重建技术的研究热点,这些问题都可以归结为
2017年10月9日,党的十九大召开前夕,91投资、91文化、91金融、91实业创始人、董事长、CEO许泽玮出席了中国共产党员基层年轻代表中外记者见面会。在9位代表中,许泽玮是唯一一名非公企业人士、唯一一名企业家、唯一一名创业者,也是唯一一名互联网行业的代表。  “今天现场的记者朋友们手机用的软件,大部分都是中国创业者做的。在五年前,中国互联网行业还在学习外国,现在,是全世界在学习中国。中国能缔造
本文主要研究求解无约束优化问题的拟牛顿算法,提出了三个新的拟牛顿算法.主要内容如下:   第二章基于新拟牛顿方程,结合BFGS类修正公式构造了一个新的拟牛顿算法,在一定假设