【摘 要】
:
随着机器学习领域的发展,半监督学习和多任务学习引起了越来越多研究学者的关注。半监督学习和多任务学习的共同目的就是:不论额外的信息源是来自无标签的样本数据还是来自相关任务之间的共享信息,都可以被应用于监督学习,提高监督学习方法的性能。但是目前大多数的多任务学习方法都属于监督学习,在学习过程中需要大量有类别标签的样本数据;而半监督学习方法大多是针对单任务学习问题,忽略了相关任务(子问题)之间的关联信息
论文部分内容阅读
随着机器学习领域的发展,半监督学习和多任务学习引起了越来越多研究学者的关注。半监督学习和多任务学习的共同目的就是:不论额外的信息源是来自无标签的样本数据还是来自相关任务之间的共享信息,都可以被应用于监督学习,提高监督学习方法的性能。但是目前大多数的多任务学习方法都属于监督学习,在学习过程中需要大量有类别标签的样本数据;而半监督学习方法大多是针对单任务学习问题,忽略了相关任务(子问题)之间的关联信息。那么将多任务学习方法和半监督学习方法相结合,不仅能够充分学习有标签和无标签样本数据,而且能够学习混合样本数据之间的共享信息,帮助模型进一步提高泛化性能。在多任务学习体系中,最关键的问题就是如何挖掘相关任务之间的共享信息,总的来说,多任务学习的共享信息表示分为两种:基于参数的共享和基于约束的共享。论文对基于以上两种共享信息表示方法的算法进行了分析,因为大多数算法都是解决监督学习问题,所以本文结合半监督学习方法,在有标签的样本数据量较少的条件下,设计并验证了两种半监督多任务学习方法。首先,本文提出了基于参数共享的半监督多任务学习方法,该方法将基于l2范数正则化的最小二乘支持向量机与多任务学习相结合,假设每个相关任务的分类超平面函数由公共函数l0和私有函数l1组成,使得模型能够更好学习相关任务之间共享参数的信息。为了进一步学习无标签的样本数据,利用区域标注法和标签重置法来更新无标签的样本数据的类别标签。然后,在以改进多任务最小二乘支持向量机作为分类器来挖掘相关任务之间的参数共享信息的基础上,提出了基于约束共享的半监督多任务特征选择方法,该方法利用l2,1范数正则化项,充分利用相关任务的有标签和无标签的样本数据,学习每个任务的稀疏特征选择矩阵,同时通过给特征选择矩阵添加全局约束来挖掘所有任务的共享结构。最后我们分别在Dermatology数据集、Automobile和Vehicle Silhouettes数据集上验证了论文提出的两种半监督多任务学习方法的可行性和有效性。
其他文献
格鲁贝洛娃是著名的捷克花腔女高音歌唱家,在歌剧《纳索克斯岛的阿里安德涅》中饰演泽比涅塔一角,是她扬名歌剧舞台的起点。在随后的发展中,格鲁贝洛娃凭借着令人惊艳的演唱
专利“标准化”促进现代经济发展,同时也是专利权人实施价格垄断行为的绝佳武器。本文旨在帮助专利许可双方达成标准必要专利FRAND许可费,保障市场经济自由和许可双方当事人
<正> 武警部队的武器装备不仅是其战斗力的硬件因素,也是完成“执勤和处置突发事件为中心”任务的重要条件。武器装备的性能、质量、管理、使用如何,将直接关系武警部队战斗
目的研究人脑胶质瘤组织中微小RNA-374(microRNA-374,miR-374)的表达及其与临床病理特征之间的关系,探讨其在胶质瘤患者中的临床意义。方法采用RT-PCR法检测85例胶质瘤和30例
暑热伤害风险管理体系是保障军队院校新生军训顺利实施的重要组成部分。国防科技大学通过借鉴外军先进经验,进一步构建和完善了暑热伤害风险识别、评估体系和暑热伤害风险应
<正>成都蛟龙工业港是全国第一家民营工业高新技术产业开发园区,工业港由香港蛟龙集团投资开发,经过四年多时间的发展,蛟龙工业港现已在四川建成了两个园区——蛟龙工业港成
随着新一轮课程改革的推进,国家对人才的需要大大提高,学校对学生进行知识教授的同时,还要培养学生的核心素养。物理学科要注重核心素养的培养,特别是科学思维的培养。我国高中的教学容易忽视学生科学思维的培养,而高一学生科学思维水平相对较低,越来越多的学生认为物理学科很难。笔者在深刻理解科学思维的内涵基础之上,结合教育学的相关理论,以高一年级的三次代表性试卷的试题为例,运用教育测量理论知识从试卷的编制、信度
地质构造的三维可视化模型能够将复杂的地质构造情况、地质体的形态以三维的形式表现出来,可有效地应用于矿产资源勘查、油气勘探开发、煤田地质勘探、矿山生产和管理、地质
进入二十一世纪以来,我国高速铁路的发展受到了全世界的瞩目,截止2017年,我国高铁建设里程以2.5万公里的成绩位居世界首位,成功实现由高铁“跟随者”转向高铁“引领者”。目前从国内外学者对高铁建设的研究可知,高铁开通可以缩短区域间的“时空距离”,加快信息、人才、资本、知识等生产要素在区域间的流动,从而对区域社会经济发展产生不可忽视的影响。同时,我国正处于经济转型的新时期,创新作为推动经济持续增长的主