【摘 要】
:
Tucker分解是一种被广泛使用的张量分解算法,其中带正交约束的Tucker分解算法能更好地获取原始数据的低秩近似,而非负约束通常能够让模型更具有可解释性。现有的非负Tucker分解算法主要存在以下问题:(1)超参数需要人工调节使得算法缺乏普适性;(2)计算过程中存在大量冗余运算;(3)大规模情况下,这些算法需要将数据整体载入内存,且仍可能存在多维n模积计算、SVD求解、矩阵求逆、QR分解等运算复
论文部分内容阅读
Tucker分解是一种被广泛使用的张量分解算法,其中带正交约束的Tucker分解算法能更好地获取原始数据的低秩近似,而非负约束通常能够让模型更具有可解释性。现有的非负Tucker分解算法主要存在以下问题:(1)超参数需要人工调节使得算法缺乏普适性;(2)计算过程中存在大量冗余运算;(3)大规模情况下,这些算法需要将数据整体载入内存,且仍可能存在多维n模积计算、SVD求解、矩阵求逆、QR分解等运算复杂度较高的中间过程,进而导致内存溢出、运算时间长等问题。为解决以上问题,本文提出一个基于非负正交约束的大规模Tucker分解算法NNO_LSTD(Large-Scale Tucker Decomposition algorithm based on Non-Negative Orthogonal constraints)。首先,针对超参数调节问题,本文通过利用正交性质,推导出正交性参数和因子矩阵列的闭式解,从而达到自适应调节参数的目的。其次,针对冗余运算问题,本文利用原始张量的稀疏性,仅对可见元素做针对性求解,并结合缓存算法,大大减少冗余计算量。最后,针对大规模的内存溢出及运算速度慢的问题,本文依据计算资源自适应调节算法,避免内存溢出;对于高复杂度的运算,本文提出相应的并行方案,加速了算法的运行速度。为了验证算法的有效性,本文就中小规模、稀疏性以及大规模三个不同角度进行实验,并将其应用于卷积神经网络的可解释性压缩以及张量补全。实验表明,与现有算法相比,所提算法有效解决上述问题,并且在中小规模下取得了更高的分解精度,而在大规模下仍能够有效运算。另外,由于算法利用了张量数据的稀疏性,使得稀疏数据下的运算速度得以显著提升。在深度卷积神经网络的可解释性压缩应用上,本文对网络中的卷积层添加非负性约束,并使用NNO_LSTD对卷积层权重核进行降维。实验表明,相比已有网络压缩方法,所提方法有效压缩网络大小,且特征图的可解释性大大提升。在张量补全的应用中,通过实验验证,算法在中小规模数据上具有优于已有算法的补全性能,并为大规模的张量补全提供了一种可行方案。
其他文献
随着节能减排和绿色铸造趋势的加强,交通领域安全结构件的轻量化变得尤为关键,尤其是新能源汽车领域,对高强、高韧、轻质铝合金安全结构件的需求愈加强烈。Al-Mg系铝合金具有密度小、比强度高、成形性好、耐腐蚀、可焊性好等优良性能,是交通领域安全结构件的较理想之选。然而,Al-Mg系铝合金因其较差的熔铸性能和较低的强度,限制了其作为交通领域安全结构件的使用。采用微合金化和特种铸造工艺是提高Al-Mg合金强
坝子是贵州的典型地貌,主要分布于山间盆地、河谷沿岸和山麓地带,地势平坦,土壤肥沃,是多山地区宝贵的耕地资源。贵州境内分布有一万多个坝子,约占贵州耕地的四分之一,是贵州主要的粮食产区及人口聚居交往的地区,出现了许多民族融合的现象。目前,学界较少涉及以坝子这一特殊地理单元作为研究对象,对贵州坝子地区的传统村落空间形态进行研究。为了丰富地区性坝子聚落的研究,增加民族融合地区的案例研究,经过两次的实地调研
羊栖菜(Sargassum fusiforme)是亚洲一些国家和地区常见的一种食用海藻,含有丰富的营养物质和矿物质元素,不仅具有较好的食用价值,也具备较高的药用价值,因此被誉为“长寿菜”,其主要的活性物质之一是多糖。本论文通过对羊栖菜多糖的提取、分离纯化、结构表征,以及对肠道屏障的保护作用进行研究,为羊栖菜多糖资源的开发利用提供理论依据。主要研究结果如下:(1)比较了不同提取方法(传统热水提取、纤
高压输电线路较长,常跨越在人烟稀少、地形复杂、气候恶劣的地区,一旦发生故障则极难查找;若能在线路故障后准确地定位故障点,有利于及时修复线路,保障电力系统的安全、稳定和经济运行。近年深度学习在输电线路故障定位方面开展了探索性研究,但现有故障定位深度学习模型对线路参数较为敏感,不同线路需专门构建相应仿真模型重新进行训练,制约了该类方法的推广应用。此外,我国高压直流输电线路横跨距离远,交流线路与直流线路
随着我国经济和交通事业的快速发展,车流量逐年增加,早期建设的桥梁老化、破损现象日趋严重,部分桥梁出现承载力不足或已达到设计基准期的状况,桥梁倒塌事故时有发生,并且我国逐步从注重桥梁建设阶段过渡到建设与管养并重阶段,桥梁健康检测越来越受到交通部门的重视。针对传统桥梁病害检测需要大量劳动力、检测效率低、漏检率大、成本高等问题,本文提出利用无人机获取桥梁表面图像,借助卷积神经网络和数字图像处理技术得到桥
新课改背景下,课堂教学模式不断创新,给学生提供了更多的学习方法,创新了课程知识的教学方法。阅读教学是初中英语课程教学中的一个重要组成部分,旨在培养学生良好的阅读能力,形成阅读技巧。初中英语阅读教学课程中,引入项目式学习法采取多种教学引导策略,将项目式学习融合进初中英语阅读教学中,对提高初中英语阅读教学的教学效果具有积极作用。
随着网络信息化的发展,通过网络传输的资源越来越多。传统的时间触发控制在每一离散时刻周期性地传输数据,此过程会传输大量冗余信息。围绕减少冗余信息传输这一问题,事件触发控制被提出。该方法因为采用非周期方式传输必要信号这一特点而广受关注。对于具有非线性,不确定性和强耦合等特点的实际系统,目前的事件触发控制研究主要采用零阶保持器机制使得在事件触发间隔中的传输信号保持不变。在对系统结构有一定了解的前提下,此
同时定位与建图(Simultaneous Localization and Mapping,SLAM)技术是目前无人系统定位与导航领域的研究热点,也是实现无人系统环境感知的重要手段。根据使用的传感器,SLAM技术主要分为视觉SLAM和激光SLAM。不过,随着无人系统作业任务与应用场景的多样化和复杂化,仅依靠单一传感器的SLAM算法往往无法正常工作。例如,视觉SLAM难以应对纹理缺失、光照变化明显和
数字光投影(DLP)3D打印技术依据液态光敏树脂在紫外辐照下快速固化的原理,通过积累二维树脂固化层实现任意成型,凭借精度、效率等多方面优势在诸多3D加工技术中脱颖而出,但受限于成型面积,主要用于精细制造、小尺度成型。本文提出一种基于旋转拼接的转盘式大尺寸3D打印方法,在旋转拼接成型方案设计、极坐标系图形分割以及3D打印控制系统方面进行了深入探索和研究,主要内容如下:(1)针对DLP 3D打印技术加
金属卤化物钙钛矿作为光增益介质,由于具有宽可调谐带隙、高吸收系数、高光致发光量子产率和高载流子迁移率等优势,在光伏领域、光泵浦激光、辐射探测等领域引发广泛关注。然而钙钛矿晶体的器件化应用目前仍受到诸多限制:首先,多晶钙钛矿由于内部存在的晶界、空隙与缺陷会带来离子及载流子迁移率等的下降;其次,目前虽然已成功合成纳米线、纳米片、多面体、空穴立方体等钙钛矿晶体,但长线或者棒状单晶很少报道,一些纳米线长度