基于双向注意力机制的无参考图像区域质量评估

来源 :深圳大学 | 被引量 : 0次 | 上传用户:shimin_job
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类视觉系统的注意力机制指出,人在观察和评估图像质量的过程中,是由自底向上和自顶向下两部分协同作用,来提取和注意到关键的区域信息。同时,我们观察到真实场景中的图像可能包含多种失真,即使只含有一种失真,其对图像各个区域的影响程度也不一样,因此针对关键的图像区域进行分析和评估对整张图像质量评估十分重要。在图像质量评估领域,直接对图像的失真区域进行标注是一项耗时耗力的工作。因此,现有的工作一般是在无参考图像信息的基础上,通过卷积神经网络对整张失真图像,而不是针对图像区域进行学习和提取特征,分析得到质量评估结果。从注意力机制和弱监督学习针对图像区域的最新研究成果得到启发,我们提出了一种基于双向注意力机制的无参考图像区域质量评估网络(Regional Attention Network,RANet)。该网络主要从两个方面对图像中的候选注意力区域进行学习和分析。首先,我们分析了每个候选注意力区域对整张图像质量评估的期望贡献。我们设计了自顶向下的注意力监督层将整张图像质量评估结果分配给到每个候选注意力区域,其中候选注意力区域可以通过有效的区域检测算法来提取和筛选。该网络从中选出关键注意力区域,利用候选注意力区域与其交叠面积的占比(贡献比),使得整张图像质量评估结果分配给每个区域,用以进一步分析。自底向上的注意力评估网络利用该期望贡献,增强了基于候选注意力区域的学习和分析,进一步改善了整张图像的质量评估结果。我们已在多个公开数据集上进行了测试评估,结果达到了最优性能。同时,大量实验证明了RANet的泛化能力和有效性。
其他文献
在全球化与快速城市化的背景下,城市原有的社会与文化特质正面临着被逐步消解与同质化的危机。随着本土文化意识的觉醒,许多城市开始逐渐重视历史文化与城市特色的挖掘与塑造,提升本土文化主体意识。回顾深圳以往40年的快速发展,在锐意改革的城市精神依托下,形成了开放、多元、包容的城市文化,但由于对其地域环境、文化历史等方面的特色基因梳理较为欠缺,导致历史文化保护与集体记忆传承的社会共识难以形成,从而使得城市的
自2010年以来,消费级无人机凭借着其价格便宜、可塑性高、应用场景广等优点被广大消费者所青睐,消费级无人机的数量也在与日俱增。然而由于自身故障和外力因素的影响,无人机时常会出现不可控甚至坠毁现象。不比地面机器人,一旦无人机坠毁将对地面的人员和设施造成巨大危害,因此无人机安全问题一直是无人机研发人员和消费者最为重视的环节。本文将从无人机姿态预估这一方面的研究来对无人机安全问题提供解决方法。本文结合机
随着城市交通问题日渐突出,智能交通管理深受城市管理者欢迎。车牌识别作为智能交通管理组成要件中的核心之一,在各种交通场景中被广泛应用,极大提升了交通管理科技化和信息化水平。然而在复杂交通场景下的车牌识别容易受到噪声干扰,尤其是当车牌存在一定程度的倾斜时,导致检测和识别的效果下降。本文针对上述问题进行基于深度学习的车牌识别技术的研究,本文主要工作和创新如下:一、构建车牌检测及识别数据集。在车牌检测方面
阿尔兹海默病(AD)作为一种神经退行性疾病,是引起老年人痴呆的主要疾病。其发展过程与神经元的形态和数量的变化密切相关。显微断层成像技术(MOST)是近年研发的全脑扫描立体成像技术,能提供高分辨率、高精细结构的神经元图像。然而由于大量数据的获得,生物信息学分析处理的速度远远无法达到要求。大量脑部神经元的形态发育及与AD的关系,这些信息都还没有被挖掘和利用。本研究的目的就是通过分析AD鼠脑神经元形态特
在粤港澳大湾区快速发展的背景下,深港两地交流合作越发密切,为深圳和香港带来了巨大的消费潜力和机会,直接推动了深港两地的经济发展与交流合作。作为深港联系纽带的口岸地区,与城市紧密关联,并且跟城市的生活紧密联系。因深港陆路口岸直接衔接深圳主城区,使其入口广场被赋予超出通行之外的更多职能,使用者的需求多元而空间难以满足。因此,本文基于使用者需求的视角,来探讨分析陆路口岸入口广场空间特征,并提出具有针对性
智能交通系统可以提高交通设施运行效率,车流量在智能交通系统中有举足轻重的位置。微波雷达车流量检测技术由于抗干扰性好、可全天时、全天候工作得到人们的广泛关注。目前针对非主干道、特定地段的车流量检测技术研究较少,本课题基于此出发点研究了便携、低功耗、可移动式的雷达车流量检测技术。通常来说,该类车流量检测仪要求雷达模块小型化和低功耗。但低功耗的特点意味着其检测目标的信噪比较低,面对复杂的城市道路时检测难
阿尔茨海默病(Alzheimer’s disease,AD)是一种年龄相关的神经退行性疾病,临床症状表现为记忆障碍、生活能力下降和失语失认等慢性认知功能损伤。AD的主流特征病理主要是由胞外β淀粉样蛋白沉积形成的Aβ斑块和胞内的Tau蛋白聚集成的神经纤维缠结所组成。而Tau蛋白是目前研究AD机制和防治药物的一个重要靶点,且目前越来越多证据支持Tau蛋白的寡聚体是最具神经毒性的形式,其因为分子量小、形
在经济增长和计算机技术不断发展的背景下,多目标优化问题已经成为了科学研究和工程技术中的一个研究热点.针对多目标优化问题的求解,本文提出了一种混合多目标问题求解算法,同时提高了求解多目标优化的粒子群算法的种群多样性,通过测试函数、无人机的航迹规划和图像风格迁移验证了算法的有效性,具体研究工作如下:(1)针对多目标优化问题的求解,本文首先结合具有良好收敛性的基于分解的多目标进化算法(Multi-obj
随着社会经济的不断发展,瞬息万变的外部环境对组织快速反应能力的要求越来越高,这导致以任务为导向的临时团队被越来越广泛的接受。由于临时团队大都是短期内组建的,团队中的成员多来自不同的组织或部门,彼此之间并不熟悉,因此临时团队成员之间往往缺乏信任。信任的缺乏会导致临时团队成员在共事时质疑他人的动机,在利益分配时又会针锋相对,这降低了临时团队的运作效率。由于临时团队的生命周期有限,临时团队成员无法像传统
目的:阿尔茨海默病(Alzheimer’s disease,AD)是一种神经退行性脑疾病,发病比较隐匿。因病因迄今未明,尚无有效治疗药物,给家庭和社会都造成巨大压力。本课题组前期研究结果显示,硒甲基硒代半胱氨酸(SMC)可显著改善AD模型小鼠的行为认知并减轻相关的病理指标,在此基础上本课题利用蛋白组学技术进一步研究了SMC干预AD发展的分子机制。同时本课题选取另外一种有机硒化合物Ebselen,研