您所在的位置: 成果库 一种基于递归交互式注意力的低照度图像增强方法

一种基于递归交互式注意力的低照度图像增强方法

成果类型:: 发明专利

发布时间: 2023-12-27 14:31:13

科技成果产业化落地方案
方案提交机构:成果发布人| 黄哲芬 | 2023-12-27 14:31:13

本发明涉及一种基于递归交互式注意力的低照度图像增强方法。包括:对输入图像进行预处理,包括图像配对、裁剪、数据增强处理,得到训练数据集;设计递归交互式注意力增强网络,该网络由输入映射模块、递归交互式注意力增强网络和输出映射模块组成;设计用于训练步骤B所设计网络的损失函数;使用步骤A得到的训练数据集训练递归交互式注意力增强网络;将待测图像输入到该网络中,使用训练好的网络生成正常照度图像。本发明利用递归交互式注意力机制,能够在局部和全局范围内对图像进行注意力调整和增强,从而提高了图像的质量和清晰度,有效解决了低照度图像亮度不均衡、细节丢失、颜色失真等问题。

本发明的目的在于提供一种基于递归交互式注意力的低照度图像增强方法,该方法结合局部块感知的双重注意力和全局上下文感知的可偏移注意力,能够充分考虑图像的局部细节和全局结构,使得增强后的图像更加自然、细致;引入的递归和交互策略也能够增强模型的表达能力和稳定性,使得模型能够更好地适应不同的低照度图像场景。为实现上述目的,本发明采用如下技术方案:一种基于递归交互式注意力的低照度图像增强方法,包括如下步骤:步骤A、对输入图像进行预处理,包括图像配对、裁剪、数据增强处理,得到训练数据集;步骤B、设计递归交互式注意力增强网络,该递归交互式注意力增强网络由输入映射模块、递归交互式注意力增强网络和输出映射模块组成;步骤C、设计用于训练步骤B所设计网络的损失函数;步骤D、使用训练数据集训练递归交互式注意力增强网络;步骤E、将待测图像输入到该网络中,使用训练好的网络生成正常照度图像。

随着科技的不断进步,智能手机、数码相机等拍摄和显示设备的更新换代和普及,生活中越来越多的图像数据以数字的形式存在,这些数据包括从日常生活中拍摄的照片,到医学影像等各行各业的图像数据。在这些数据中,由于拍摄环境和设备的限制,低照度图像数量占比不断增大。低照度图像在拍摄时由于光线不足而导致图像亮度暗淡,对比度低,色彩失真,图像细节模糊等问题,这些问题极大地影响了图像的观感效果。低照度图像增强旨在通过数字图像处理技术改善低照度图像的质量,使低照度图像更加清晰明亮、色彩鲜艳、细节丰富。这不仅可以提高图像的观感效果,也能够改善图像的可视化效果,为人们带来更多的便利和舒适。

低照度图像增强在各个领域都有广泛的应用,包括安防监控、交通运输、夜间拍摄等。在安防监控领域,由于夜间环境光线不足,传统的监控摄像头无法获得清晰的图像,从而影响监控效果。通过对低照度图像的增强处理,可以提高夜间监控的清晰度和亮度,增强图像的细节信息,从而更好地发挥监控的作用。在交通运输领域,在对行驶中的车辆进行识别时,低照度图像增强可以使得车辆的轮廓更加清晰、边缘更加明显,从而提高车辆识别的准确性。此外,在对行人进行识别时,低照度图像增强也能够增强行人的轮廓、减少背景噪声,从而提高行人识别的准确性。在夜间拍摄领域,由于夜间环境光线不足,往往导致拍摄的照片暗淡、色彩失真等问题。低照度图像增强技术可以增强图像的亮度和色彩,使得拍摄的照片更加清晰、真实。

早期的低照度图像增强方法主要基于直方图均衡化和Retinex理论。基于直方图均衡化的方法假设在正常照度下,图像的像素值均匀分布于所有可能的灰度级,从而图像将表现出较高的对比度和较广的动态范围。全局直方图均衡化方法计算量少、处理效率高,适用于整体光照分布较为均匀的低照度图像。但这类方法统计的是整幅图像的灰度值,欠缺对相邻像素间的强度关系的考虑,因此对于光照分布不均匀的图像而言,某些局部区域很难复原到最优值,导致增强结果层次感不足。而针对这一问题提出的局部直方图均衡化方法虽然能有效增强低照度图像的亮度和对比度,但仍然没有针对性地处理低照度图像中潜在的严重噪声干扰,甚至会放大噪声,此外通过简单的函数映射加强对比度容易造成颜色失真。

发明人:牛玉贞 许瑞 李悦洲 林晓锋

福州大学(Fuzhou University),简称福大,位于福建省福州市,创建于1958年,是国家“双一流”建设高校,国家“211工程”建设高校,国家教育部、国家国防科技工业局与福建省人民政府共建高校,福建省三所重点建设的高水平大学之一,福建省一流大学建设高校,入选国家建设高水平大学公派研究生项目、教育部首批“卓越工程师教育培养计划”高校、新工科研究与实践项目、数据中国“百校工程”项目、国家“111计划”、“高校国际化示范学院推进计划”、国家级大学生创新创业训练计划、全国首批深化创新创业教育改革示范高校、中国政府奖学金来华留学生接收院校、全国专业学位研究生教育综合改革试点单位、国家集成电路人才培养基地、首批高等学校科技成果转化和技术转移基地、高校国家知识产权信息服务中心。

本发明具有以下有益效果:首先,本发明在输入映射模块中对特征进行编码,提高了图像的特征表达能力,能够更好地保留图像的细节信息。其次,本发明设计了递归交互式注意力增强网络,包括局部块感知的双重注意力模块和全局上下文感知的可偏移注意力模块等。这些模块通过空间和通道注意力机制来调节有效信息的流出,能够更准确地抑制伪影和过度增强等问题,获得更好的图像增强效果。此外,本发明设计了递归和交互操作,促进全局一致性表示,能够更好地提高图像的质量和亮度,同时避免了过度增强、伪影和细节丢失等问题。最后,本发明采用输出映射模块将增强后的特征映射转换为最终的图像,能够更好地保留图像的细节信息,提高图像的质量和亮度。不同于其他先近的基于Transformer的低照度图像增强方法,本发明不仅结合了局部块感知和全局上下文感知的优势,而且仅使用少量递归交互块,避免使用大型Transformer等复杂的网络结构,可以在计算资源和存储空间受限的情况下实现高效的低照度图像增强,降低了实现成本。

当前专利未经权利人许可不得实施,希望将科技成果转让给研发实力雄厚的企业,由受让人对科技成果实施转化。交易的是科技成果中的知识产权,可以包括专利权、专利申请权、技术秘密等。科技成果转让后,转让方获得转让费,不再是科技成果的所有人;受让方向转让方支付转让费,并成为科技成果的新的所有人。