您所在的位置: 成果库 一种基于双注意力机制的三维点云配准方法

一种基于双注意力机制的三维点云配准方法

成果类型:: 发明专利

发布时间: 2023-12-07 17:25:51

科技成果产业化落地方案
方案提交机构:成果发布人| 黄哲芬 | 2023-12-07 17:25:51

本发明涉及一种基于双注意力机制的三维点云配准方法。步骤S1:使用多层下采样对输入两帧点云操作获取不同稀疏度的点云;步骤S2:不同稀疏度的点云根据对应点匹配模块计算两帧点云的对应关系;步骤S3:匹配点对的特征映射经过双注意力机制到描述符特征模块得出描述符特征;步骤S4:对应点匹配模块输出的置信矩阵和描述符特征模块输出经过奇异值分解模块求出旋转变换矩阵;步骤S5:最后一层下采样层计算旋转变换矩阵作为粗配准过程,再通过精配准过程的权重配比策略对粗配准结果进行精细化。本发明在基于深度学习的点云配准框架中,针对关注不同层次的特征影响引入双注意力机制,为解决配准误差积累设计了权重配比策略,避免误差积累情况的发生

本发明采用如下技术方案:一种基于双注意力机制的三维点云配准方法,包括如下步骤:步骤S1:使用多层下采样对输入两帧点云操作获取不同稀疏度的点云;步骤S2:不同稀疏度的点云根据对应点匹配模块计算两帧点云的对应关系;步骤S3:匹配点对的特征映射经过双注意力机制到描述符特征模块得出描述符特征;步骤S4:对应点匹配模块输出的置信矩阵和描述符特征模块输出经过奇异值分解模块求出旋转变换矩阵;步骤S5:最后一层下采样层计算旋转变换矩阵作为粗配准过程,再通过精配准过程的权重配比策略对粗配准结果进行精细化,得出最优的旋转变换矩阵。

三维数据是一种现实物理世界的重要表达方式,有多种表现形式,包括深度图像、多边形网格和点云等。三维点云数据获取设备如激光雷达等产品的成熟和普及以及计算机运算能力的提升,使点云数据得到了广泛应用。点云配准技术是点云数据处理中一个极具挑战性的研究方向,因为点云是一种非结构化的数据形式,存在遮挡和噪声以及较大的数据量,并且需要精确快速地完成。

点云配准算法在20世纪70年代就已有研究。ICP(iterative closestpoint)是一种最经典的点云配准算法,通过迭代对应点搜寻和最小化点对整体距离以估计变换矩阵。因为是非凸的,所以容易陷入局部极小值。当点云配准需要较大的旋转平移时,ICP往往无法得到正确的结果。NDT(normal distributions transform)是另一种经典的精配准方法,通过最大化源点在目标点体素化后计算出的正态分布的概率密度上的得分进行配准。简单的点与点的对应不具有鲁棒性,所以接下来很多工作都致力于寻找更加鲁棒的对应,如点对面、面对面和特征对特征。通过这些对应关系估计配准参数,这些对应关系提高了点云配准的正确率,降低了对正确初始位姿的依赖。特征检测减少总的点数,保留独特性高的部分;特征描述旨在将高维的特征信息转换为低维度但却依然易于分辨和对比的描述子;特征匹配寻找特征之间的对应关系,一旦建立对应关系配准问题就变成了一个凸问题,变换估计就变得更容易。另一种粗配准的方法基于全等四点集(4-points congruent sets),在刚性变换下,部分点的变换也是全部点的变换,通过验证多组全等集得到最佳变换。传统的非学习点云配准方法对硬件要求低、易于实施、可解释性强且不需要耗时的训练过程,但是却存在容易陷入局部极小值或通用性不好的问题,使用手工特征区分对应关系,受设计者经验和参数调整能力的影响很大。另外粗配准方法往往都比较耗时,在一些实时应用中可能会遇到瓶颈。

发明人:郑海峰 陈孝文 冯心欣 黄俊良福州大学(Fuzhou University),简称福大,位于福建省福州市,创建于1958年,是国家“双一流”建设高校,国家“211工程”建设高校,国家教育部、国家国防科技工业局与福建省人民政府共建高校,福建省三所重点建设的高水平大学之一,福建省一流大学建设高校,入选国家建设高水平大学公派研究生项目、教育部首批“卓越工程师教育培养计划”高校、新工科研究与实践项目、数据中国“百校工程”项目、国家“111计划”、“高校国际化示范学院推进计划”、国家级大学生创新创业训练计划、全国首批深化创新创业教育改革示范高校、中国政府奖学金来华留学生接收院校、全国专业学位研究生教育综合改革试点单位、国家集成电路人才培养基地、首批高等学校科技成果转化和技术转移基地、高校国家知识产权信息服务中心。

与现有技术相比,本发明具有以下有益效果:本发明提出了一种基于深度学习的点云配准框架,引入双重注意力机制捕获不同层次特征的影响,提高了对于通道、空间特征的关注,从而提高了配准的准确度。另外,在精配准过程中设计权重配比策略,而不是利用单个精配准过程迭代的步骤,从而避免了精配准过程误差积累的发生,以提高点云配准度。

当前专利未经权利人许可不得实施,希望将科技成果转让给研发实力雄厚的企业,由受让人对科技成果实施转化。交易的是科技成果中的知识产权,可以包括专利权、专利申请权、技术秘密等。科技成果转让后,转让方获得转让费,不再是科技成果的所有人;受让方向转让方支付转让费,并成为科技成果的新的所有人。