科创中国
基于分层全相关代价体聚合的光流估计方法与装置
发布时间: 2023-06-25
基本信息
合作方式：
合作开发
成果类型：
发明专利,新技术
行业领域：
电子信息技术
成果介绍
本发明提出了一种基于分层全相关代价体聚合的光流估计方法，特征编码模块分别提取两帧图像的特征，构建全相关代价体建模两张图像所有像素之间的相似性。
成果亮点
分层全相关代价体聚合模块首先将全相关代价体分为更小的块，并在空间上进行重新组合以允许使用2D和3D卷积进行代价聚合；该模块通过分层的方式进行聚合，在块内执行2D卷积进行局部匹配聚合，在块间执行3D卷积进行全局匹配聚合。光流迭代优化模块在每次迭代中基于当前估计光流从全相关代价体中查找匹配信息，与第一帧图像的上下文特征输入到基于卷积GRU的更新模型，得到当前光流的残差，经过多次迭代得到光流估计结果。本发明还提供了相应的基于分层全相关代价体聚合的光流估计装置。
团队介绍
贾浩，冯淼杰，许刚伟，杨欣
成果资料
下载app