科创中国
基于K-means模型的双视点立体视频融合方法
成果类型：: 发明专利
发布时间: 2022-05-08 11:05:44
科技成果产业化落地方案
方案提交机构：浙江省温州市| 姚情秘 | 2022-12-10 23:21:37
本发明方法公开了基于K‑means模型的双视点立体视频融合方法。本发明方法首先对左、右视点深度图进行预处理，得到左、右视点深度图像；然后分别对左、右视点深度图像运用K‑means方法进行分割，对分割后的前景和背景区域深度图像进行三维投射运算，得到左、右视点的前景和背景绘制图像；以前景绘制图像为蓝本，用背景绘制图像填充前景绘制图像的空缺区域，将填充后的左、右视点绘制图像进行图像融合，获得虚拟视点绘制图像；最后将虚拟视点绘制图像的空洞区域根据空洞周围的像素信息进行加权填充，获得最终输出图像。本发明方法采用像素级别的操作，对空洞区域进行精准处理，使绘制效果在视觉效果上更加优质，更加协和。
本发明方法采用像素级别的操作，对空洞区域进行精准处理，使绘制效果在视觉效果上更加优质，更加协和。
本发明方法运用噪声去除网络和平滑滤波方法对深度图像进行预处理，有效降低虚拟视点绘制过程中深度图像可能产生的绘制问题，对绘制彩色图像的提升过程也存在积极的影响。该方法将双视点图像进行融合并使用基于几何距离的加权滤波器对融合图像进行优化处理。打破以往通过寻找最佳匹配块的方法，采用像素级别的操作，对空洞区域进行精准处理，使绘制效果在视觉效果上更加优质，更加协和。
本发明属于立体视频编解码技术领域，涉及一种基于K‑means模型的双视点立体视频融合方法，是针对双视点图像融合过程的改进。
整个虚拟视点绘制过程可分为两部分，首先通过输入深度图像进行投射运算可以得到虚拟视点所对应的深度图。为了得到虚拟视点处的深度图像，最便捷的方法是通过三维投射运算过程(3d‑warping)完成。此过程将一幅图像先反向投射至三维空间中形成立体模型，然后在虚拟视点将该立体模型重新投影到目标平面得到虚拟视点图像。
周洋：2020年7月于吉林大学取得理学博士学位，同年9月进入温州大学化材学院，依托浙江省碳材料技术研究重点实验室，主要开展锂硫电池、硅碳负极，固态电解质，锌离子电池等新能源材料的合成、机理及应用研究。先后主持浙江省自然科学基金青年基金项目，广东省先进储能材料重点实验室开放课题等纵向课题，以第一作者或通讯者在***, Energy Storage Mater., Nano Energy, ACS Nano, Small, ***, ***, Nanoscale等国际权威期刊上发表SCI论文10余篇，其中影响因子>10以上6篇，热点论文1篇，高被引论文4篇，授权发明专利4项。
本发明方法运用噪声去除网络和平滑滤波方法对深度图像进行预处理，有效降低虚拟视点绘制过程中深度图像可能产生的绘制问题，对绘制彩色图像的提升过程也存在积极的影响。该方法将双视点图像进行融合并使用基于几何距离的加权滤波器对融合图像进行优化处理。打破以往通过寻找最佳匹配块的方法，采用像素级别的操作，对空洞区域进行精准处理，使绘制效果在视觉效果上更加优质，更加协和。
技术合作，遣派学者专家到国外或者其他地区的高校，研究机构或者生产企业与对方的学者，专家合作进行研究设计，或者双方学者，专家轮流到对方学校，研究机构或者企业进行研究。
下载app