您所在的位置: 成果库 基于边界感知神经网络的双目显著物体检测方法

基于边界感知神经网络的双目显著物体检测方法

发布时间: 2022-11-09

来源: 科技服务团

基本信息

合作方式: 技术许可
成果类型: 发明专利
行业领域:
电子信息技术
成果介绍
本发明公开了一种基于边界感知神经网络的双目显著物体检测方法。采用多尺度的卷积神经网络,通过两个输入的方式构建双流的神经网络。并在池化层逐步的对图像进行缩小,进行编码,从而提升卷积核的感受野。在提升程序运行速度的同时又可以快速的确定物体的位置信息。其次使用上采样进行译码,逐步的恢复图像在细节位置的像素,从而提高最终的准确率。采用视差图对神经网络进行了优化。弥补了单纯的2D彩色图像在背景和物体颜色,对比度等相似的情况下,信息不足的缺点。从而使得结果更接近真实的人类观察物体的情况。
成果亮点
特征提取网络块包括依次连接的第一个卷积神经网络块、第二个卷积神经网络块、第一个最大池化层、第三个卷积神经网络块、第四个卷积神经网络块、第二个最大池化层、第五个卷积神经网络块、第六个卷积神经网络块、第七个卷积神经网络块、第三个最大池化层、第八个卷积神经网络块、第九个卷积神经网络块、第十个卷积神经网络块、第四个最大池化层、第十一个卷积神经网络块、第十二个卷积神经网络块和第十三个卷积神经网络块。 注意力机制网络块包括第一个SEM网络块,第二个SEM网络块,第三个SEM网络块以及依次连接的第一个add层、第十四个卷积神经网络块,第一个上采样层,第十五个卷积神经网络块、第二个上采样层、第十六个卷积神经网络块、第三个上采样层,第十七个卷积神经网络块、第四个上采样层和第十八个卷积神经网络块,彩色图输入到第一个卷积神经网络块中,第十一个卷积神经网络块、第十二个卷积神经网络块和第十三个卷积神经网络块的输出分别对应连接到第一个SEM网络块,第二个SEM网络块和第三个SEM网络块的输入,三个SEM网络块的输出共同连接到第一个add层的输入。
团队介绍
周武杰,1983年9月出生,副教授/博士后,硕士生导师,浙江省电子学会理事,IEEE成员,CCF成员,中国人工智能学会会员,浙江省“计算机科学与技术”一流学科B类方向负责人。2012年入选"青年骨干教师",2015年入选"优秀青年教师资助计划",2016年入选"科大青年英才",2022年入选斯坦福大学发布的全球前2%顶尖科学家榜单。浙江大学信息与通信工程专业博士后,国家留学基金委公派新加坡南洋理工大学访问学者。主要从事人工智能与深度学习、机器视觉与模式识别、图像处理等方面的研究;近几年以第一作者在AAAI、TIP、TNNLS、TCSVT、TMM、TITS、TSTSP、TSMC、TBC、TGRS、TCI、MIS、TCDS、TETCI、TIV、PR和中国科学等国际权威SCI期刊或核心期刊上发表学术论文50多篇
成果资料
产业化落地方案
点击查看
成果综合评价报告

评价单位:- (-) 评价时间:2022-12-01

孙金萍

徐州工程学院信息工程学院

副教授

综合评价

该成果在搭建模型时采用了VGG16_bn网络方法,有效的防止了在层数比较多的情况下发生过拟合。这样能够使得最终的结果在有足够多层数去模拟真实的处理函数的同时,又不至于因为过拟合的原因导致在训练集上表现很好而在测试集上表现很差。采用了注意力机制的方法,基于高级特征生成注意力机制信息作为物体位置信息。并提供给其他层,以增加结果的精确度。本发明的网络结构在第十六个神经网络块与第十八个神经网络块的输出分别与网络中其他位置的输入先点乘,再点和的操作是在本发明所用的注意力机制的方法,该方法通常情况下都能使得网络的效果获得不同程度的提升。 总体而言,该项目技术思路方向很好,未来市场空间大,有利于当前政策要求,转化成熟度很高,值得支持推广。建议强化相应产品开发,加大产业链开发力度。
查看更多>
更多