成果介绍
本发明实施例公开了一种视频分类方法、装置、电子设备及计算机可读存储介质,该方法包括:获取包括M帧图像的待分类视频;从该M帧图像中抽取N帧图像;将该N帧图像输入视频分类模型中的第一模块,得到低维度特征,该第一模块通过特征提取算子提取该低维度特征;将该低维度特征输入该视频分类模型中的第二模块,得到高维度特征,该第二模块基于Transformer网络;将该高维度特征输入该视频分类模型中的全连接模块,得到该待分类视频的预测类别。本发明实施例,结合传统特征提取算子和Transformer网络,可以提高视频分类的效率。
成果亮点
一种视频分类方法,其特征在于,包括:
获取待分类视频,所述待分类视频包括M帧图像,M为大于1的整数;
从所述M帧图像中抽取N帧图像,N为大于1且小于或等于M的整数;
将所述N帧图像输入视频分类模型中的第一模块,得到低维度特征,所述第一模块通过特征提取算子提取所述低维度特征;
将所述低维度特征输入所述视频分类模型中的第二模块,得到高维度特征,所述第二模块基于Transformer网络;
将所述高维度特征输入所述视频分类模型中的全连接模块,得到所述待分类视频的预测类别。
团队介绍
中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力,推动我国自主知识产权新工业的建立,成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生AC态系统,由九个研究平台,国科大深圳先进技术学院,多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究,促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。
成果资料
产业化落地方案