科创中国
行为检测的方法及装置、电子设备和存储介质
成果类型：: 发明专利
发布时间: 2023-10-04 17:51:34
科技成果产业化落地方案
方案提交机构：成果发布人| 蔡仪凡 | 2023-10-04 17:51:34
本公开涉及一种行为检测的方法及装置、电子设备和存储介质，涉及行为检测技术领域。其中，所述的行为检测的方法，包括：提取获取的待处理视频图像中多时刻视频帧的感兴趣目标对应的关节点信息序列及关节点的运动速度信息序列；分别对关节点信息序列及运动速度信息序列进行空间特征提取，得到对应的第一空间特征及第二空间特征；并对第一空间特征及第二空间特征进行特征融合，得到初始融合特征；利用获取的设定滑动时空窗口对初始融合特征进行滑动空间卷积操作，得到第一时空图及第一邻接矩阵；并基于第一邻接矩阵对初始融合特征进行空间卷积操作，得到第一卷积图；对第一时空图及第一卷积图进行融合，得到行为特征；基于行为特征完成行为检测。
所述的行为检测的方法，包括：提取获取的待处理视频图像中多时刻视频帧的感兴趣目标对应的关节点信息序列及关节点的运动速度信息序列；分别对关节点信息序列及运动速度信息序列进行空间特征提取，得到对应的第一空间特征及第二空间特征；并对第一空间特征及第二空间特征进行特征融合，得到初始融合特征；利用获取的设定滑动时空窗口对初始融合特征进行滑动空间卷积操作，得到第一时空图及第一邻接矩阵；并基于第一邻接矩阵对初始融合特征进行空间卷积操作，得到第一卷积图；对第一时空图及第一卷积图进行融合，得到行为特征；基于行为特征完成行为检测。
利用获取的设定滑动时空窗口对初始融合特征进行滑动空间卷积操作，得到第一时空图及第一邻接矩阵；并基于第一邻接矩阵对初始融合特征进行空间卷积操作，得到第一卷积图；对第一时空图及第一卷积图进行融合，得到行为特征；基于行为特征完成行为检测，提取获取的待处理视频图像中多时刻视频帧的感兴趣目标对应的关节点信息序列及关节点的运动速度信息序列，可以广泛适用于行为检测技术等相关领域行业。
黑龙江省“油气田控制与动态监测”重点实验室。目前团队共有研究人员11人，其中骨干3人，博士（后）4人，教授5人。先后承担国家级、省部级及市局级基金和科技攻关课题40余项，各类横向课题百余项，获得过国家科技进步三等奖、省部级一、二、三等奖20余项。团队培养了博士生12名、硕士研究生50多名，青年教师10名，培育省级高层次人才3名，国家级人才1名，选送出国访问学者6名；主持和承担省部级项目6项，市局级项目10多项。
得到第一时空图及第一邻接矩阵；并基于第一邻接矩阵对初始融合特征进行空间卷积操作，得到第一卷积图；对第一时空图及第一卷积图进行融合，得到行为特征；基于行为特征完成行为检测，可以有效降低成本，提高效率，具有环保、安全等优势。
本项目可以采用技术转让、技术合作等多种形式进行对接，欢迎有需求的企业单位联系洽谈。
下载app