科创中国
一种三维重建方法、装置、设备及计算机存储介质
成果类型：: 发明专利
发布时间: 2023-11-09 14:41:28
科技成果产业化落地方案
方案提交机构：天津市滨海新区| 宋学姮 | 2023-11-17 16:00:05
本申请适用于三维重建领域，提供了一种三维重建方法、装置、设备及计算机存储介质，该方法包括：获取目标对象的2D姿态信息，2D姿态信息包括目标对象上多个关键点的位置坐标；将2D姿态信息输入到已训练的三维重建模型中进行处理，得到目标对象的三维模型；三维重建模型包括3D姿态回归网络和顶点回归网络；3D姿态回归网络用于从2D姿态信息中提取3D姿态信息；顶点回归网络用于将2D姿态信息和3D姿态信息的拼接信息进行处理得到目标对象的三维模型。该方法充分利用不同维度的姿态信息，使得到的三维模型对应的顶点坐标信息更加准确，从而提高了三维模型结构的准确性。
1.一种三维重建方法，其特征在于，所述方法包括：
获取目标对象的2D姿态信息，所述2D姿态信息包括所述目标对象上多个关键点的位置坐标；
将所述2D姿态信息输入到已训练的三维重建模型中进行处理，得到所述目标对象的三维模型；
所述三维重建模型包括3D姿态回归网络和顶点回归网络；所述3D姿态回归网络用于从所述2D姿态信息中提取3D姿态信息；所述顶点回归网络用于将所述2D姿态信息和所述3D姿态信息的拼接信息进行处理得到所述目标对象的三维模型。
2.根据权利要求1所述的方法，其特征在于，所述3D姿态回归网络包括依次连接的第一变形层、第一全连接层、多个第一残差块、第二全连接层和第二变形层；所述第一变形层用于将所述多个关键点的位置坐标转换为预设格式的特征向量；所述第二变形层用于将所述第二全连接层输出的特征信息转换为所述3D姿态信息。
3.根据权利要求2所述的方法，其特征在于，多个所述第一残差块包括依次连接的归一化层、激活函数层和第三全连接层。
装置和设备：
- 装置： 可能是指用于执行三维重建方法的硬件或设备。
- 设备： 可能指在三维重建过程中使用的相关工具或仪器，例如传感器、扫描设备等。
计算机存储介质：
- 存储介质： 指用于存储三维重建方法所涉及数据、算法或软件的媒介，通常是计算机内存、硬盘、闪存驱动器等。
- 可能的内容： 包括存储三维重建算法所需的程序代码、原始数据、中间结果或最终生成的三维模型数据。
中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力，推动我国自主知识产权新工业的建立，成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生AC态系统，由九个研究平台，国科大深圳先进技术学院，多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究，促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。
三维重建方法：
- 三维重建： 是将二维图像或其他数据转换为三维模型或场景的过程。
- 方法： 指用于从收集的数据中创建或重建三维场景或模型的特定过程、算法或技术。
- 存储介质： 指用于存储三维重建方法所涉及数据、算法或软件的媒介，通常是计算机内存、硬盘、闪存驱动器等。
- 可能的内容： 包括存储三维重建算法所需的程序代码、原始数据、中间结果或最终生成的三维模型数据。
技术转让
这种描述表明涉及一种方法、设备或装置，能够使用特定技术从数据中生成三维模型，可应用于多个领域，特别是在医学影像学中用于重建解剖结构。
下载app