基于国产平台的智能微光相机
发布时间: 2023-01-17
本期瀚海Inno-Friday推送的是广东昊译未来科技有限公司(以下简称“昊译未来科技”)。昊译未来科技是基于国产平台的智能微光相机条件下,专注于智能控制系统的研发及产业化的创新科技型公司。公司以邵立松博士为带头人,在无人驾驶、工程机械等领域具备丰富的项目实施经验,在业内具有广阔的应用场景及发展空间。
昊译未来科技在案例实施中,通过标定相机的内外参数,建立模型投影与像素映射关系,形成映射表;通过FPGA内的图像重映射IP完成图像的畸变矫正以及图像拼接。目前,项目正与徐工集团签订意向业务合同,协助其对多维视觉、构图,现场施工操作等的智能识别、控制等工程应用接入。
01行业前景
01国内外现状及未来趋势
随着科学技术的迅速发展,现代战争早已突破人类视觉的限制。夜间战争已成为拥有先进夜视技术的一方迅速取得对战胜利的决定性因素。作为夜视技术的两大关键支撑技术之一,微光夜视技术是研究夜间微弱照度条件下对目标进行探测、观察、识别、定位、记录的一类高新技术,具有体积小、重量轻、图像清晰、隐蔽性强等特点,是目前夜战武器装备中使用最广泛的技术。自上世纪50年代开始,微光夜视技术取得了巨大的进展,从零代发展到三代、四代产品,已形成多个品种规格的系列化、批量化配套。在科学技术日新月异的今天,新材料、新技术、新工艺的层出不穷,为微光夜视技术的发展带来了机遇和挑战。微光夜视技术在下一阶段将如何发展,成为微光夜视技术行业共同关注的热点话题。
长期以来,军用武器装备的发展需求推动了微光夜视技术的快速发展,并且由传统的单兵武器、车载、机载、舰载微光夜视领域拓展到巡航导弹、空间探测、核诊断等新领域。在当前军民融合深度发展的大背景下,微光夜视技术迎来了新的机遇,在城市夜间安防、野外夜间科学考察、夜间安全驾驶、矿井抢险救灾、OLED微显示器等领域也将发挥重要作用,应用前景广阔。
02国内外水平对比
国外对于微光利用领先我国一大截,国外利用微光成像技术发明了利用微光光子来记录数据,利用紫外光线来实现通讯,利用紫外线和红外线两种光线来控制和长距离的警戒,将红外线和微光图像进行融合处理,利用微光制造传感器等。如今国外累计超过五百多种不同的利用微光成像做成的产品已经在生活的各个方面被使用。
利用了四十年的时间,我国的微光夜视技术已经发展到了能够非常熟练的制造第一代微光通道板和第二代微光通道板,1代和2代已经被国防军队应用,3代方面的研究已经取得了非常大的进展,同时在国内的一些研究所里面已经能够生产出和美国相媲美的第三代管子。
02企业优势
一、广东昊译未来科技有限公司目前已形成微光成像ISP算法的能力,并已经成功验证部署,自适应分辨率与焦距的畸变矫正与环视拼接IP,支持具体应用的实现。并行、流水、多缓冲、可重构等硬件优化技术的CNN加速器技术,目前已应用于人脸识别,细胞分类识别此类具体的应用中。
技术特点1:
全套的自主研发技术,包括微光成像的ISP算法,高速图像拼接算法,基于深度学习的目标识别跟踪以及特征提取算法。
技术特点2:
方案支持国产嵌入式平台部署,全套算法支持对国产嵌入式平台移植部署的能力。
二、成果状态及关键指标:
微光成像部分
采用国产长光辰芯相机模组,自研的微光成像ISP算法,低温工作环境温度:-40℃,高温工作环境温度:70℃,可保障在10^-4—10^4 Lx照度的正常成像。成像时间小于16.7ms,支持局部过曝抑制,以及瞬态过曝抑制,采用XILINX 的XC7A100tscg324-2平台实现,应用于飞行员的头盔应用中。
分布式环视成像部分
采用XILINX XCZU7ev芯片,支持多路图像实时畸变矫正,自定义的多路图像拼接,支持局部图像缩放,支持最多10路1080p30fps的实时拼接,支持用户自定义拼接模式,以及驻车情况下对全景信息的运动目标检测功能,以及推流处理,应用于总体某单位的特种车辆辅助驾驶产品中。
基于XILINX XC7Z030芯片部署的多目标脸识别系统
目前支持1080p30fps的多目标人脸识别,识别率99%以上,延迟低于33ms。
(技术性能优势)
03产品展示
车辆智能驾驶辅助系统
(技术应用领域展示一)
全景系统解决方案
(技术应用领域展示二)
医疗设备细胞的快速分类检测方案
(技术应用领域展示三)
装备微光成像装置
(技术应用领域展示四)
04核心团队
邵立松 团队带头人
博士研究生,正高级工程师
原麒麟系统副总工程师,飞腾新技术有限公司处理器研发正高级工程师,发表学术著作1部,学术论文20余篇,获得技术专利授权10余项。获军队、部级科技进步奖共4项,二等奖2项。获军队三等功。
张剑 团队核心成员
国防科技大学硕士研究生
曾在长沙冰眼电子科技有限公司担任IP 工程师,湖南恩智测控技术有限公司担任研发工程师,十余年从事双目立体视觉的机器人环境感知系统,精通车辆智能驾驶辅助系统和全景系统解决方案的提供。在长沙冰眼电子科技有限公司主导项目获得湖南省2017年移动互联网产业发展专项资金,2019年长沙市智能汽车产业生态火炬计划和湖南省军民融合产业发展专项资金。
05企业需求
1、昊译未来科技专注于工程特种机械的智能辅助驾驶技术的研发及产业化,期待对接本地的客户资源,包括消防,市政等特种机械资源。
2、昊译未来科技业务基于智能的视觉识别技术,可嵌入佛山的智能安全产业,成为产业链的一环,期待这类合作伙伴资源。
图文来源:国际化众创空间