作者单位
摘要
华北光电技术研究所,北京100015
分布式光电协同是提升单机光电载荷探测识别能力的有效途径。对采集的图像进行综合处理是协同应用的基础。多源图像超分辨率重建、多源图像信息融合和多视点图像拼接能够实现广域高分辨率成像,提升系统的探测识别能力,但对分布式光电系统实际能力的提升仍有待验证。因此搭建了分布式光电协同半实物仿真平台,讨论经综合处理后的图像性能。结果表明,可同时完成4路视频的图像拼接;融合后图像的各向同性局部对比度和感知对比度有所提升,且重建后图像的峰值信噪比提升了3088%,在一定程度上可提升侦察效果。
分布式系统 多视点 协同侦察 光电成像 distributed system multi-view cooperative reconnaissance opto-electronic imaging 
红外
2023, 44(5): 0008
作者单位
摘要
1 江西理工大学 理学院,江西赣州34000
2 江西理工大学 电气工程与自动化学院,江西赣州341000
多视图立体重建(Multi-view stereo Reconstruction,MVS Reconstruction)的目标是根据一组已知摄像机参数的多视角图像来重建场景的三维模型,是近年来三维重建的一类主流方法。本文针对最新的近百个基于深度学习的MVS方法做了较为系统的算法评估对比。首先,对现有的基于监督学习的MVS方法,按照特征提取、代价体构建、代价体正则化和深度回归的重建流程对各算法进行梳理,重点对代价体构建和正则化这两阶段的改进策略进行归纳总结,对于无监督的MVS方法,主要分析各算法损失项的设计,并按照其训练方式进行分类;其次,总结了MVS方法常用的实验数据集及其对应的性能评价指标,进一步研究特征金字塔结构、注意力机制、由粗到精等策略的引入对MVS网络性能的影响;此外,介绍了MVS方法的具体应用场景,包括数字孪生、自动驾驶、机器人技术、遗产保护、生物科学等领域;最后,提出关于MVS改进方向的建议,并对多视图三维重建未来的技术难点与研究方向进行探讨。
多视图立体 三维重建 深度学习 深度估计 单应性变换 multi-view stereo 3D reconstruction deep learning depth estimation homography transformation 
光学 精密工程
2023, 31(16): 2444
作者单位
摘要
杭州电子科技大学通信工程学院,浙江 杭州 310037
多视图立体匹配是计算机视觉领域的一大研究热点,针对目前多视图立体重建完整性差、无法处理高分辨率图像和GPU内存消耗巨大、运行时间长等问题,提出一种基于自注意力机制的深度学习网络(SA-PatchmatchNet)。首先通过特征提取模块提取图像特征,再将其送入可学习的Patchmatch模块中,得到深度图,并对深度图进行优化,生成最终的深度图。为了捕捉深度推理任务中的重要信息,将自注意力机制融入到特征提取模块,提高了网络的特征提取能力。实验结果表明,SA-PatchmatchNet在Technical University of Denmark(DTU)数据集上进行测试,与PatchmatchNet相比,重建的完整性提升5.8%,整体性提升2.3%,与其他的state-of-the-art(SOTA)方法相比,完整性和整体性都得到了较大的提升。
深度学习 三维重建 多视图立体 自注意力机制 
激光与光电子学进展
2023, 60(16): 1615009
作者单位
摘要
天津大学微电子学院,天津 300072
脑肿瘤分割对医学图像处理领域发展与人类健康都具有积极意义。针对三维卷积神经网络存在复杂度大且对硬件设备要求高等问题,提出一种多视图卷积轻量级脑肿瘤分割算法。首先使用复用器模块有效融合各通道间的信息,并为模型增加提取非线性特征的能力。其次使用伪三维卷积分别从轴向位、矢状位和冠状位进行卷积,并加入组卷积以节约计算资源和降低设备显存使用。最后使用可训练参数权衡不同视图下提取的特征的重要性,提高模型分割精度。此外,实验使用分布式数据并行方法训练模型,以提升图形处理器的利用率。在2019年脑肿瘤分割大赛公开数据集上的实验结果表明,所提算法的平均Dice相似度系数仅低于第一名算法2.52个百分点,然而参数量与浮点运算次数分别降低了84.83%和96.67%,且平均Dice相似度系数高于第二名算法0.05%。通过对比实验分析,验证了所提算法的精确与轻量,为脑肿瘤分割模型的广泛应用提供了可能性。
多视图 卷积神经网络 脑肿瘤分割 深度学习 轻量级 
激光与光电子学进展
2023, 60(10): 1010018
作者单位
摘要
重庆大学 机械与运载工程学院 机械传动国家重点实验室,重庆 400044
多视角点云配准是逆向工程中的关键步骤之一,具有重要的研究意义和工程应用价值。而对于狭窄场景(如口腔或机械结构内部)获取的点云数据,多视角配准算法的精度直接影响重建精度的好坏。为了提升狭窄场景多视角点云配准的速度和鲁棒性,提出一种基于位姿图优化的增量式多视角点云配准方法。首先针对相邻视角的点云,结合迭代最近点法(ICP)和基于特征的配准方法,提出一种多策略融合的成对点云配准算法,用于求解相邻视角点云的配准结果;然后在增量式相邻视角点云配准的基础上,进一步提出一种基于距离约束的回环检测方法,并依据相邻视角点云的配准结果和回环检测的结果构建位姿图;最后采用实时优化策略对位姿图进行优化,消除累计误差,实现鲁棒的多视角配准。实验结果表明,提出的多策略融合配准算法和基于距离约束的回环检测方法是有效的。经典ICP算法和基于FPFH特征的配准算法在实验中存在失效的现象,而提出的多策略融合配准算法并无失效。基于距离筛选的回环检测方法较常规的回环检测方法效率提高。提出的多视角配准算法在配准牙齿模型数据时精度可达到0.0357 mm。为了验证算法的普适性,采用多个狭窄场景下连续采集的模型点云进行验证,结果表明:提出的算法取得了不错的效果,表明该方法是一种有效的狭窄场景多视角配准方法。
多视角点云配准 回环检测 位姿优化 迭代最近点算法 机器视觉 multi-view point cloud registration loop closure detection pose optimization iterative closest point algorithm machine vision 
红外与激光工程
2022, 51(12): 20220114
作者单位
摘要
1 中山大学电子与信息工程学院光电材料与技术国家重点实验室,广东 广州 510275
2 中山大学物理学院,广东 广州 510275
近眼小孔因对入射瞳孔光束光斑尺寸的有效约束而被用于基于时序复用的超多视图显示,可以实现较大的景深,但小的尺寸也导致一个近眼小孔所能实现视角的严重受限。设计多组近眼小孔时序选通,通过同组不同近眼小孔各自对应显示区域的拼连,可以有效解决各时间点仅通过一个近眼小孔观察时所面临的视角受限问题;但各近眼小孔对应显示区域出射光通过非对应小孔出射,又引入串扰噪声这一新问题。针对头戴式显示,设计同组相邻近眼小孔具有相异正交特性的多组近眼小孔,利用各显示区域所出射正交特性光被其对应小孔的相邻小孔屏蔽的特性,解决同组相邻小孔间的串扰问题。搭建验证性头戴式超多视图显示系统,在由M个一维条状小孔构建的一个近眼小孔组中,设计相邻2个近眼小孔,分别仅允许偏振方向相互垂直的光通过;基于视觉滞留效应,利用T个近眼小孔组的时序选通,实现单眼T个视点的超多视图显示。相对于一个时间点仅一个近眼小孔选通的情况,近眼小孔组使视角得到M倍的扩展。受制于所使用的常规投影透镜,仅取M=3进行验证时,视角扩展为19.7°。
三维显示 超多视图 视角扩展 条状小孔 
激光与光电子学进展
2022, 59(20): 2011015
作者单位
摘要
1 昆明理工大学信息工程与自动化学院,云南 昆明 650500
2 云南大学信息学院,云南 昆明 650091
利用X射线影像进行胸部疾病诊断是一种常用的诊断方法,具有重要的临床诊断价值。随着大规模可用数据集的发布,已经提出了几种利用胸部X射线图像预测常见疾病的方法。然而大多数现有的预测模型大都仅考虑单个视图,忽略了多视图影像对于临床医生诊断的支持作用。此外使用单个模型进行影像特征抽取时,存在有效特征提取不全的问题,进而导致疾病预测准确率较低。为此,提出了一种新的深度相关多级特征融合方法(DFFM),该方法融合不同模型提取的不同视图的视觉特征,以提高疾病预测的准确性。并在目前最大的胸部X射线数据集MIMIC-CXR上进行了验证,实验结果表明,所提方法的area under the receiver operating characteristic curve (AUC)值达0.847,与现有的单视图及简单进行特征拼接的多视图模型相比,AUC值分别提升了12.6个百分点和5.3个百分点,验证了所提多级融合方法的有效性。
医用光学 疾病预测 模型融合 深度相关 多视图 特征抽取 
激光与光电子学进展
2022, 59(18): 1817001
作者单位
摘要
1 西安电子科技大学 物理与光电工程学院,陕西 西安 710071
2 中山大学 电子与信息工程学院,广东 广州 510275
3 中山大学 物理学院,广东 广州 510275
通过沿排列方向间距小于观察者瞳孔直径的4个近眼条状液晶光阀,时序投射各两个视图分别至观察者不同瞳孔,可以基于超多视图实现无聚焦-辐辏冲突的三维显示。但是,一方面,显示频率仅30 Hz,带来闪烁效应;另一方面,条状孔径沿排列方向的小尺寸,严重限制通过该孔径所能观察到场景的视角。本文设计了同时具有时序和偏光特性的近眼条状液晶光阀,并排列各眼对应条状液晶光阀沿观察者双目连线的垂直方向,利用相邻多个液晶光阀所观察到拼合图像相对于仅通过一个液晶光阀所观察场景的视角扩展,基于时序复用和偏光复用的结合进行显示视角的扩展。实验中,将该时序-偏光特性液晶光阀构建为双目眼镜,利用偏振分束器将两台240 Hz电脑显示屏构建形成一个等效正交偏振特性显示屏,两者对应同步刷新显示,实现了对角线视角达70°的超多视图三维显示,离焦模糊效应验证了显示场景的自然聚焦能力。
3D 聚焦-辐辏冲突 超多视图 3D vergence-accommodation conflict super multi-view 
液晶与显示
2022, 37(5): 647
作者单位
摘要
1 西安思源学院 工学院,陕西 西安 710038
2 西安斯坦仪器股份有限公司,陕西 西安 710065
随着红外传感器的性能提升和应用普及,获取同一场景下同一目标的多视角图像成为可能。为此,提出联合多视角红外图像的目标识别方法。首先对多视角红外图像进行聚类分析,获取多个视角子集。在每个视角子集中,红外图像具有较强的相关性。对于不同的视角子集,它们相对独立。为充分利用这种相关性和独立性,采用联合稀疏表示(JSR)对单个视角子集进行决策。特别地,对于只包含一个视角的子集,则直接采用经典的稀疏表示分类(SRC)进行处理。对于不同视角子集获取的决策结果,基于线性加权的思想进行融合处理,并根据融合后的决策变量判决多视角红外图像所属的目标类别。因此,所提方法在分析多视角红外图像内在关联性的基础上,分别对局部相关性和整体的独立性进行考察,并通过决策层的融合将两者融为一体,提高了最终决策的可靠性。实验中,在采集的多类交通车辆红外图像上进行识别,分别在原始图像、加噪声图像以及部分遮挡图像上对方法进行测试和验证,经过对比分析验证了提出方法的有效性。
红外图像 目标识别 多视角聚类 稀疏表示 infrared images target recognition multi-view clustering sparse representation 
红外与激光工程
2021, 50(11): 20210206
作者单位
摘要
南京航空航天大学机电学院, 江苏 南京 210016
工业机械臂在多工位作业时通常需要具有远近视距的双目视觉系统,用于全局目标定位和局域精确测量。由于具有远近视距的两目相机缺乏公共视场,无法由传统双目立体视觉标定内外参数,提出了一种基于点阵编码元和多视图几何的标定技术。首先为具有远近视距的两目系统制作与之视场大小匹配的两种尺寸的点阵编码元标定板,提出了一种基于灰度梯度的亚像素边缘定位方法以提高椭圆中心定位精度,并改进了点阵编码元的解码算法用于图像特征的稳健匹配。再利用不同视角下编码元的高精度中心像素坐标和图像间编码元的对应关系,通过多视图几何解算出两目相机的内参数和相对各自标定板的转换矩阵。然后由转换矩阵构造AX=ZB手眼标定方程形式,求解方程式中的X即可得到两目相机间的外参数。最后分析了两类优化方法对标定误差的抑制情况。实验结果表明,经优化后标定精度得到提高,角度误差为0.05°,位置误差为0.36 mm。
机器视觉 内外参标定 多视图几何 亚像素边缘 编码元 手眼标定方程式 
光学学报
2021, 41(24): 2415001

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!