1 中国地质大学(武汉) 自动化学院,湖北武汉430074
2 复杂系统先进控制与智能自动化湖北省重点实验室,湖北武汉430074
3 地球探测智能化技术教育部工程研究中心,湖北武汉40074
4 中国科学院 微小卫星创新研究院,上海201203
5 上海微小卫星工程中心,上海201203
为解决基于深度学习的立体匹配方法面临着网络规模大、网络结构复杂等问题,提出了一个网络规模较小、精度较高的网络结构。该网络在特征提取模块删减修改了复杂冗余的残差层并引入了空洞卷积金字塔池化模块来扩大视野范围,提取更多有用的上下文信息;在代价计算模块中使用了三维卷积层以成本聚合提升立体匹配的精度;最后,在代价聚合模块引用了双边格网模块以较低分辨率的成本量来获取精度较高的视差图。将该网络在KITTI 2015数据集和Scene Flow数据集等主流数据集上进行实验,结果显示,相较于其他主流优秀网络类如金字塔立体匹配网络(Pyramid Stereo Matching Network ,PSM-Net),网络规模参数量减少了约38%,并取得了较高的实验精度,其中Scene Flow数据集的终点误差(End-point Error,EPE)为0.86,是一个同时兼顾速度与精度的立体匹配网络。
计算机视觉 立体匹配 人工神经网络 视差 computer vision stereo matching artificial neural network parallax
北京信息科技大学应用数学研究所,北京 100101
聚焦堆栈数据受到视差维分辨率低的限制,导致由聚焦堆栈数据估计的视差的精度低、鲁棒性差。从聚焦堆栈数据的视差维频谱优化出发,引入聚焦堆栈视差维滤波器,提出基于视差维滤波的聚焦堆栈视差维超分辨方法,实现高精度的稠密视差估计。通过聚焦堆栈的频谱分析,选取巴特沃斯滤波作为视差维滤波器,实现聚焦堆栈数据高保真的视差维超分辨。利用视差维超分辨后的稠密聚焦堆栈,基于Robust focus volume regularization(RFV)算法实现稠密、高精度视差估计。模拟数据与实际数据实验结果表明:视差维滤波能够实现高效的视差维超分辨和高精度的稠密视差估计。
聚焦堆栈 视差维滤波 视差维超分辨 视差估计 光学学报
2023, 43(19): 1911004
1 湖北工业大学机械工程学院,湖北 武汉 430068
2 现代制造质量工程湖北省重点实验室,湖北 武汉 430068
印刷电路板上连接PIN正位度检测是保证PCB电气可靠性的重要环节,其主要检测PIN缺针、共线度与高度。为满足生产实际需求,提出一种基于双目视觉的连接PIN正位度检测方法。首先,通过双目标定获取相机内外参数,实现图像立体校正;其次,根据先验的相对方位和给定的排列信息生成相应的栅格,基于栅格灰度阈值变化进行PIN缺失检测;然后,分别提取PIN在两个相机视野中对应的特征角点,基于视差原理进行针尖三维坐标计算,实现对PIN的排列共线度检测;最后,提出了基于特征提取的PIN相对高度检测方法,实现了对PIN的相对高度检测。实验结果验证了所提方法的有效性,PIN相对高度检测的平均耗时为125.4 ms,精度达99.535%,重复性精度在±0.05 mm内。
双目视觉 PIN 正位度检测 视差 图像处理 激光与光电子学进展
2023, 60(14): 1415004
1 浙江农林大学数学与计算机科学学院,浙江 杭州 311300
2 浙江省林业智能监测与信息技术研究重点实验室,浙江 杭州 311300
3 浙江农林大学林业感知技术与智能装备国家林业与草局重点实验室,浙江 杭州 311300
立木视差图是立木因子测量、三维重建的基础。结合立木图像特征,为解决自然环境下立木图像结构复杂、光照干扰大等因素导致获取高质量立木视差图困难的问题,提出一种基于改进的semi-global matching(SGM)算法的立木视差图生成方法。针对SGM算法在图像纹理较弱和光照不稳定时生成的视差图效果不佳的问题,提出改进Census变换,该变换将Census中心像素值用周围像素的中值替代,提高初始代价的可靠性;在代价聚合过程中使用均值漂移算法进行图像分割,使算法具有较强鲁棒性的同时还有效降低了对重复和弱纹理区域的误匹配率。最后,分别采用自适应窗口填充无效值、中值滤波剔除不可靠视差值,使视差不连续的区域也能获得准确的视差值。在Middlebury公共数据集上对所提方法进行验证,所提方法的平均误匹配率约为5.23%,较传统的semi-global block matching(SGBM)算法、Boyer-Moore(BM)算法、SGM算法,分别提升9.47个百分点、9.345个百分点、8.96个百分点。自然环境下,所提改进的SGM算法可生成较高精确度的立木视差图。
立木视差图 SGM 图像分割 视差图优化 自适应窗口 激光与光电子学进展
2022, 59(18): 1815017
北京信息科技大学应用数学研究所,北京 100101
视差估计是计算成像领域中的重要技术手段。给出由傅里叶视差层(FDL)重建场景深度信息的计算框架,基于FDL的表达方式给出在光场变换域中解构场景的视差层(DL),进而实现视差重建的新方法。利用光场数据重构出FDL,对FDL进行傅里叶逆变换得到对应的DL,利用归一化互相关(NCC)来度量DL图像与中心视图像素点之间的相关性,实现场景视差的准确重建。模拟数据实验和实际数据实验的结果表明,所提方法能够有效地进行场景的精确视差重建。
图像处理 光场 傅里叶视差层 视差重建 归一化互相关 光学学报
2022, 42(16): 1610001
大连理工大学光电工程与仪器科学学院,辽宁 大连 116024
为提升半全局匹配(SGM)算法效率,提出一种基于改进匹配代价计算和路径优化策略的立体匹配算法。代价计算阶段,通过对角线取点方式对局部二值模式(LBP)算子进行优化,降低时间复杂度和数据规模;代价聚合阶段,根据聚合逻辑选择5个方向进行扫描线优化,结合灰度相似性约束和距离约束条件,对聚合路径进行自适应权重赋值;再通过赢者通吃(WTA)策略计算初始视差值,通过左右一致性检测和二次多项式插值算法对视差图作进一步优化。最后算法在Middlebury 2.0和3.0数据平台上进行匹配效率验证,实验结果表明,所提算法相比SGM算法在不损失匹配准确度的情况下,代价计算阶段用时减少63.1%,代价聚合阶段用时减少39.3%,算法整体效率提升54.2%,达到效率提升的目的。
机器视觉 稠密匹配算法 改进局部二值模式算子 自适应权重 视差计算 激光与光电子学进展
2022, 59(16): 1615006