作者单位
摘要
1 江苏科技大学 计算机学院, 江苏镇江22000
2 南京大学 计算机软件新技术国家重点实验室, 江苏南京10046
为了提高动态场景RGB-D SLAM中相机位姿精度,基于实例分割与光流算法,提出一种高精度RGB-D SLAM方法。首先,通过实例分割算法检测出场景中的物体,删除非刚性物体并构造语义地图。接着,通过光流信息计算运动残差,检测场景中动态刚性物体,并在语义地图中追踪这些动态刚性物体。然后,删除每一帧中非刚性物体和动态刚性物体上的动态特征点,利用其他稳定的特征点优化相机位姿。最后,通过TSDF模型重建静态背景,并以点云的形式显示动态刚性物体。在TUM和Bonn数据集中测试表明,本文方法与当前最先进的SLAM工作ACEFusion相比相机精度提升约43%。消融实验结果表明,保留动态刚性物体处于静止状态下的特征点对相机位姿估计结果提升约37%。稠密建图实验结果表明,本文方法在动态场景中重建结果优于当前先进的工作,平均重建误差为0.042 m。代码开源在https://github.com/wawcg/dy_wcg
动态场景 同步定位与地图构建 实例分割 光流 dynamic scenes SLAM instance segmentation optical flow 
光学 精密工程
2024, 32(6): 857
作者单位
摘要
1 烟台大学物理与电子信息学院, 山东 烟台 264005
2 中国科学院精密测量科学与技术创新研究院, 湖北 武汉 430071
3 中国科学院西安光学精密机械研究所, 陕西 西安 710119
SO2紫外相机因在时间分辨率、空间分辨率、探测灵敏度以及探测精度等诸多方面均具有显著优势而成功应用于火山活动监测及其动力学研究。为解决紫外相机反演SO2排放速率容易受烟羽湍流及图像低对比度影响等问题,提出了融入神经网络的光流算法。首先,基于大气紫外辐射传输特性,阐述了SO2紫外相机的工作机理及SO2浓度图像的反演方法;其次,将神经网络融入光流算法,实现了火山烟羽图像中SO2排放速率的精确反演;最后,与传统光流法进行对比,论证了神经网络光流算法的科学性及优越性与精确性。实验结果表明:在图像低对比度及烟羽湍流效应的双重影响下,神经网络光流法可以把边缘反演的误差从94%降低至5%,显著提高了SO2排放速率反演的精确性。
SO2相机 光流法 神经网络 排放速率 湍流 火山排放 SO2 camera optical flow algorithm neural network emission rate turbulence volcanic emission 
大气与环境光学学报
2024, 19(1): 98
作者单位
摘要
长安大学 工程机械学院,陕西西安710064
常规的尺度不变特征变换(SIFT)图像特征提取方法难以提取多聚焦图像离焦模糊区域的特征,使得图像间存在局部、少量的公共特征,导致多聚焦图像配准精度差,严重影响后续图像融合和三维重建质量。在分析图像离焦模糊区域特征提取不确定性的基础上,提出了一种多聚焦图像离焦模糊区域的SIFT特征提取方法。首先提取多聚焦图像聚焦清晰区域的SIFT特征,再利用光流跟踪提取对应离焦模糊区域的SIFT特征,避免了在离焦模糊区域直接提取SIFT特征的不确定性。实验结果表明:提出的方法在离焦模糊区域具有良好的SIFT特征提取能力和提取精度,能实现多聚焦图像SIFT特征匹配数量显著增长,SIFT特征提取的误差为0.03~0.39 pixels,优于现有方法的0.21~1.71 pixels。降低了离焦模糊区域SIFT特征提取的不确定性,为多聚焦图像精确配准奠定了基础。
多聚焦图像 尺度不变特征变换(SIFT)特征提取 离焦模糊区域 光流跟踪 multi-focus images Scale-Invariant Feature Transform(SIFT) feature extraction defocused blurred area optical flow tracking 
光学 精密工程
2023, 31(24): 3630
作者单位
摘要
重庆邮电大学 通信与信息工程学院,重庆 400065
道路消失点检测是高级驾驶辅助系统中盲区监测的重要组成部分。针对现有消失点检测方法所存在的准确度低、运算量大等问题,提出一种基于车载视频图像的道路消失点检测算法。该算法在Harris角点检测基础上优化得分函数检测出图像特征点,减少在跟踪阶段的运算量;通过金字塔光流法和帧差距离对运动特征点进行跟踪,在结束帧上准确获得各特征点的位置;对特征点去除离值点后,通过优化初始聚类中心的K-Means聚类算法,得到车载视频图像的道路消失点。最后将算法应用于各种车辆行驶场景进行测试,在较短运行时间内,能准确检测出车载视频图像中道路消失点,证明算法鲁棒性好、运算简单易实现。
消失点检测 特征点检测 光流跟踪 离值点 vanishing point detection feature point detection optical flow tracking off-value point K-Means K-Means 
半导体光电
2023, 44(3): 429
作者单位
摘要
1 中国科学院光电技术研究所,成都 610200
2 中国科学院大学 电子电气与通信工程学院,北京 101408
基于孪生网络的跟踪器受限于孪生网络跟踪框架固有的跟踪机制和搜索区域选择机制,当目标处在被遮挡、快速运动和出视野等困难场景下时,如何稳定、鲁棒地进行目标跟踪始终是孪生网络跟踪器亟需解决的问题。为此,文章提出一种结合光流的孪生区域提名网络目标跟踪算法(GOF-SiamRPN)。通过全局光流对目标的运动趋势信息进行补充,该方法可以有效地解决在这些困难场景下的跟踪问题。在VOT2019和UAV123上的实验结果表明,相比基准方法,该算法分别取得了2.0%和1.8%的性能提升。与其他先进的跟踪器相比,该算法也取得了有竞争力的跟踪效果。
目标跟踪 光流 孪生区域提名网络 object tracking optical flow Siamese region proposal network 
半导体光电
2023, 44(3): 422
作者单位
摘要
1 辽宁工程技术大学 电子与信息工程学院,辽宁 葫芦岛 125105
2 辽宁工程技术大学 电气与控制工程学院,辽宁 葫芦岛 125105
针对现有光流估计方法在目标轮廓分割不清晰、缺乏细粒度的问题,本文提出融合序列影像相关区域信息的光流估计网络。通过特征编码器和全局编码器分别提取图像的编码特征和上下文特征,并通过下采样处理缩减特征尺寸。在构建4D相关体前,对输入的连续两帧特征图进行分区处理,以强弱相关的方式计算稠密的视觉相似度,建立更为精细的4D相关体积。在迭代更新阶段,提出残差卷积滤波器和细粒度模块,分别应用于处理相关体和光流传递,使得在融合相关体信息和光流信息前保留更多的局部小位移信息。在KITTI-2015数据集和MPI-Sintel数据集上与其他方法进行对比,光流估计评价指标分别提升了8.2%和6.15%。本文给出的网络模型可以更好地提高光流估计的准确性,有效解决了光流场过于平滑、缺乏细粒度和忽略小物体运动等问题。
计算机视觉 深度学习 光流 区域匹配 迭代更新 computer vision deep learning optical flow region matching iterative update 
液晶与显示
2023, 38(10): 1434
作者单位
摘要
昆明理工大学 机电工程学院,云南 昆明 650500
视频超分辨率(Video-Super Resolution,VSR)旨在将低分辨率视频帧序列重建为高分辨率视频帧序列。相较于图像超分辨率,VSR由于增加了时间维度的信息,因此通常需要依赖邻近帧高度相关信息实现当前帧的重建。如何对齐相邻帧,并获取帧间高度相关信息,是VSR任务关注的重点问题。本文将VSR任务分为去模糊、对齐、重建三个阶段。在去模糊阶段,将当前帧与相邻帧进行预对齐 ,获取与当前帧高度相关的特征信息,通过强化当前帧的细节以便实现初始阶段更多特征信息的提取。在对齐阶段,通过对输入特征进行二次对齐操作,利用相邻帧中高度相关信息进一步强化当前帧中特征信息。在重建阶段,通过聚合原始低分辨率帧以在网络末端提供更多特征信息。本文利用多层感知机(Multi-Layer Perceptron,MLP)代替传统卷积操作构造特征提取模块,同时对生成的特征信息进行二次对齐,以细化图像特征获得更优的视频帧重建效果。实验结果表明,本文提出的算法在多种公开数据集上的视频帧序列重建精度更高的同时,也取得了更少的网络参数量和更连贯的视频序列重建表现。
计算机视觉 视频超分辨率 多层感知机 注意力机制 光流 帧对齐 computer vision video super-resolution multi-layer perceptron attention mechanism optical flow frame alignment 
光学 精密工程
2023, 31(16): 2430
作者单位
摘要
1 中国民航大学 1. 交通科学与工程学院
2 中国民航大学 2. 航空工程学院, 天津 300300
针对同时定位与建图(SLAM)中存在定位精度不足、匹配特征点误差累积和特征匹配时间较长, 提出了一种融合改进RANSAC光流法的优化算法。该方法基于传统RANSAC算法, 加入最小二乘法对模型进行迭代优化来估计最优模型, 对光流法的误匹配点进行剔除, 大量减少图像误匹配特征点; 把融合改进后的RANSAC光流法与特征点通过卡尔曼滤波进行融合, 最后使用改进后的算法在公开的EuRoC MAV数据集中进行SLAM定位精度实验。实验结果表明: 该改进算法能够有效减小光流法特征匹配的误差, 从而提高无人机视觉SLAM的定位精度。
无人机 同时定位与建图 光流法 UAV SLAM optical flow method RANSAC RANSAC 
半导体光电
2023, 44(2): 277
马特 1,2王江涛 1,2袁武 1,2,3宋宏伟 1,2,3,*王睿星 1,2
作者单位
摘要
1 中国科学院力学研究所流固耦合系统力学重点实验室,北京 100190
2 中国科学院大学工程科学学院,北京 100049
3 中国科学院力学研究所空天飞行高温气动国家重点实验室,北京 100190
建立了一种适用于强激光辐照面的高温原位观测方法,并开展了高速风洞内的激光辐照实验,获得了典型金属材料与复合材料在超声速切向气流条件下的瞬态烧蚀与破坏行为;此外,基于Horn-Schunck光流法分析了各典型材料的烧蚀特征与质点的运动速度,基于粒子图像测速法并结合复合材料铺层结构特征获得了瞬时烧蚀速度。研究结果表明,各材料的动态烧蚀行为有很大差异:在切向气流作用下,熔融态钛合金的流动模式从燕尾状转变为羽翼状,而镍基高温合金则呈雨滴状流动。基于Kelvin-Helmholtz机制分析了切向气流作用下不同金属材料击穿时间存在差异的原因。超高温陶瓷复合材料的热化学烧蚀和机械剥蚀特征与编织结构类型密切相关,并且高激光功率密度条件下的抗激光烧蚀性能与碳纤维含量成正比。
激光技术 激光破坏效应 原位观测技术 瞬态烧蚀形貌 超声速切向气流 光流法 
中国激光
2023, 50(16): 1602201
郭爽 1,2徐江涛 1,2,*高志远 1,2张磊 1,2,3
作者单位
摘要
1 天津大学微电子学院,天津 300072
2 天津市成像与感知微电子技术重点实验室,天津 300072
3 天津中德应用技术大学软件与通信学院,天津 300350
为进一步提高事件传感器光流估计的精确度,解决平面拟合算法的拟合模型误差问题,提出一种事件传感器平面拟合光流估计改进算法。该算法采用Prim贪婪算法思想,从事件流中提取有效事件,获取最优局部邻近事件集,为后续光流估计奠定基础。同时,采用特征值算法代替传统最小二乘法,结合贪婪算法下事件集内数据的优劣排序,优化平面拟合模型的建立,提高光流估计算法的精确度。实验结果表明,相比于现有的基于平面拟合的事件传感器光流估计算法,该算法在平均端点误差和平均角度误差两个指标上分别约提升20%和11%,有效提升了事件传感器光流估计算法的精确度。
机器视觉 光流估计 平面拟合 Prim算法 特征值法 随机抽样一致算法 
激光与光电子学进展
2023, 60(14): 1415001

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!