Author Affiliations
Abstract
1 Institute of Modern Optics, Nankai University, Tianjin Key Laboratory of Micro-scale Optical Information Science and Technology, Tianjin 300350, China
2 Department of Thyroid and Neck Tumor, Tianjin Medical University Cancer Institute and Hospital National Clinical Research Center for Cancer, Key Laboratory of Cancer Prevention and Therapy, Tianjin 300060, China
Limited by the dynamic range of the detector, saturation artifacts usually occur in optical coherence tomography (OCT) imaging for high scattering media. The available methods are difficult to remove saturation artifacts and restore texture completely in OCT images. We proposed a deep learning-based inpainting method of saturation artifacts in this paper. The generation mechanism of saturation artifacts was analyzed, and experimental and simulated datasets were built based on the mechanism. Enhanced super-resolution generative adversarial networks were trained by the clear–saturated phantom image pairs. The perfect reconstructed results of experimental zebrafish and thyroid OCT images proved its feasibility, strong generalization, and robustness.
Optical coherence tomography saturation artifacts deep learning image inpainting 
Journal of Innovative Optical Health Sciences
2024, 17(3): 2350026
作者单位
摘要
1 兰州交通大学 电子与信息工程学院,甘肃兰州730000
2 兰州大学 信息科学与工程学院,甘肃兰州730000
利用图像结构特征进行图像修复,是近年来在深度学习技术广泛应用背景下出现的新方法。应用该方法可以在缺失区域内生成合理的内容,但图像修复结果过于依赖图像结构的提取内容,且在实际训练中会出现错误的持续传播和累积,一旦图像结构存在噪声或失真会直接影响到图像的生成质量。该方法处在探索应用阶段,尚存在网络训练难度大、鲁棒性较差、生成图像上下文语义不一致等问题。为此,本文提出了一种图像平滑结构指导修复的并行网络结构。图像平滑结构的生成内容不直接作为下一级网络的输入,只为网络的解码层提供指导信息。同时,为了更好地匹配和均衡结构与图像之间的特征关系,本文结合transformer提出了一种多尺度特征指导模块。该模块利用transformer联系全局特征的强大建模能力,对结构和图像纹理之间的特征进行匹配和均衡。实验结果表明,本文方法在三个常用的数据集上能够有效地恢复图像缺损内容,并且可以作为图像编辑工具实现目标移除。
图像修复 深度学习 平滑结构 Transformer image inpainting deep learning smooth structure transformer 
光学 精密工程
2024, 32(4): 549
作者单位
摘要
1 聊城大学物理科学与信息工程学院山东省光通信科学与技术重点实验室,山东 聊城 252059
2 聊城大学计算机学院,山东 聊城 252059
目前中华传统刺绣工艺传承保护问题中的修复任务主要以人工为主,修复过程需要大量的人力、物力。随着深度学习的高速发展,不同类型的刺绣文物损伤可以利用生成对抗网络进行修复。针对上述问题,提出一种基于改进深度卷积生成对抗网络(DCGAN)的刺绣图像修复方法。首先,在生成器部分引入空洞卷积层扩大感受野,并添加卷积注意力机制模块,在通道与空间2个维度增强重要特征的指导作用;在判别器部分增加全连接层数提升网络解决非线性问题的能力;在损失函数部分联合均方误差损失与对抗损失通过网络训练相互博弈的过程实现刺绣图像修复。实验结果表明:引入空洞卷积层与注意力机制提升了网络性能与修复效果,最终得到修复图像的结构相似性高达0.955,能够得到较为自然的刺绣图像修复效果,可以为专家提供纹理、色彩等信息作为参考辅助后续的修复。
非遗文化保护 刺绣图像修复 生成对抗网络 卷积神经网络 空洞卷积 注意力机制 
激光与光电子学进展
2023, 60(20): 2010005
作者单位
摘要
1 西安工程大学纺织科学与工程学院,陕西 西安 710048
2 西安工程大学大学科技园,陕西 西安 710048
为修复破损纺织品文物图像,在Criminisi算法基础上,提出一种改进的基于K-means颜色分割的纺织品文物图像修复算法。根据纺织品文物图像的特点,将RGB图像转化为Lab颜色模型,采用K-means分类器对a*b*层数据基于颜色进行分割处理,对纹样图案边缘进行标定并缩小匹配块搜索区域;引入L值的标准差来表示颜色离散度,对优先权函数以及自适应匹配块进行改进。用所提算法与文献报道的3种算法对自然破损纺织品文物图像和人为破损纺织品图像进行修复,并对修复结果进行评价。实验结果表明,所提算法修复的图像纹理自然、结构合理,峰值信噪比、结构相似性、特征相似性、均方误差值更好。
破损纺织品文物 纹样图案 Criminisi算法 图像修复 K-means聚类 
激光与光电子学进展
2023, 60(16): 1610011
作者单位
摘要
1 辽宁工程技术大学 电子与信息工程学院,辽宁 葫芦岛 125105
2 渤海船舶职业学院,辽宁 葫芦岛 125105
针对现有修复算法在处理较大面积缺失时易产生伪影且与原图像语义不符的问题,提出了基于门控卷积与注意迁移的二阶图像修复方法,通过加强待修复图像内部语义对修复网络的影响来确保修复结果整体语义的一致性。首先使用多层卷积对缺损图像进行粗略修复;然后将粗略修复结果输入改进的细化修复网络,使用门控卷积和注意迁移网络对图像内部纹理细节进行修复处理,在编解码阶段引入SimAM模块作为注意力机制,强化对待修复图像中重要信息的筛选能力;最后通过谱归一化的马尔科夫判别器判别真伪同时提供对抗损失,将感知损失与多尺度结构相似性损失作为重建损失再将其与对抗损失相结合作为损失函数。与其他图像修复方法的对比实验表明,本文方法较其中最好结果在结构相似性上提升1.47%,峰值信噪比上提升5.48%。本文方法修复结果更加真实自然且在各种尺寸缺失下均实现了理想的修复效果。
图像处理 图像修复 门控卷积 注意迁移 对抗损失 image processing image inpainting gated convolution attention transfer adversarial loss 
液晶与显示
2023, 38(5): 625
图像修复方法综述下载:1487次
作者单位
摘要
1 广西大学电气工程学院,广西 南宁 530004
2 中国科学院合肥智能机械研究所,安徽 合肥 230031
图像修复技术是目前计算机视觉领域的研究热点之一,该技术主要利用缺失区域周边或者外部辅助数据来对图片受损区域进行信息推理和修复。随着大数据时代的到来,基于深度学习的图像修复技术以其出色的性能成为了图像处理领域内的关注点。对现有的图像修复算法进行总结,对各个算法的模型结构、性能表现及在常用数据集上的指标进行讨论说明,并对该领域目前所存在的问题和难点进行分析和展望。
图像修复 深度学习 卷积神经网络 自编码网络 对抗生成网络 
激光与光电子学进展
2023, 60(2): 0200002
王凤随 1,2,3,*刘正男 1,2,3付林军 1,2,3
作者单位
摘要
1 教育部高端装备先进感知与智能控制重点实验室, 安徽 芜湖 241000
2 安徽省电气传动与控制重点实验室, 安徽 芜湖 241000
3 安徽工程大学电气工程学院, 安徽 芜湖 241000
针对传统Criminisi算法中优先权值很快趋于零,且修复时间较长等缺点,提出一种改进的基于信息熵和梯度因子的图像修复算法。首先,将图像信息熵与梯度因子拟合为权重因子,采用优化优先权的计算方式找到最优修复块;其次,利用可度量像素块复杂度的信息熵对匹配块的搜索区域进行调整,建立搜索区域的动态法则;然后,借助于梯度因子建立匹配块模板尺寸的自适应模型,完善最优匹配块搜索策略;最后,引入序贯相似性检测算法从源区域中选取最优匹配块,实现图像的修复。实验结果表明,与传统Criminisi算法相比,所提算法无论在客观方面还是在主观方面都获得了较满意的图像修复结果,修复效果更加真实,修复图像具有更好的视觉效果。
图像处理 图像修复 Criminisi算法 信息熵 梯度因子 
激光与光电子学进展
2020, 57(22): 221006
作者单位
摘要
1 湖北轻工职业技术学院信息工程学院,湖北武汉 430070
2 湖北大学信息化建设与管理处,湖北武汉 430062
针对当前较多图像修复算法依靠固定大小样本块来搜寻最优匹配块,忽略了样本块的结构信息,使修复图像出现间断现象以及振铃现象等不足,利用样本块与其邻域块的近似度,设计了一种采用结构信息约束法则与 匹配模型的图像修复算法。将图像的信息熵特征引入到待修复块的优先权计算过程中,获取优先修复块。通过样本块与其邻域块的近似度构造结构信息度量模型,对样本块的结构信息进行度量,并根据度量值建立结构信息 约束法则,实现样本块大小的自适应调整。最后,利用图像的色彩及灰度特征构造匹配模型,利用调整后的样本块大小在已知区域中寻找最优匹配块,从而对待修复块进行修复。实验结果显示,所提算法得到的修复图像具 备较好的纹理连续性,不存在信息间断现象,对应的结构相似度较高。
图像修复 信息熵 结构信息约束法则 样本块大小 匹配模型 最优匹配块 image inpainting information entropy structural information constraint rule sample block size matching model optimal matching block 
太赫兹科学与电子信息学报
2020, 18(3): 477
付傲威 1,*赵敏 1罗令 1邢妍 2[ ... ]王琼华 2
作者单位
摘要
1 四川大学 电子信息学院, 四川 成都 610065
2 北京航空航天大学 仪器科学与光电工程学院, 北京 100191
传统虚拟视点生成采用像素填充法对生成的虚拟视点图像进行空洞填充和伪影修复, 其修复效果无法满足自由立体显示需求。为了获取高质量的虚拟视点图像, 提出了一种基于深度卷积神经网络的虚拟视点生成方法。该方法采用随机初始化的深度卷积神经网络作为图像先验, 经过卷积神经网络结构的不断迭代, 对虚拟视点图像的空洞和伪影进行修复, 并将得到的高质量虚拟视点图像合成为自由立体图像, 用于自由立体显示。修复后的虚拟视点图像的PSNR均值为25.6, 相比传统像素填充方法有明显提升。实验结果表明, 所提方法能够实现高质量的自由立体显示效果。
自由立体显示 虚拟视点生成 深度卷积神经网络 图像修复 autostereoscopic display virtual viewpoint image deep convolutional neural network image inpainting 
液晶与显示
2019, 34(11): 1031
作者单位
摘要
兰州交通大学电子与信息工程学院, 甘肃 兰州 730070
BSCB模型在传输过程中引入Laplace算子时采用的点是某一像素周围4个邻点,对像素的表示会有局限性,进而造成修复后边缘模糊的现象。为优化这一问题,提出一种基于粗糙数据推理的改进BSCB算法,利用粗糙数据推理空间制定与某一像素相关联的采取规则以期挖掘像素之间的近似关系、衍生关系及拓展关系,选取与某一像素相关性最大的点,从而避免像素表示的局部性问题。实验结果表明,与经典的BSCB算法相比,改进后的算法在传输过程中采取的点更能体现图像结构,可获得较好的视觉效果,峰值信噪比也从数据层面证实修复效果的改善。
图像处理 图像修补 传输和扩散 Laplace算子 粗糙数据推理 BSCB算法 
激光与光电子学进展
2019, 56(23): 231005

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!