最新!图像去噪综合比较研究

作者 | CV君
报道 | 我爱计算机视觉(微信id:aicvml)

图像去噪是计算机视觉领域的传统方向,对于可见光图像、视频、核磁图像等的处理仍应用广泛,在工业和学术界引起很多人的关注,基于BM3D(block-matching 3D ,2007)框架的系列算法是该领域的著名方法,其结合图像非局部相似的属性和变换域的稀疏表示,在深度学习用于CV各领域的今天仍有用武之地。

今天新出的论文『A Comprehensive Comparison of Multi-Dimensional Image Denoising Methods』,对传统的图像去噪方法和深度学习方法进行了综述和比较,考察了191篇文献,相信对研究该方向的朋友定有帮助。

该文作者信息:

作者来自理海大学和华南理工大学。

图像去噪旨在给定噪声图像恢复原图像,单在噪声模型难以估计的情况下,利用图像的 NLSS(非局部自相似) 属性成为方法的主流。亦即自然图像内部含有相似的图像块,利用此特点恢复源图像,NLSS先验与补丁表征示例:

传统图像去噪方法(成功的BM3D框架的众多方法)流程:

即噪声图像经过Grouping、Collaborative filtering、Aggregation,得到结果图像。

传统的多维图像数据的去噪器:

基于DNN去噪方法及应用:

具有三个卷积层的简单CNN去噪框架图解:

该文详尽总结了用于评测结果的人工合成和真实世界的多维图像去噪数据集(具体出处和下载方式请参考原论文):

具有代表性的多维图像去噪方法和数据集的发展史:

部分数据集的示例图像:

另外为评估算法,作者还推出了自己收集的IOCI数据集:

传统方法和基于DNN的方法在几个真实彩色图像数据集上的结果,以 PSNR 和 SSIM 为评价指标:(请点击查看大图)

多个方法在真实彩色视频数据集上的评比详细结果:

另外,对于图像去噪PSNR 和 SSIM 并不能完美反应图像质量,作者还做了大量的视觉效果评估:

1)CC15 数据集(PSNR)  (图8)

2)PolyU 数据集(PSNR)  (图9)

3)IOCI’s IPHONE 5S 数据集(PSNR) (图10)

4)IOCV 数据集(彩色视频去噪)(图11)

同样,作者使用用户调查打分的方式,得到了人为评分结果:

FastDVDNet算法在计算量较低的前提下,效果表现也一致的好。

在 CAVE 数据集上的高噪声水平σ=100时,对基于张量的去噪器的比较结果:(图12)

CAVE 数据集上,高斯噪声 σ = {10, 30, 50, 100}时的质量和计算时间(分钟)对比结果:(表7)

高斯噪声下 MSt-SVD 和 QRNN3D 的平均PSNR/SSIM 值和计算时间(分钟)σ∈{10,20}(表8)

在真实世界 HHD 数据集上,MSI 去噪方法比较结果:(图13)

σ≥11%时高噪声水平下的去噪性能比较:(图14)

T1w、T2w和PDw数据被Rician噪声破坏的情况下,不同方法的平均PSNR/SSIM 值 和 计算时间(s)(表9)

在估计噪声水平σ = 19% 的合成Brainweb T1w 数据上对比较方法进行可视化评估(图15)

在估计噪声水平σ=3% 的真实OAS1 0112 T1w数据上对比较方法进行可视化评估(图16)

在估计噪声水平σ = 4.5% 的真实 OAS1 0092 T1w数据上对比较方法进行可视化评估(图17)

CBM3D1 在 σ∈[10,30]时五个数据集上的 PSNR 和 SSIM 值对比(图18)

PSNR 和 SSIM 6种不同实现的(图19)

使用和不使用图像大小调整策略的 CMSt-SVD 方法的视觉效果对比:(图20)

当一组中的所有补丁都相同时,T-HOSVD 应用于无噪声图像时的过度平滑效果图(图21)

最终,作者总结发现:

1)BM3D系算法在性能和效果上均展示出不俗的表现;

2)对于仅从噪声观察中学习的传统降噪器,改进的奇异值分解(M-SVD)方法能够与许多基于张量的方法产生相似的结果;

3)基于DNN的方法虽然在合成数据集上训练(因为所需标签数据在实际场景中是不存在的,只能采用合成噪声图像的方法),但在实际测试中仍表现出强大的泛化能力。

该文内容涉及广泛,非常值得从事图像去噪的朋友研究。


我爱计算机视觉
个人微信公众号:我爱计算机视觉 微信 id:aicvml 专业计算机视觉技术分享平台,“有价值有深度”,分享开...
1 声望
3 粉丝
0 条评论
推荐阅读
Kaggle竞赛中使用YoloV5将物体检测的性能翻倍的心路历程
本文转载自AI公园。作者:Mostafa Ibrahim编译:ronghuaiyang导读作者在kaggle比赛中从建立基线到一步一步的优化过程,最终将performance提升了一倍,非常好的竞赛经验总结文章。我花了三个月的时间深入研究物体...

我爱计算机视觉1阅读 2.9k

定档 6 月!SegmentFault AI Hackathon 杭州站启动
AI 掀起巨浪,你我应是冲浪者。创业团队、互联网大厂、国家队的大模型角力如火如荼,各类开源模型、垂直模型的出现也推动着越来越多 AGI 应用的陆续落地。

SegmentFault思否7阅读 59k评论 2

封面图
用 AI 生成漂亮小姐姐(一)——Stable Diffusion 小白搭建教程
最近 AIGC、ChatGPT 等话题持续发酵,热门程度不亚于之前的 “元宇宙”。抖音、小红书到处都是机器对话、AI 绘图的视频。我看见别人生成的漂亮小姐姐图片眼馋得不行,终于按捺不住自己的好奇心,也尝试一下搭建。本...

WalkerD15阅读 1.7k评论 3

Science AI 大潮已至,科技部亲自下场出大动作
生成式 AI 爆火,中国如何在 AI 时代实现弯道超车?对此,科技部亲自给出答案:启动 AI for Science 专项部署工作。可以预见,AI for Science 新一轮大潮即将来临。

超神经HyperAI3阅读 80k

封面图
TOPI 简介
这是 TVM 算子清单(TOPI)的入门教程。 TOPI 提供了 numpy 风格的通用操作和 schedule,其抽象程度高于 TVM。本教程将介绍 TOPI 是如何使得 TVM 中的代码不那么样板化的。

超神经HyperAI1阅读 90.7k

编译 MXNet 模型
本篇文章译自英文文档 Compile MXNet Models。作者是 Joshua Z. Zhang,Kazutaka Morita。更多 TVM 中文文档可访问 →TVM 中文站。本文将介绍如何用 Relay 部署 MXNet 模型。首先安装 mxnet 模块,可通过 pip 快速...

超神经HyperAI1阅读 55.1k

横向对比 11 种算法,多伦多大学推出机器学习模型,加速长效注射剂新药研发
内容一览:长效注射剂是解决慢性病的有效药物之一,不过,该药物制剂的研发耗时、费力,颇具挑战。对此,多伦多大学研究人员开发了一个基于机器学习的模型,该模型能预测长效注射剂药物释放速率,从而提速药物整...

超神经HyperAI1阅读 44.1k

封面图
1 声望
3 粉丝
宣传栏