第三组图像聚焦区域与散焦区域的判别方法综述.docx

1、第三组图像聚焦区域与散焦区域的判别方法综述图像工程文献综述-图像聚焦区域与散焦区域的判别方法(focus/Defocus region detection and discrimination)小组编号：3小组成员姓名：张艳（2014201503）何长青（2014201750）蒋长鸿（2014261833）2014年10月图像聚焦区域与散焦区域的判别方法摘要：计算机通过图像或视频正确理解周围环境是计算机视觉的首要研究目标,该领域至关重要的三项工作即正确感知场景中的主要物体,识别物体的轮廓和获得物体的环境上下文。要实现这个目标,对图像聚焦区域和散焦区域的正确判别是必不可少的。聚焦区域属于图像中的

2、显著性区域,也属于图像的清晰区域，散焦区域属于图像中模糊区域的一种，而现在大部分聚焦区域和散焦区域的判别算法在判别准确度方面存在一定的问题,不能进行准确分辨和提取。在很多聚焦区域和散焦区域检测有相关研究中,一个关键问题是寻找能够表征图像模糊的评价指标,进而将图像的模糊区域和清晰区域区分开来，然后根据散焦与运动造成的模糊区域的特征来判别出散焦区域。本文通过对图像聚焦区域和散焦区域的判别方法展开研究,主要提出和改进了一些非糊区域和模糊区域的一些判别方法以及散焦区域的判别。关键字：聚焦区域 散焦区域 模糊区域 判别方法1.引言随着计算机性能和功能的发展,人们越来越希望计算机可以更加自主更加智能的完成

3、任务。要实现这个目标,需要计算机能够理解周围的环境。人类感知外界信息最主要方式是通过视觉,所以计算机理解周围环境的关键是具有视觉感知处理能力。人类对外界环境的视觉感知能力经过了长时间自然选择进化到了一个很高级的水平。人类能够快速高效的分析周围环境,定位感兴趣的物体,并作出相应的反应。关于人的视觉分析能力原理性研宄早己展开,但是还没有取得决定意义的成果。但是计算机对于我们所获得图像的聚焦区域和散焦区域的判别必须通过一定的分类器来达到目的。所以对图像聚焦区域和散焦区域的正确判别是计算机视觉研究中的一个重要研究方向。在光学相机的曝光时间内，如果场景中存在运动目标或者场景部分对焦不准，就会造成图像局部

4、模糊，图像模糊并非是一种完全不利于图像分析的退化，作为成像系统和目标场景之间产生的独特物理现象，其本质和场景深度或运动之间有着深刻的内在了解，利用模糊现象的规律实现景深的人工处理，或认识测量运动是可能的。而对于计算机通过图像或视频正确理解周围环境来说，正确感知场景中的主要物体,识别物体的轮廓和获得物体的环境上下文是至关重要的工作，而聚焦区域的判别是获得图像的视觉显著性信息是最为基础的一步。因此，对于图像的聚焦区域和散焦区域的判别是我们正确认识图像和理解图像的关键环节。目前，图像模糊区域的检测取得了一定的成果，如Hsu等根据图像梯度分布的统计规律，使用支持向量机的方法对图像模糊区域进行检测。Ta

5、i等利用局部灰度与梯度变化的关系实现失焦模糊的估计，并通过MRF传播优化得到局部失焦模糊区域。Zhou等对失焦模糊图像进行再次模糊，计算前后图像边缘位置的梯度比得到边缘的模糊度，并扩展至整幅图像求得失焦模糊的区域图。Crimaldi等采用多次分块的分法，使用局部标准差作为模糊评价指标对图像局部运动模糊区域进行检测。Su等利用图像模糊与像素奇异值分布之间的关系，通过奇异值特征来判断某个像素属于模糊区域还是清晰区域。上述的图像模糊区域检测方法虽然能在一定程度上将局部模糊区域检测出来，但是模糊区域的分割都是依据模糊检测的结果，采取适当的阈值将模糊区域分割出来，分割结果通常比较粗糙，模糊区域边界不够精

6、确，带来的误差较大。本文主要分为三部分：（一）聚焦区域与散焦区域的介绍（二）对于聚焦区域和散焦区域的判别方法的介绍（三）小结与展望2聚焦区域和散焦区域的介绍聚焦区域(focused image)指的是图像中有一块清晰的视觉聚焦区域,其余区域为模糊区域。对于一定的光学系统，成像模糊的原因主要有：场景的散焦和运动模糊。失焦造成的模糊图像如图1所示，而运动模糊图像如图2所示。图1 散焦模糊图像图2 运动模糊图像场景散焦模糊的原因是：任何光学系统成像都有一定的景深范围，光学系统成像时使距离离镜头一定范围内的场景聚焦所成的像小于人眼感觉清晰容许的弥散圆，则这个范围内的场景在景深范围内，可清晰成像，而不在

7、景深范围内的场景成像的像点弥散太大，使得成像平面中一个像点重叠了若干物点的成像点，从而产生视觉模糊，如图所示。而运动模糊是由于目标与镜头之间的相对运动产生，在一定的曝光时间内物点的运动，引起对应像点的运动，使像平面内的一个像点重叠了若干个物点的像点，引起视觉上的模糊。3.聚焦区域与散焦区域的检测目前，图像模糊区域的检测取得了一定的成果，如Hsu等根据图像梯度分布的统计规律，使用支持向量机的方法对图像模糊区域进行检测。Tai等利用局部灰度与梯度变化的关系实现失焦模糊的估计，并通过MRF传播优化得到局部失焦模糊区域。Zhou等对失焦模糊图像进行再次模糊，计算前后图像边缘位置的梯度比得到边缘的模糊度

8、，并扩展至整幅图像求得失焦模糊的区域图。Crimaldi等采用多次分块的分法，使用局部标准差作为模糊评价指标对图像局部运动模糊区域进行检测。但是这几种方法虽然能在一定程度上将局部模糊区域检测出来，但是模糊区域的分割都是依据模糊检测的结果，采取适当的阈值将模糊区域分割出来，分割结果通常比较粗糙，模糊区域边界不够精确，带来的误差较大。聚焦（清晰）区域与散焦（散焦模糊）区域的检测可以分为两个步骤：模糊区域检测和模糊区域分类（散焦模糊与运动模糊）。模糊区域检测和模糊区域分类的关键是可以描述图像模糊的特征和模糊类别的特征。研究者们先后提出了多种判断图像模糊程度的方法。Chung等使用图像边缘梯度幅值分布

9、的标注差与边缘梯度幅值的加权和来判断图像的模糊程度。Liu等利用局部功率谱曲线、梯度分布曲线和最大色彩饱和度三个特征对模糊区域进行检测。Su等根据图像模糊与像素奇异值分布之间的关系，提出了利用奇异值来检测模糊区域。下面是研究者使用的图像模糊特征和模糊类别的特征。3.1基于奇异值分析的方法主要思想：Su等1根据图像模糊与像素奇异值分布之间的关系，提出了利用奇异值来检测模糊区域，利用alpha通道特征来鉴别模糊类型，从而检测出聚焦（清晰）区域与散焦（散焦模糊）区域。3.1.1特征(1)图像模糊特征对于给定的图像，它的奇异值分解为，其中U和V为正交矩阵，S为对角阵，对角线上的元素为按降序排列的奇异值

10、。图像可以分解为r个以奇异值为权值且秩为1的矩阵（也称特征图像）之和：其中是S的对角线项，和是U和V的列向量，r是I的秩。奇异值越大，相应的特征所占的分量越重。由于奇异值是按降序排列的，因此，当使用SVD进行图像压缩时通常使用前k项来近似图像I，而忽略后面奇异值很小的描述图像细节信息的项，从而达到压缩的目的。图像模糊和图像压缩相似，保持了形状结构而丢失了细节信息。对于图像I，假设其与模糊函数h的卷积为：由于大的尺度描述的是图像的概貌特征，小的尺度描述图像的细节特征，上式中的相当于增大了特征图像的尺度空间，造成图像高频信息的丢失。根据这一特点，Su等人研究发现模糊图像前k项奇异值所占的比重比清晰

11、图像的要大，并提出了以奇异值特征作为测量图像模糊程度指标的新方法：其中，像素的模糊特征q为邻域图像块的奇异值前k项所占的比重。(2)模糊类别特征模糊类别特征采用Alpha通道特征。由两层图像构成模型，图像I可以看做由前景图像F和背景图像B的组合：其中。清晰图像中，为0或1。在模糊图像中，前景和背景混合在一起。由alpha通道模型，的分布与模糊类别有关，对于运动模糊，分布呈直线，如图4中（a）,对于失焦模糊，分布呈圆形，如图4中（b）。图4 运动模糊图像与三角图像的分布图Su提出了利用分布形状来区分模糊类型。在分布上计算不同方向上中心到显著点的距离，得到。定义alpha通道特征为距离的方差：运动

12、模糊区域相比于失焦模糊区域有更大的q值。3.1.2模型训练搜集包含清晰区域、失焦模糊和运动模糊的图片，将图片分割为更小的块使得每块只包含模糊或清晰区域，对所有块进行标注，清晰、失焦模糊、运动模糊。在训练数据上训练得到模糊、非模糊分类的奇异值特征的最佳阈值t1和运动模糊、失焦模糊alpha通道特征的最佳阈值t2。3.1.3判别算法对于一个区块，计算奇异值特征q1，如果q1=t1则为模糊区域，如果区块为模糊区域，则进一步计算alpha通道特征q2，如果q20是决定SVW参数的上限（即松弛变量）于我们要分类的任务，我们使用高斯核函数，即对于未知样本x的分类,则分类结果可以这样表示：从上式可知，对于未

13、知的x当y=1时，则属于非模糊区域；y=-1时，则属于模糊区域;y=0时，则属于过渡区域。3.3.3图像模糊区域和非模糊区域的判别该判别分两阶段进行，即粗略模糊区域判断和模糊区域边界判断。第一阶段，我们将像分割为三部分：模糊区域（BR）,清晰区域（NBR）,过渡区域（TR）。第二阶段：确定模糊区域边界。 第一阶段的算法主要包括以下步骤：（1）将图像在YUV颜色转换；（2）提取Y分量64X64大小的重叠块；（3）特征提取：计算小波梯度并建立每个提取块的梯度直方图；（4）概率SVM：在每个提取部分直方图中使用概率SVM；（5）概率图：基于支持向量机预测每个提取块的概率值，从而构建图像的概率图；（6

14、）构建概率直方图：构建概率图的全局直方图；（7）阈值估计：对全局概率直方图分析，确定两个阈值来进行BR，NBR 和TR分类，而阈值的选择可以根据下图得到。图8 Histogram of probability map and estimated thresholds第二阶段包括以下步骤：（1）对应于小波梯度图，建立TR和BR区域的小波梯度直方图；（2）基于BR梯度直方图，拉普拉斯分布参数进行最大似然估计；（3）对应于拉普拉斯分布ML估计的置信区间为99，计算得阈值t1和t2;（4）使用的阈值对梯度小波图TR进行二值化处理； （5）由步骤（4）所得的二进制掩码和BR确定的二进制掩码组合成一个全局

15、的二进制模糊掩模。（6）对得到的二进掩模应用二值形态学“闭合”算子，可得最终的模糊区域。对于这两步骤的图像说明如下图所示：图9.从梯度图像的分段区域BR和TR的二值掩码：A-真实模糊区域，B-第一阶段粗略BR二值掩码，C-在第二阶段第4步的TR二值掩码，D最终的模糊区域4.小结与展望本文总结了几种现在常用的判别清晰区域和模糊区域以及对于模糊区域的分类的方法，即Liu等综合了局部功率谱曲线，梯度分布曲线和最大色彩饱和度三个模糊评价指标的特性对模糊区域进行检测分类。Su等根据图像模糊与像素奇异值分布之间的关系，提出了利用奇异值来检测模糊区域，利用alpha通道特征来鉴别模糊类型，从而检测出聚焦（清

16、晰）区域与散焦（散焦模糊）区域。Ranched等3利用小波空间的图像特征和SVM来对图像模糊/非模糊区域进行分类。但是，这几种方法在整体上可以达到相对高的精确度和召回率，但是每种方法均有自己的不足之处。所以，我们希望将来能够把几种方法结合起来，可以达到更好的效果。参考文献1. B. Su, S. Lu, and C. L. Tan, “Blurred image region detection and classification,” in Proc. Association for Computing Machinery, ACM Multimedia, 2011, pp. 1397-14

17、00. 2 R. Liu, Z. Li, and J. Jia, “Image partial blur detection and classification,” in Computer Vision and Pattern Recognition, 2008. IEEE Conference on , 2008, pp. 18.3 Kanchev, V.; Tonchev, K.; Boumbarov, O., Blurred image regions detection using wavelet-based histograms and SVM,Intelligent Data A

18、cquisition and Advanced Computing Systems (IDAACS), 2011 IEEE 6th International Conference on, vol.1, no., pp.457,461, 15-17 Sept. 20114 Yun-Chung Chung; Jung-Ming Wang; Bailey, R.R.; Sei-Wang Chen; Shyang-Lih Chang, A non-parametric blur measure based on edge analysis for image processing applicati

19、ons,Cybernetics and Intelligent Systems, 2004 IEEE Conference on, vol.1, no., pp.356,360 vol.1, 1-3 Dec. 20045 L. Kovcs and T. Szirnyi. Focus area extraction by blind deconvolution for defining regions of interest. IEEETransaction on Pattern Analysis and Machine Intelligence,29:10801085, 2007.6 A. L

20、evin. Blind motion deblurring using image statistics.Advances in Neural Information Processing Systems, 2007.7 J. D. Rugna and H. Konik. Automatic blur detection for metadata extraction in content-based retrieval context. SPIE,5304:285294, 2003.8 熊继平，赵健，一种基于RPCA的图像聚焦区域检测方法，计算机系统应用，2014.9 Blurred Ima

21、ge Regions Detection using Wavelet-based Histograms and SVM，2011 IEEE10 R. Liu, Z. Li, and J. Jia, “Image partial blur detection and classification,” in Computer Vision and Pattern Recognition, 2008.IEEE Conference on, 2008, pp. 18.11 H. Tong, M. Li, H. Zhang, and C. Zhang, “Blur detection for digit

22、al images using wavelet transform,” in Multimedia and Expo,2004. ICME 04. 2004 IEEE International Conference on, vol. 1,june 2004. 12 A Non-Parametric Blur Measure Based on Edge Analysis for Image Processing Applications，Singapore, 1-3December, 200413 Renting Liu，Image Partial Blur Detection and Cla

23、ssification，In ICCV, 2008.14 Y. Chung, J. Wang, R. Bailey, S. Chen, and S. Chang. A non-parametric blur measure based on edge analysis for image processing applications. IEEE Conference on Cybernetics and Intelligent Systems, 1, 2004.15 J. Da Rugna and H. Konik. Automatic blur detection for metadata extraction in content-based retrieval context. In SPIE, volume 5304, pages 285294, 2003. 116 Yipeng Liu，Novel focus region detection method for multifocus image fusion using quaternion waveletournal of Electronic Imaging，22(2), 023017 (AprJun 2013)文档可能无法思考全面，请浏览后下载，另外祝您生活愉快，工作顺利，万事如意!