第5章图像特征提取与分析剖析课件.ppt
《第5章图像特征提取与分析剖析课件.ppt》由会员分享,可在线阅读,更多相关《第5章图像特征提取与分析剖析课件.ppt(142页珍藏版)》请在三一办公上搜索。
1、第4章 图像特征提取与分析,第4章 图像特征提取与分析,本章重点:图像特征及特征提取的基本概念。常见的图像特征提取与描述方法,如 颜色特征、纹理特征和几何形状特征 提取与描述方法。,4.1 引言 4.2 颜色特征的提取与表示 4.3 纹理特征的提取与表示 4.4 形状特征的提取与表示 4.5 小结,第4章 图像特征提取与分析,4.1 引 言,4.1.1 基本概念,特征 从广义上讲,图像的特征包括基于文本的特征(如关键字、注释等)和视觉特征(如色彩、纹理、形状、对象表面等)两类。视觉特征分类:颜色(color)、形状(shape)、纹理(texture)等,特征形成 根据待识别的图像,通过计算产
2、生一组原始特征,称之为特征形成。,特征提取 原始特征的数量很大,或者说原始样本处于一个高维空间中,通过映射或变换的方法可以将高维空间中的特征描述用低维空间的特征来描述,这个过程就叫特征提取。,4.1.1 基本概念,特征选择 从一组特征中挑选出一些最有效的特征以达到降低特征空间维数的目的,这个过程就叫特征选择。选取的特征应具有如下特点:可区别性可靠性独立性好数量少,4.1.1 基本概念,特征选择和提取的基本任务如何从众多特征中找出最有效的特征。图像特征提取的方法低层次:形状、纹理、颜色、轮廓等图像某一方面的特征。中层次:高层次:在图像中层次特征基础上的再一次抽象,赋予图像一定的语义信息。,4.1
3、.1 基本概念,4.1.2 应 用,基于内容的图像检索(CBIR,Content-Based Image Retrieval),研究背景:CBIR是目前多媒体、信息检索、人工智能、数据库等领域共同关注的一个重要研究领域;源于改进基于文本的图像检索技术(text-based image retrieval)的不足;,4.1.2 应 用,研究内容:图像的内容是指物体、背景、构成、颜色等;是一种基于图像固有属性的机械匹配;,步骤 特征提取 图像匹配 结果输出 特征调整,4.1.2 应 用,体系结构 系统的核心是图像特征数据库。,研究现状 目前CBIR技术主要集中在颜色、纹理、形状等低层物理特征提取的
4、基础上。基于高层语义的检索正有待研究。,4.1.2 应 用,方法分类 基于颜色特征的检索 基于纹理特征的检索 基于形状特征的检索,4.2 颜色特征的提取与表示,4.2.1 引言4.2.2 颜色直方图 4.2.3 颜色矩4.2.4 颜色集4.2.5 颜色聚合向量4.2.6 颜色相关图,4.2.1 引言,颜色特征的特点颜色与图像中包含的物体或场景关系密切;颜色特征对图像尺寸、方向、视角等的依赖性小;需要解决的两个问题选择合适的颜色空间计算颜色特征选择合适的方法将颜色特征量化表示的主要方法 颜色直方图、主色调、颜色矩、颜色集、聚类,4.2.2 颜色直方图,设一幅图像包含M个像素,图像的颜色空间被量化
5、成N个不同颜色。颜色直方图H定义为:hi为第i种颜色在整幅图像中具有的像素数。归一化为:,(1)概念,(2)特点,4.2.2 颜色直方图,包含了图像中的颜色信息;描述的是不同颜色在整幅图像中所占的比例,而不关心每种颜色的空间位置;通过对图像中的像素进行遍历即可建立;对于平移、旋转、尺度的变化和部分遮挡情况具有不变性;,4.2.2 颜色直方图,(3)建立,选择合适的颜色空间,由于RGB颜色空间与人的视觉不一致,可将RGB空间转换到视觉一致性空间。除了HSI空间外,还可以采用一种更简单的颜色空间:这里,max=255。,4.2.2 颜色直方图,颜色量化:将颜色空间划分为若干个小的颜色区间,每个小区
6、间成为直方图的一个bin(柱状图中每个柱所在的区间);方法:向量量化、聚类方法、神经网络方法等;计算落在每个小区间内像素的数量,得到颜色直方图。,(3)建立,4.2.2 颜色直方图,(4)区分颜色直方图和灰度直方图,灰度直方图示例,4.2.2 颜色直方图,(5)小结,优点:计算简单,对平移和旋转不敏感,能简单描述 一幅图像中颜色的全局分布。缺点:无法捕捉颜色组成之间的空间关系,丢失了 图像的空间信息。,4.2.3 颜色矩,颜色矩是以数学方法为基础的,通过计算矩来描述颜色的分布。颜色矩通常直接在RGB空间计算。颜色分布的前三阶矩表示为:,4.2.3 颜色矩,特点 图像的颜色矩有九个分量(3个颜色
7、分量,每个分量上3个低阶矩);与其它颜色特征相比非常简洁;分辨力较弱;颜色矩一般和其它特征结合使用,起到缩小范围的作用。,定义:设BM是M维的二值空间,在BM空间的每个轴对应唯一的索引m。一个颜色集就是BM二值空间中的一个二维矢量,它对应着对颜色m的选择,即颜色m出现时,cm=1,否则,cm=0。,4.2.4 颜色集,4.2.4 颜色集,实现步骤:对于RGB空间中任意图像,它的每个像素可以表示为一个矢量。变换T将其变换到另一与人视觉一致的颜色空间,即。采用量化器QM对 重新量化,使得视觉上明显不同的颜色对应着不同的颜色集,并将颜色集映射成索引m。,与颜色直方图的关系:颜色集可以通过对颜色直方图
8、设置阈值直接生成。如对于一颜色m,给定阈值m,颜色集与直方图的关系如下:因此,颜色集表示为一个二进制向量。,4.2.4 颜色集,4.2.4 颜色集,颜色集同时考虑了颜色空间的选择和颜色 空间的划分。使用颜色集表示颜色信息时,通常采用 HSI颜色空间。,4.2.5 颜色聚合向量,颜色直方图的一种演变,核心思想是将属于直方图每个颜色区间的像素分为两部分,如果该区间中的某些像素所占据的连续区域面积大于给定的阈值,则该区域内的像素作为聚合像素,否则为非聚合像素。表示为:,其中i与i分别代表直方图的第i个bin中聚合像素和非聚合像素的数量。,4.2.6 颜色相关图,不仅刻画了某一种颜色的像素占整个图像的
9、比例,还反映了不同颜色对之间的空间相关性;颜色相关图可以看作是一张用颜色对索引的 表,其中的第k个分量表示颜色为c(i)的像素和 颜色为c(j)的像素之间的距离小于k的概率;,4.2.6 颜色相关图,设I表示整张图像的全部像素,Ic(i)则表示颜色为c(i)的所有像素。颜色相关图可以表达为:,其中 i,j 1,2,N,k 1,2,d,|p1 p2|表示像素p1和p2之间的距离。,4.3 图像的纹理分析技术,纹理 纹理指的是图像像素灰度或颜色的某种变化。,4.3.1 引言,Texture tells us information about spatial arrangement of the
10、colors or intensities in an image.,具有周期性;不依赖于颜色或亮度;,4.3.1 引言,几种纹理图像,4.3.1 引言,包含多个纹理区域的图像,一些典型的纹理图像,4.3.1 引言,纹理特征纹理特征是从图像中计算出来的一个值,对区域内部灰度级变化的特征进行量化。是一种全局特征,仅利用纹理特征无法获得高层次图像内容。不是基于像素点的特征,需要在包含多个像素点的区域中进行统计计算。具有旋转不变性,且对噪声有较强的抵抗能力。当图像分辨率变化的时候,计算出来的纹理可能会有较大偏差。适用于检索具有粗细、疏密等方面较大差别的纹理图像。,4.3.1 引言,4.3.1 引言,
11、纹理特征的表示,(1)Haralick等用共生矩阵来表示纹理特征;(2)Tamura纹理特征:基于人类对纹理的视觉感知心理学研究;包含6个分量:粗糙度、对比度、方向度、线像度、规整度及粗略度;6个分量对应于心理学角度上纹理特征的6种属性;,4.3.1 引言,纹理分析定义:通过一定的图像处理技术抽取出纹理特征,从而获得纹理的定量或定性描述的处理过程。,基本过程:从像素出发,在纹理图像中提取出一些辨识力比较强的特征,作为检测出的纹理基元,并找出纹理基元排列的信息,建立纹理基元模型,然后再利用此纹理基元模型对纹理图像进一步分割、分类或是辨识等处理。,4.3.1 引言,纹理特征描述方法分类,(1)统计
12、方法灰度共生矩阵(2)几何法纹理基元(3)模型法构造图像的模型(4)信号处理法,纹理特征的提取与匹配,4.3.1 引言,Tamura 纹理特征自回归纹理模型小波变换 灰度共生矩阵,4.3.2 Tamura 纹理特征,基于人类对纹理的视觉感知心理学研究;其6个分量对应于心理学角度上纹理特征的6种属性;粗糙度,对比度,方向度,线像度,规整度以及粗略度;,粗糙度,1.计算图像中各像素在大小为2k2k邻域中的均值;,4.3.2 Tamura 纹理特征,k=1,2,5;g(i,j)是位于(i,j)的像素灰度值,2.计算每个像素在水平和垂直方向上互不重叠的窗口之间的均值之差;3.对每个像素,能使E值(无论
13、方向)达到最大的k值用来设置最佳尺寸;,粗糙度,4.3.2 Tamura 纹理特征,4.对于整幅图像(大小为mn)中的每个像素,计算Sbest的平均值得到粗糙度的数值:,粗糙度,4.3.2 Tamura 纹理特征,对粗糙度的描述只有一个数值,它反映的是一幅图像平均的粗糙程度。对于纹理图像具有一致基元尺寸时,这种描述是最优的。对具有不同尺寸分布的纹理图像,这种描述将损失大量图像信息。,方向度,1.计算每个像素的梯度向量,梯度向量的模和方向分别为:,4.3.2 Tamura 纹理特征,其中两个delta值分别是通过图像卷积下列两个操作符所得到的水平和垂直方向上的变化量定义的:,2.构造方向(值)的
14、直方图;该直方图对于具有明显方向性的图像会表现出峰值,对于无明显方向的图像则表现的比较平坦。3.计算图像总体的方向性。再通过一个公式计算直方图中峰值的尖锐程度得到图像总的方向性,方向度,4.3.2 Tamura 纹理特征,对比度,对比度是通过对像素强度分布情况的统计得到的。,其中4=4/4,4 是四阶中心矩,而2是方差。,4.3.2 Tamura 纹理特征,4.3.3 自回归纹理模型,自回归纹理模型(SAR)是Markov随机场(MRF)模型的一种应用实例。如果s代表某个像素,则其强度值g(s)可以表达为:最小误差法(least square error)和极大似然估计(maximum lik
15、elihood estimation)可以用来计算模型中的参数。,4.3.4 基于小波变换的纹理特征,对一幅图像进行小波分解,得到一系列的小波系数;例如一幅1616的图像经过三层小波分解,可得到十块小波分解结果,共256个系数;,小波分解示意图,4.3.4 基于小波变换的纹理特征,分解出来的子图像称为小波分解通道,共有四种小波通道:LL,LH,HL以及HH;每个通道对应于原始图像在不同尺度(频率)和方向下的信息:LL 图像在水平低频和垂直低频下的信息;LH 图像在水平低频和垂直高频下的信息;HL 图像在水平高频和垂直低频下的信息;HH 图像在水平高频和垂直高频下的信息;,4.3.4 基于小波变
16、换的纹理特征,当图像在某个频率和方向下具有比较明显的纹理特征时,与之对应的小波通道的输出就具有较大的能量;纹理特征可以由小波通道的能量和方差来表示:,HH通道反映的是图像的高频特征,包含了大部分的噪声,不适合用于纹理的提取;,使用阴影部分的七个通道进行纹理分析。,4.3.4 基于小波变换的纹理特征,4.3.5 空间灰度共生矩阵,灰度共生矩阵就是从NN的图像f(x,y)的灰度为i的像素出发,统计与距离为=(dx2+dy2)1/2,灰度为 j的像素同时出现的概率P(i,j,)。用数学表达式则为:,灰度共生矩阵的像素对,0o方向灰度共生矩阵计算示意图,一幅数字灰度图像,(1)各个方向的灰度共生矩阵,
17、当=0 时,dx=1,dy=0,由于所给图像中只有4个灰度级,因此所求得的灰度共生矩阵的大小为44。,4.3.5 空间灰度共生矩阵,45o方向灰度共生矩阵计算示意图,当=45 时,dx=1,dy=-1,当=90 时,dx=0,dy=-1,90o方向灰度共生矩阵计算示意图,(1)各个方向的灰度共生矩阵,4.3.5 空间灰度共生矩阵,135o方向灰度共生矩阵计算示意图,当=135 时,dx=-1,dy=-1,(1)各个方向的灰度共生矩阵,4.3.5 空间灰度共生矩阵,灰度共生矩阵计算结果:,(1)各个方向的灰度共生矩阵,4.3.5 空间灰度共生矩阵,用于测量灰度级分布随机性的一种特征参数叫做熵。熵
18、值是图像内容随机性的量度,熵值大表示随机性比较强。若图像没有任何纹理,则灰度共生矩阵几乎为零矩阵,则熵值接近为零;若图像有较多的细小纹理,则灰度共生矩阵中的数值近似相等,则图像的熵值最大。熵值的定义:,(2)熵值,4.3.5 空间灰度共生矩阵,能量:对比度:均匀度:,(3)能量、对比度、均匀度,反映均匀性或平滑性,反映图像点对中前后点间灰度差的度量,反映图像的均匀程度,能量是灰度共生矩阵各元素值的平方和,它是图像灰度分布均匀性或平滑性的度量,反映了图像的均匀程度和纹理粗细度,是影像纹理灰度变化均一性的度量。能量值大表明当前纹理是一种规则变化较为稳定的纹理。当灰度共生矩阵中元素分布较集中在主对角
19、线附近值,说明局部区域内图像灰度分布较均匀。从图像整体看,纹理粗糙,则能量值应较大。反之,能量值较小,图像比较均匀或平滑。对比度又称主对角线惯性矩,用于度量灰度共生矩阵的分布和图像局部的变化,即图像点对中前后点之间灰度差的度量,反映图像清晰度和纹理的沟纹深浅。图像局部变化越大,即灰度差大的点对大量出现,则对比度越大,图像较粗糙,视觉效果越清晰;反之,图像较柔和。因此,图像的对比度可理解为图像的清晰度,即纹理清晰程度。,灰度共生矩阵的优点:特别适用于描述微小纹理;易于理解和计算;灰度共生矩阵的缺点:不适合描述含有大面积基元的纹理,因为矩阵没有包含形状信息;矩阵的大小只与最大灰度级有关系,而与图像
20、大小无关;,(4)小结,4.3.5 空间灰度共生矩阵,4.3.6 纹理能量测量,Laws的纹理能量测量方法是一种典型的一阶分析方法。基本思想是设置两个窗口:一个是微窗口,可能为33、55、77像素,通常取55,用来测量以像元为中心的小区域内灰度的不规则性,以形成属性,也称之为窗口滤波;,4.3.6 纹理能量测量,二是宏窗口,可以为1515或3232,用来在 更大的窗口上求属性量的一阶统计特性,常为 均值或标准偏差,也称为能量变换。其具体实 现就是用定义的一些模板与图像进行卷积,以 便于检测出不同的纹理能量信息。,纹理能量检测模板,4.3.6 纹理能量测量,4.3.7 纹理的结构分析方法,是除统
21、计方法之外的另一类纹理分析方法。该方法认为纹理是由结构基元按照某种重复性规则而构成的模式,其表述过程实际是对纹理基元的提取以及对基元分布规则的描述。纹理的空间组织可以是随机的,可能一个基元对相邻基元有成对的依赖关系,或者几个基元同时相互关联。这样的关联可能是结构的、概率的或是函数的。,纹理基元可以是一个像素点,也可以是若干个灰度上比较接近的像素点的集合。由基元可以构成较为基本的、同时也是比较小的子纹理。最后纹理按某种空间组织规则合成为一幅完整的纹理图像。,4.3.7 纹理的结构分析方法,给出三个纹理基元合成为一个子纹理的过程,对产生的子纹理应用规则的空间组织规则形成了如图所示的纹理图像。如果给
22、出纹理基元h(x,y)的排列规则r(x,y),就能够将这些基元按照规定的方式组织成所需的纹理模式t(x,y)。可将纹理t(x,y)定义为:,4.3.7 纹理的结构分析方法,纹理基本上是区域特性,图像中的区域对应景物中的表面,纹理基元在尺寸和方向上的变化,可以反映出景物中表面相对于照相机的转动倾斜。通常将利用纹理基元的变化去确定表面法线方向的技术,称为纹理梯度技术,也就是常说的从纹理到形状的研究。,4.3.8 纹理梯度,4.4 形状特征描述,4.4.1 引言4.4.2 区域描述 4.4.3 区域边界的形状特征描述,4.4.1 引言,形状特征的表达必须以对图像中物体或区域的分割为基础;形状特征必须
23、满足对变换、旋转和缩放无关;形状特征的表示方法:基于边界和基于区域。,形状特征的区域表示法:用物体区域的整体性质来表示;分散度,伸长度,欧拉数,区域面积,重心,周长等;形状特征的边界表示法:用物体或区域的外边界来表示;边界的长度,直径;边界的曲率;链码描述;傅立叶描述符;基于内角的表示法;,4.4.1 引言,4.4.1 引言,4-邻域和8-邻域,对于任意像素(i,j),(s,t)是一对适当的整数,则把像素的集合(i+s,j+t)叫做(i,j)的邻域。常用4-邻域和8-邻域。,邻域与邻接,互为4-邻域的两像素叫4-邻接。互为8-邻域的两像素叫8-邻接。,像素的编号 4邻接 8邻接,对于图像中具有
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 图像 特征 提取 分析 剖析 课件
链接地址:https://www.31ppt.com/p-3587425.html