通信网--中国通信行业门户网站 | 中国行业网站集群--通信行业电子商务唯一网站 设为首页 | 收藏本站
免费注册 商机无限 商务中心 行业展会 立即发布商机
网站首页 公司库 产品库 商机库 行业资讯 展会信息 招聘信息 招商加盟 下载中心 招标信息
关键词:
热门词汇: IP网络电话   语音识别   手机充电器   手机GPS   3G手机   传输设备   交换设备
  行业要闻 | 通信市场 | 通信技术 | 网络学院 | 5G前沿 | 4G前沿 | VoIP | IPTV | WiMAX | 呼叫中心 | IT制造 | IT就业  
  企业专栏 | 企业报道 | 通信标准 | 通信百科 | 分析预测 | 手机评测 | 增值通信 | 政策法规 | 专家观点 | 网商访谈 | 招标信息 | 物联网
网上展览:
综合厂商 | 手机 | IP电话 | 交换机 | 呼叫中心 | 网络 | 终端 | 电源 | 仪器 | 光纤 | 电缆 | 电脑 | 数码 | 软件 | 其他
中国通信网最新加盟企业: 
当前位置:网站首页 > 行业资讯 > 通信技术
【创心服务 联通你我】青春逢盛世,奋斗正当时
中国通信网 时间:2009-07-22 信息来源: 通信学报

    1引言

    人是视频图像活动对象的重要的主体之一,皮肤是人体最显著的生理特征之一,皮肤区域检测已经成为提取视频中人体语义概念的重要技术基础。皮肤检测一方面是人脸检测和跟踪、人体姿态识别等应用的基础和关键步骤;另一方面,由于互联网上大量包含敏感色情内容的图片和视频,对人们特别是青少年产生了不可忽视的毒害作用,而采用图像内容分析技术来过滤可能的色情图片是有效的解决方案,其中,皮肤检测是至关重要的一个步骤。本文研究面向互联网视频的皮肤区域检测技术,为各类视频中人体语义概念提取应用提供技术基础。

    图像和视频中的皮肤区域检测具有许多共同的技术基础,就其本质来说,视频中皮肤区域检测是对时间轴上连续的多帧图像进行皮肤区域检测,通常可利用多帧图像的检测结果,综合判定皮肤区域,有可能降低误判率。然而,视频图像的分辨率较低,特别是面向在线播放业务的视频内容,其中80%以上分辨率仅在QVGA(320×240)左右,而且压缩比高,图像质量较差,因此,就单帧视频图像的皮肤区域检测来说,其面临比图像检测更大的挑战,传统的皮肤区域检测技术对网络视频图像往往会有较高的误判率或漏判率。

    2相关工作介绍

    皮肤区域检测技术属于基于内容的图像检测技术(CBIR,content-basedimageretrieval)范畴,跟其他CBIR一样,都是对某个对象或概念的抽象描述,这种抽象一般很难有一个完整标准的定义,因此要将概念转换成算法,就不可能只从单一的特征着手。因此,皮肤区域检测,通常都会用到多项特征,例如颜色、形状、面积、纹理等。

    基于统计的肤色检测是皮肤区域检测的基础,主要步骤是颜色空间变换和肤色建模。肤色的统计特征在不同颜色空间会有不同的呈现,选择颜色空间本身就是选择肤色检测的最基本特征表示,研究分析结果表明颜色空间的变换并不能改善肤色紧致性、肤色和非肤色可分辨性以及分类等性能,但RGB及线性变换空间却具有较好的类可分辨性和分类性能[1]。

    肤色检测的相关理论,文献[2,3]中做了较好的综述,这里再做简要总结。通过训练样本集建立肤色模型是肤色检测的关键,根据不同应用可以将肤色建模分为静态和动态2类。目前常用的静态肤色建模基本方法有3种:肤色范围、高斯密度函数估计和直方图统计,3者分别对应阈值化、参数化和非参数化方法。

    用数学表达式明确规定肤色范围是一种简单的肤色建模方法,例如Chai采用YCbCr颜色空间的CbCr平面,如果输入像素的颜色落入RCr=[133,l73]和RCb=[77,127]限定的矩形区域,则判定属于肤色像素[4]。其优点是算法简单,非识别准确率不高。

    高斯密度函数估计是一种参数化建模,可以用单峰高斯模型SGM[5]或高斯混合模型GMM[6],并依靠模型计算像素点为肤色点和非肤色点的概率,根据概率大小判定是否属于肤色点。

    直方图肤色模型是一种非参数模型。利用肤色样本的直方图统计可以构造肤色概率图,它为离散化的颜色空间中的不同区域赋予不同的肤色概率值,将输入像素点转换到与之相同的颜色空间,然后在肤色概率图中查找它所处区域属于肤色点的概率,以判决它是否为肤色点。与此不同,贝叶斯分类器则同时利用肤色样本和非肤色样本的概率图,通过这2个先验概率,利用贝叶斯来计算获得像素点为肤色点的概率[7],由于该方法同时使用了正反样本,理论上可获得更好的分类效果。然而,样本的选择是影响直方图肤色模型性能的决定因素,必须要选择典型的样本,否则样本会呈指数式增长。

    肤色的动态建模方法可以分成2类:第一类方法是可以将肤色模型参数调节到适应某幅静态图像;第二类方法是针对序列图像,能适应成像条件随时间的变化。这些自适应方法所建立的动态肤色模型的通用性可能较差,但是在特定条件下的性能更优,能获得高检测率和低误检率。

    单纯以肤色进行皮肤区域的检测,有可能产生误判情形:类似皮肤颜色的对象或背景,比如沙漠、黄色的墙壁、沙发、地板、卡通场景对象等。因此,有必要引入更多的皮肤区域的特征,比如,利用Sobel边缘检测[8]和Gabor滤波获得皮肤纹理信息[9]来确定可能的皮肤区域;提取皮肤区域的颜色向量集中程度以滤除误检测的皮肤区域。利用这些综合特征信息,借助Adaboost算法自动学习皮肤区域的颜色、形状和纹理等特征,以建立更好的皮肤区域分类器,从而获得更精准的检测结果。然而,这些肤色检测方法在提高肤色检测准确率的同时也导致了检测速度严重下降,不适合实时性要求高的应用。

    本文充分利用互联网视频的特点,从改进皮肤区域检测入手,综合应用人脸检测和关键部位检测,有效提高了视频中皮肤区域检测的准确率和召回率,并尽可能保证检测算法的速度,以满足实时检测的需求。

    3本文工作

    为适应低分辨率和低质量视频中皮肤区域检测任务的需求,首先对现有肤色像素点检测算法改进,之后利用区域分布特性、基于灰度共生矩阵的纹理特性等特征进一步去除可能的误检区域,细化实际的皮肤区域。

    3.1改进的肤色检测

    互联网上视频图像受分辨率、码率限制,图像一般较差,尤其是视频分享网站中自拍视频,光线变化范围非常大。受这些因素影响,原肤色检测算法性能大打折扣,本文设计了一种改进的肤色检测算法。

    首先,选择合适的颜色空间。虽然,颜色空间的变换并不能从本质上改善肤色检测的效率,为了尽可能提高肤色检测的效率,选择在YUV空间进行肤色检测,其原因在于几乎所有视频编码标准都以YUV作为其标准的输入输出,无需进行额外的空间转换。

    其次,对视频帧图像进行预处理。对图像进行光线补偿、自动白平衡、自动伽玛矫正等预处理。预处理尤其对于互联网上自拍类视频的皮肤区域的检测有重要作用。这类视频受拍摄条件限制,光线、曝光度明显区别于专业摄制的视频,画面要么严重偏暗,要么过亮,或者受光线影响,皮肤区域严重偏色。预处理提高了这类视频中皮肤区域的检测的准确率和召回率,是关键步骤之一。

    接下来,建立YUV空间上的肤色模型。在YUV空间中,定义肤色色调,根据大量图像的彩色分析,可以确定人的肤色色调的变化范围。但是该模型也会把一些与人的肤色比较接近的其他区域当作肤色区域。例如该模型难以把肤色与棕色头发或灰色背景分开。为此,需要在YIQ颜色空间中滤掉其他成分。如图1所示,在YIQ空间中,I分量代表从桔黄到蓝绿的色调,I值越小,包含的黄色越多,蓝绿色越小,所以肤色在YIQ空间内I值在一个范围里变化,通过实验,确定其合适的参数范围,该参数可用于在自适应的肤色检测控制。

    应用该肤色模型,遍历图像中像素点,判定其为肤色点或非肤色点。对所有肤色点用线段编码的方式进行记录。该算法能够将连续的肤色点识别为同一个对象。同时将非肤色点像素重置为黑色,以便于后续处理。图2是处理前后的2帧图像实例。

    图1YIQ颜色空间中色度信号矢量图

    图2肤色点检测前后的图像比较

    3.2连通区域特性

    记录获得的皮肤区域是进一步提取视频中人体语义概念的基础。在肤色检测过程中,以线段编码算法记录可能的皮肤区域。

    获得可能皮肤区域的线段编码之后,进一步通过腐蚀和膨胀的方式,对所获得的区域进行裁剪,去除非皮肤区域,裁剪原则包括:

    1)皮肤区域的宽度大于阈值T1,T1与视频图像宽度成正比;

    2)皮肤区域的高度大于阈值T2,T2与视频图像高度成正比;

    3)皮肤区域的面积应大于阈值T3,T3与视频图像面接成正比。

    制定以上原则的理由在于,在以人的活动为主的视频中,人绝大部分情况下为内容的主体,相应地,皮肤区域也占据较大的区域比例。如果区域尺度过小,通常为颜色上比较接近肤色的其他对象区域。

    3.3基于灰度共生矩阵的纹理度量

    为避免颜色类似肤色的对象被认为是皮肤,引入纹理特性来进一步分辨可能的皮肤区域。人眼对亮度分量的感知明显高于色度分量,因此只考虑亮度分量的纹理,具体使用其共生矩阵(co-occurrencematrix)予以衡量。灰度共生矩阵[10]用2个位置的像素的联合概率密度来定义,它不仅反映亮度的分布特性,也反映具有同样亮度或接近亮度的像素之间的位置分布特性,是有关图像亮度变化的二阶统计特征。它是定义一组纹理特征的基础。

    一幅图像的灰度共生矩阵能反映出图像灰度关于方向、相邻间隔、变化幅度的综合信息,它是

    分析图像的局部模式和它们排列规则的基础。

    设f(x,y)为一幅二维数字图像,其大小为M×N,灰度级别为L,则满足一定空间关系的灰度共生矩阵为

    其中,num{x}表示集合x中的元素个数,显然P为L×L的矩阵,若(x1, y1)与(x2, y2)间距离为d,两者与坐标横轴的夹角为θ,则可以得到各种间距及角度的灰度共生矩阵P(i, j, d,θ)。

    纹理特征提取的一种有效方法是以灰度级的空间相关矩阵即共生矩阵为基础的,因为图像中相距(∆x,∆y)的2个灰度像素同时出现的联合频率分布可以用灰度共生矩阵来表示。若将图像的灰度级定为L级,那么共生矩阵为L×L矩阵,可表示为M(∆x,∆y)(h,k),其中位于(h,k)的元素m(h, k)的值表示一个灰度为h而另一个灰度为k的2个相距为(∆x, ∆y)的像素对出现的次数。

    对粗纹理的区域,其灰度共生矩阵的m(h,k)值较集中于主对角线附近。因为对于粗纹理,像素对趋于具有相同的灰度。而对于细纹理的区域,其灰度共生矩阵中的m(h,k)值则散布在各处。为了能更直观地以共生矩阵描述纹理状况,从共生矩阵导出2种反映矩阵状况的参数,进行区域纹理复杂性度量。

    1)能量:灰度共生矩阵元素值的平方和,所以也称能量,反映了图像灰度分布均匀程度和纹理粗细度。如果共生矩阵的所有值均相等,则值小;相反,如果其中一些值大而其他值小,则值大。当共生矩阵中元素集中分布时,该值大。该值大时表明一种较均一和规则变化的纹理模式。

    2)逆差距:反映图像纹理的同质性,度量图像纹理局部变化的多少。其值大则说明图像纹理的不同区域间变化少,局部非常均匀。

    为降低纹理特性度量开销,仅对上节检测出的可能皮肤区域进行灰度共生矩阵的计算。

    4实验结果

    为了验证算法在皮肤区域检测上的查准率、查全率和检测速度等性能指标,设计了如下系统。

    系统从特定网络路由网关上捕捉视频解码数据流量,从中选取1000个访问频率较高的节目,分辨率主要包括320×240、352×240等。

    将这些节目数据解码,每个节目截取有代表性的10帧图像,对共计10000幅图像按照包含皮肤区域所占百分比进行分类、标注,获得如表1所示的结果。

    表1 测试数据分类结果

    用设计的皮肤区域检测算法进行检测,记录每幅图像所检测出的皮肤区域所占百分比,并与标注百分比进行比对,并计算相应的准确率和召回率。

    表2中的准确率和召回率分别按照式(1)和式(2)计算。

     

    式(1)和式(2)中,检测正确的图像数是指检测出的皮肤区域与实际的百分比之绝对差小于段区间10%的图像数目,比如对区间(20%,50%]而言,检测结果与实际百分比绝对差小于,则认为检测结果正确。

    表2 皮肤区域检测结果

    

    从表2结果可以看出,本文算法在检测皮肤区域百分比不同的图像中,均有较高的准确率,而召回率在不同图像则有较大波动,在皮肤区域大于50%或小于1%时,召回率较高,而在其他情况下,召回率有较大降低,这主要受区域检测中的区域裁剪阈值设定的影响,需要设计自适应的区域裁剪算法以改善裁剪效果。

    5结束语

    从网络随机选择的1000个网络视频的实验结果表明:该算法能够自适应地准确检测视频图像中的皮肤区域,具有95%左右的准确率和72%左右的召回率。

    算法在YUV空间进行皮肤区域的检测,减少了色彩空间转换导致的计算量增加,同时采用的检测技术进行优选、结构优化组合,保证了算法有较好的运算速度。同时,线段编码记录的皮肤区域可用于进一步的姿态识别、人脸跟踪等视频语义概念的提取。

相关资讯
· 【创心服务 联通你我】青春逢盛世,奋斗正当时 (2012-01-17)
· 【创心服务 联通你我】青春逢盛世,奋斗正当时 (2012-01-17)
· 【创心服务 联通你我】青春逢盛世,奋斗正当时 (2012-01-16)
· 【创心服务 联通你我】青春逢盛世,奋斗正当时 (2012-01-16)
· 【创心服务 联通你我】青春逢盛世,奋斗正当时 (2012-01-12)
发表评论
昵   称:   匿名发表
验证码: 
 
热门资讯
【创心服务 联通你我】青春逢盛... (2009-09-15)
【创心服务 联通你我】青春逢盛... (2011-04-28)
【创心服务 联通你我】青春逢盛... (2009-09-16)
【创心服务 联通你我】青春逢盛... (2008-07-15)
【创心服务 联通你我】青春逢盛... (2008-05-23)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2012-01-09)
【创心服务 联通你我】青春逢盛... (2011-01-30)
【创心服务 联通你我】青春逢盛... (2010-05-28)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2011-02-17)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2009-08-13)
【创心服务 联通你我】青春逢盛... (2011-05-03)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2009-08-12)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2008-07-31)
【创心服务 联通你我】青春逢盛... (2010-07-20)
【创心服务 联通你我】青春逢盛... (2009-08-12)
【创心服务 联通你我】青春逢盛... (2010-08-27)
【创心服务 联通你我】青春逢盛... (2009-10-11)
【创心服务 联通你我】青春逢盛... (2009-08-12)
【创心服务 联通你我】青春逢盛... (2009-07-24)
国之鑫科技 | 泰尔网 | 中华网科技 | 信息产业网 | 通讯世界 | 数字通信世界 | 文传商讯 | 中华英才网 | 电话视频会议 | 凤凰科技 | 呼叫中心 | 新浪科技 | 新传媒网 | 和讯科技 | 中国科技网 | 通信英才网 | 江苏星光发电设备 | 中劳网 | 赛迪网 | MSCBSC移动通信网 | 中国软件网 | 新华网 | 腾讯科技 | 3G通信网 | 千龙网 | 光通信人才招聘网 | 通信人才网 | 中商顾问网
返回首页 | 网站简介 | 企业理念 | 免责声明 | 广告服务 | 代理政策 | 联系我们 | 铭万网 | 中国产品推广联盟
南京国之鑫科技有限公司版权所有©2008-2016 客户服务热线:025-83752991, 客户服务邮箱:gzx@gzxinfo.com
苏ICP备18005078号-1
本站图片及文字仅供功能演示,本站保留对本演示内容及功能的最终解释权

加入铭万联盟中国行业网站集群独家技术供应商